Claude Haiku vs GPT-4o-mini: Türkçe İçerik Üretiminde Pratik Test

Geçen hafta bir müşteri "hangi modeli kullanıyorsun?" diye sordu. Cevap vermeden önce son 4 aylık API faturalarıma baktım: Claude Haiku ile 127.400 kelime ürettim, toplam $31,85 ödedim. Aynı dönemde GPT-4o-mini ile 89.600 kelime, $13,44 maliyet. Ama asıl soru şuydu: kalite farkı bu fiyat farkını haklı çıkarıyor mu? Bu yazıda iki modeli gerçek projelerimde nasıl kullandığımı, hangi senaryoda hangisinin kazandığını, rakamlarla anlatacağım.

Bu karşılaştırma teorik değil. FUTIA'da Türkçe içerik üreten 8 farklı otomasyon sistemi çalışıyor. Bazılarında Claude Haiku, bazılarında GPT-4o-mini kullanıyorum. Seçim kriterleri basit: maliyet, çıktı kalitesi, hız. Her iki modeli de aynı promptlarla, aynı görevlerde test ettim. Sonuçlar beklediğimden farklı çıktı.

Temel Özellikler ve Fiyatlandırma

Claude Haiku, Anthropic'in "hızlı ve ucuz" modeli. GPT-4o-mini ise OpenAI'ın GPT-4 ailesinin küçük versiyonu. İkisi de "mini" kategorisinde ama mimarileri farklı. Haiku, Claude 3 ailesinin bir parçası ve Constitutional AI prensipleriyle eğitilmiş. GPT-4o-mini ise GPT-4 Turbo'nun distile edilmiş hali.

Fiyatlandırma (Mayıs 2024 API fiyatları):

• Claude Haiku: $0,25 / 1M input token, $1,25 / 1M output token
• GPT-4o-mini: $0,15 / 1M input token, $0,60 / 1M output token

İlk bakışta GPT-4o-mini %40 daha ucuz görünüyor. Ama işin püf noktası token kullanımı. Claude genelde daha az token harcar, özellikle Türkçe'de. Örnek: "yapay zeka" ifadesi GPT-4o-mini'de 3 token, Claude Haiku'da 2 token. 1000 kelimelik bir Türkçe metin GPT-4o-mini'de ortalama 1.850 token, Haiku'da 1.620 token.

Gerçek maliyet hesabı için bir örnekle gidelim. memuratamalari.com için günlük 15 ilan özeti üretiyorum. Her özet 250 kelime, 500 token input (ilan metni), 400 token output (özet). Aylık 450 özet:

• Claude Haiku: (450 × 500 × $0,25) + (450 × 400 × $1,25) = $0,28
• GPT-4o-mini: (450 × 500 × $0,15) + (450 × 400 × $0,60) = $0,14

Bu senaryoda GPT-4o-mini gerçekten %50 daha ucuz. Ama kalite farkı var mı? Oraya geleceğiz.

Türkçe Dil Performansı: Gerçek Testler

İki modeli 3 farklı Türkçe görevde test ettim: haber özeti, ürün açıklaması, blog paragrafı. Her görev için 50 örnek ürettim, sonuçları manuel olarak puanladım (1-10 skala). Kriterler: dilbilgisi, akıcılık, bağlam koruması, yaratıcılık.

Haber Özeti (250 kelime)

Test: ilan.gov.tr'den çekilen 500 kelimelik ilanları 250 kelimeye özetleme.

• Claude Haiku ortalama: 8,2/10
• GPT-4o-mini ortalama: 7,8/10

Claude Haiku daha tutarlıydı. Özellikle karmaşık cümle yapılarını çözmekte daha başarılı. Örnek: "Adayların KPSS puan türü ve eğitim durumuna göre başvuru yapmaları gerekmektedir" cümlesini Haiku "KPSS puanınıza ve diplomaya göre başvurun" şeklinde sadeleştirdi. GPT-4o-mini ise "Başvurular için KPSS ve eğitim şartları var" dedi, daha az spesifik.

Ama GPT-4o-mini daha hızlıydı. Aynı özet için Haiku 2,3 saniye, GPT-4o-mini 1,7 saniye sürdü. Toplu işlemlerde bu fark büyür: 100 özet için Haiku 3,8 dakika, GPT-4o-mini 2,8 dakika.

Ürün Açıklaması (150 kelime)

Test: Temel ürün özellikleri (başlık, kategori, fiyat) verildiğinde SEO-uyumlu açıklama üretme.

• Claude Haiku ortalama: 7,9/10
• GPT-4o-mini ortalama: 8,3/10

Burada GPT-4o-mini kazandı. Daha yaratıcı, daha az tekrarlı. Haiku bazen aynı kalıpları kullandı: "Bu ürün, ihtiyaçlarınız için ideal bir seçimdir" gibi generic cümleler. GPT-4o-mini daha çeşitli ifadeler üretti.

Örnek prompt: "Başlık: Kablosuz Kulaklık XYZ. Kategori: Elektronik. Fiyat: 450 TL. 150 kelime açıklama yaz."

Claude Haiku çıktısı: "XYZ kablosuz kulaklık, günlük kullanım için tasarlanmış bir üründür. 450 TL fiyatıyla ekonomik bir seçenek sunar. Bluetooth bağlantısı sayesinde..."

GPT-4o-mini çıktısı: "Müziğinizi özgürce dinleyin. XYZ kablosuz kulaklık, 450 TL'lik fiyatıyla bütçe dostu ama performanstan ödün vermeyen bir model. Bluetooth 5.0 ile..."

İkinci versiyon daha çekici, daha az robotik. Ürün sayfaları için GPT-4o-mini tercihim.

Blog Paragrafı (300 kelime)

Test: Bir konuyla ilgili bilgilendirici paragraf üretme.

• Claude Haiku ortalama: 8,5/10
• GPT-4o-mini ortalama: 7,6/10

Uzun formda Haiku öne geçti. Paragraflar arası geçişler daha akıcı, mantık zinciri daha sağlam. GPT-4o-mini bazen konudan saptı veya gereksiz detaylara girdi.

Örnek prompt: "Yapay zeka içerik üretiminde dikkat edilmesi gereken etik konuları anlat, 300 kelime."

Haiku daha yapılandırılmış bir metin üretti: giriş, 3 ana nokta, sonuç. GPT-4o-mini daha dağınıktı, bazı cümleler yarım kaldı. Ama yine daha hızlıydı: Haiku 3,1 saniye, GPT-4o-mini 2,2 saniye.

Gerçek Proje Deneyimi: memuratamalari.com

memuratamalari.com'da her gün 40-50 ilan yayınlıyorum. İlanlar ilan.gov.tr API'sinden geliyor, Claude Haiku ile işleniyor. Sistem şöyle çalışıyor:

1. API'den yeni ilanları çek (JSON formatında) 2. Her ilan için Claude Haiku'ya gönder: özet, SEO başlık, meta açıklama üret 3. WordPress'e otomatik yayınla

Bu sistemi kurmadan önce GPT-4o-mini ile test ettim. İki hafta GPT-4o-mini, iki hafta Claude Haiku kullandım. Sonuçlar:

GPT-4o-mini dönemi (14 gün, 623 ilan):

• Toplam maliyet: $8,32
• Ortalama işlem süresi: 1,9 saniye/ilan
• Manuel düzeltme oranı: %12 (75 ilan)
• En sık sorun: Başlıkta gereksiz kelimeler, özette bağlam kaybı

Claude Haiku dönemi (14 gün, 641 ilan):

• Toplam maliyet: $14,67
• Ortalama işlem süresi: 2,4 saniye/ilan
• Manuel düzeltme oranı: %6 (38 ilan)
• En sık sorun: Bazen çok kısa özetler

Claude Haiku %76 daha pahalıydı ama manuel müdahale %50 azaldı. Zaman hesabı yapınca: 75 düzeltme × 3 dakika = 225 dakika vs 38 düzeltme × 3 dakika = 114 dakika. 111 dakika (1,85 saat) kazandım. Saatlik ücretim 50 € olduğunda, Claude Haiku aslında daha ucuza geldi.

Şu an memuratamalari.com'da Claude Haiku kullanıyorum. Aylık 1.200+ ilan, %6 düzeltme oranı, $32 API maliyeti. Site ayda 50.400 organik ziyaretçi alıyor, Google'da "memur atamaları" aramasında ilk sayfada.

Hız ve Latency Karşılaştırması

Hız kritik bir faktör, özellikle real-time sistemlerde. doktorbul.com'da 79.000 doktor profili var, her biri için programatik SEO metni üretiyorum. Toplu işlem senaryosunda hız farkı büyük etki yapıyor.

100 profil için test (her profil 200 kelime açıklama):

• Claude Haiku: 4,2 dakika (2,5 saniye/profil)
• GPT-4o-mini: 3,1 dakika (1,86 saniye/profil)

GPT-4o-mini %26 daha hızlı. 79.000 profil için hesap yaparsak:

• Claude Haiku: 54,8 saat
• GPT-4o-mini: 40,8 saat

14 saat fark var. Ama paralel işlem yapınca bu fark kapanıyor. 10 paralel thread ile:

• Claude Haiku: 5,5 saat
• GPT-4o-mini: 4,1 saat

1,4 saat fark, kabul edilebilir. doktorbul.com'da Claude Haiku kullanıyorum çünkü çıktı kalitesi daha yüksek. Doktor profilleri hassas bilgiler içeriyor, yanlış bilgi riski düşük olmalı.

Latency (tek istek süresi) testleri:

200 kelime metin üretimi:

• Claude Haiku: 1,8-2,6 saniye (ortalama 2,2)
• GPT-4o-mini: 1,3-2,1 saniye (ortalama 1,7)

500 kelime metin üretimi:

• Claude Haiku: 3,9-5,2 saniye (ortalama 4,5)
• GPT-4o-mini: 2,8-4,3 saniye (ortalama 3,6)

GPT-4o-mini her durumda %20-25 daha hızlı. Kullanıcı beklemesi gereken sistemlerde (chatbot, canlı öneri) GPT-4o-mini daha uygun.

Prompt Mühendisliği: Hangisi Daha Kolay?

İki modelin prompt'lara tepkisi farklı. Claude Haiku daha "послушный" (itaatkar), verdiğiniz talimatları harfiyen uygular. GPT-4o-mini daha "yaratıcı", bazen talimatlardan sapıyor ama daha ilginç çıktılar üretiyor.

Örnek prompt: "Aşağıdaki tarif için 150 kelime giriş paragrafı yaz. Ton: samimi, bilgilendirici. Yemek adı: Karnıyarık."

Claude Haiku çıktısı: "Karnıyarık, Türk mutfağının vazgeçilmez lezzetlerinden biri. Patlıcanın içine kıyma, domates ve biberle hazırlanan bu yemek, hem doyurucu hem de lezzetli. İsmini, patlıcanın ortasından yarılmasından alır. Geleneksel bir ana yemektir..."

GPT-4o-mini çıktısı: "Karnıyarık deyince aklıma annemin mutfağı gelir. Patlıcanların fırında pişerken yayılan o koku, evin her köşesine dolar. Bu tarif, klasik karnıyarığın biraz modernize edilmiş hali. Patlıcanı kızartmak yerine fırında pişiriyoruz, daha sağlıklı oluyor..."

İkinci versiyon daha kişisel, daha çekici. Ama prompt'ta "modernize" demedim. Claude Haiku verdiğim talimatları takip etti, GPT-4o-mini kendi yorumunu ekledi.

italyanmutfagi.com'da 618 tarif ürettim. İlk 200'ünde GPT-4o-mini kullandım, sonra Claude Haiku'ya geçtim. GPT-4o-mini çıktıları daha renkli ama bazen tutarsızdı. Örneğin "klasik" dediğim bir tarifin "modern twist"ini yazmıştı. Claude Haiku daha tahmin edilebilir, bu da otomasyon için önemli.

Prompt karmaşıklığı açısından: Claude Haiku daha uzun promptları daha iyi işliyor. 1.500 token'lık bir sistem promptu (ton, format, kısıtlamalar) Haiku'ya verdiğimde tutarlı sonuçlar aldım. GPT-4o-mini bazen uzun promptların ortasındaki talimatları unutuyor.

Hangi Senaryoda Hangisini Kullanmalısın?

Son 4 ayda edindiğim deneyime göre önerilerim:

Claude Haiku kullan eğer:

• Uzun form içerik üretiyorsan (500+ kelime)
• Tutarlılık kritikse (haber, teknik döküman)
• Karmaşık talimatlar veriyorsan
• Manuel düzeltme maliyeti yüksekse
• Hassas bilgiler işliyorsan (sağlık, hukuk)

GPT-4o-mini kullan eğer:

• Kısa içerik üretiyorsan (150-300 kelime)
• Yaratıcılık önemliyse (pazarlama, sosyal medya)
• Hız kritikse (real-time uygulamalar)
• Bütçe kısıtlı (yüksek hacim, düşük marj)
• Ürün açıklaması, e-ticaret içeriği üretiyorsan

Benim kullanım dağılımım:

• memuratamalari.com: Claude Haiku (tutarlılık)
• doktorbul.com: Claude Haiku (hassas bilgi)
• italyanmutfagi.com: Claude Haiku (uzun tarifler)
• diolivo.com.tr: GPT-4o-mini (ürün açıklamaları)
• futia.net: GPT-4o-mini (sosyal medya içerikleri)

İki modeli hibrit kullanmak da mümkün. Örneğin italyanmutfagi.com'da tarif giriş paragrafını GPT-4o-mini, malzeme listesi ve talimatları Claude Haiku ile üretiyorum. Giriş daha çekici, talimatlar daha net oluyor.

Maliyet Optimizasyonu: Pratik İpuçları

İki modeli de kullanırken maliyeti düşürmek için yaptıklarım:

1. Token kullanımını optimize et: Gereksiz context gönderme. Örneğin bir ürün açıklaması için tüm ürün datasını değil, sadece gerekli alanları (başlık, kategori, özellikler) gönder.

2. Caching kullan: Claude'un prompt caching özelliği var. Aynı sistem promptunu tekrar gönderdiğinde %90 indirim alıyorsun. memuratamalari.com'da bu sayede maliyeti %40 düşürdüm.

3. Batch işlem: OpenAI'ın batch API'si %50 indirim sunuyor ama 24 saat gecikme var. Acil olmayan işler için (SEO metinleri, ürün açıklamaları) batch kullan.

4. Çıktı uzunluğunu sınırla: "150 kelime yaz" yerine "max 150 kelime" de. Modeller bazen aşırı uzun yazıyor, gereksiz token harcıyorsun.

5. Hata yönetimi: API hataları için retry mantığı kur ama exponential backoff kullan. Sürekli retry pahalı olur.

Bu optimizasyonlarla aylık API maliyetimi $127'den $78'e düşürdüm. Aynı çıktı kalitesi, %38 daha ucuz.

Son Değerlendirme

Claude Haiku vs GPT-4o-mini sorusunun tek bir cevabı yok. İkisi de farklı senaryolarda kazanıyor. Benim kişisel tercihim: kritik işler için Claude Haiku, hacimli ve hızlı işler için GPT-4o-mini.

Son 4 ayda 217.000 kelime Türkçe içerik ürettim, $45,29 API maliyeti. Bunun %60'ı Claude Haiku, %40'ı GPT-4o-mini. Ortalama kelime başı maliyet: $0,00021. Manuel yazımla karşılaştırınca: 217.000 kelime / 500 kelime/saat = 434 saat. Saatlik 50 € ile 21.700 € tasarruf.

Hangisini seçeceğine karar vermek için önce kendi kullanım senaryonu belirle. Hız mi, kalite mi, maliyet mi öncelikli? Test et, ölç, karşılaştır. Ben her yeni proje için 100 örnek üretip manuel kontrol ediyorum. Düzeltme oranı %10'un altındaysa o modelle devam ediyorum.

Kendi içerik otomasyonunu kurmak istiyorsan, hangi modeli seçeceğinden emin değilsen, benimle konuşabilirsin. FUTIA'da Türk markalarına özel AI otomasyon sistemleri kuruyorum. WhatsApp'tan ulaşabilirsin: +90 532 491 17 05. Ya da info@futia.net'e mail at, senin kullanım senaryonu için hangi modelin daha uygun olduğunu birlikte analiz edelim.