Ücretli kullanıcılara daha gelişmiş yapay zeka modelleri veriyoruz. İşte nedeni:

Bu hafta aldığımız bir kararı paylaşmak istiyorum — ürün piyasaya sürüldükten sonra değil, hâlâ üzerinde çalışırken.

Yapay zeka modellerinin kullanıcı katmanlarımız arasında nasıl tahsis edildiğini değiştiriyoruz. MachineTranslation.com'daki ücretli kullanıcılar yakında önde gelen sağlayıcılardan — OpenAI, Anthropic, Google, DeepSeek ve diğerleri — daha gelişmiş yapay zeka modellerine erişim sağlayacak. Ücretsiz kullanıcılar yetenekli, güvenilir çeviri almaya devam edecek — ancak aynı modelleri değil. Bu boşluk kasıtlıdır ve tam olarak neden bu kararı aldığımızı açıklamak istiyorum.

Canlıya geçmesini bekleyip cilalı bir duyuru olarak sunmaktansa, gerekçe tazeyken ve karar hala biraz hamken bunu şimdi yazmayı tercih ederim. Dürüst versiyon daha kullanışlıdır.

İçindekiler

• Neden bir süredir bunu düşünüyorduk
• Fikrimizi değiştiren neydi: İç test
• Katmanlandırmanın dürüst nedeni
• Bu, kullanıcılar için nasıl görünecek
• Hala neyi çözmeye çalışıyoruz
• SSS

Neden bir süredir bunu düşünüyoruz

MachineTranslation.com, aynı anda 22 yapay zeka modeliyle çeviri yapar ve en iyi çıktıyı sunmak için konsensüs tabanlı bir yaklaşım kullanır. Yaptığımız işin özü her zaman bu olmuştur — her şeyi tek bir modele bağlamak değil, birkaç model arasında karşılaştırma yapmak ve çıktıların kendileri için konuşmasına izin vermek.

Bu yaklaşımın rahatsız edici yanı, modeller arasındaki kalite farklılıklarını çok görünür kılmasıdır. Her gün görüyoruz ki, tüm modeller tüm metinleri aynı derecede iyi işleyemiyor. Ve uzun bir süre boyunca, bu gözlemin modelleri kullanıcılara nasıl tahsis ettiğimizi değiştirmesine izin vermedik.

Tüm modeller eşit değildir ve bunu kanıtlayacak verilere sahibiz

Birkaç hafta önce, Rachelle (yapay zeka liderimiz), GPT 4.1 nano, GPT 4.1 mini, GPT 5.4 mini ve diğerleri dahil olmak üzere birden fazla GPT modelinde çeviri kalitesini eş zamanlı olarak test etmek için oluşturduğumuz dahili bir aracı bize tanıttı. Aynı kaynak metni girersiniz ve her modelin çıktısını yan yana görürsünüz.

O aracın hemen açıkça gösterdiği şey şudur: basit, kısa, günlük metinlerde çıktılar neredeyse aynıdır. Premium modeller için toplantı saat 3'te gibi bir konuda kaliteli bir argümanı gerçekten haklı çıkaramazsınız.

Ancak gerçek dilsel karmaşıklığı olan herhangi bir şeyde (deyimsel ifadeler, alan terminolojisi, bağlamın binlerce kelime boyunca taşınması gereken uzun belgeler) modeller arasındaki fark açılır ve bu, profesyonel olarak önemli şekillerde açılır.

Alt düzey modellerin sessizce yetersiz kaldığı yerlerde

İşte bu kısım, çeviri endüstrisinin yeterince dürüstçe konuşmadığını düşündüğüm kısım. Alt düzey modeller genellikle bariz şekilde yanlış çeviriler üretmez. Yüzeyde iyi okunan ancak bir konu uzmanının (bir avukat, bir tıp uzmanı, kıdemli bir yerelleştirme yöneticisi) hemen fark edeceği ince hatalar içeren çeviriler üretirler.

Yanlış anlamda oluşturulmuş bir koşul cümlesi. O yargı alanında belirli bir anlama gelen, günlük dildeki karşılığı olarak çevrilmiş hukuki bir terim. Uzun bir belgenin ortasında, tümünün mesleki güvenilirliğini zayıflatan bir üslup kayması.

Bu başarısızlık sessizdir. Ve profesyonel çevirideki sessiz başarısızlıklar pahalı olabilir.

Fikrimizi değiştiren şey: Dahili test

Bu kararı sezgilerimize dayanarak almadık. Modelleri karmaşık, deyimsel kaynak metinlere (profesyonel kullanıcılarımızın gerçekten çevrilmesini istediği türden içerik) karşı çalıştırdık ve çıktıları dilbilimcilere değerlendirttik.

Sonuç açıktı. Gelişmiş modeller, nüansı, üslubu ve alana özgü terminolojiyi tutarlı bir şekilde daha iyi işledi. Daha ucuz modeller gündelik kullanım için fazlasıyla yeterliydi. İki kullanım durumu gerçekten farklı araçlar gerektiriyor.

Dört model, aynı cümle, çok farklı sonuçlar

Bunun şirket içinde tetiklediği konuşma fiyatlandırmadan çok dürüstlükle ilgiliydi. Modellerin profesyonel düzeydeki içerikte farklı performans gösterdiğini biliyorsak ve ücretli kullanıcılarımızın büyük ölçüde profesyonel düzeydeki içerik çevirdiğini biliyorsak, o zaman onlara sıradan bir e-postayı çeviren ücretsiz bir kullanıcıyla aynı modeli vermek her ikisine de haksızlık olur.

Katmanlandırmanın dürüst nedeni

Ofer (CEO'muz) şirket içi tartışmamızda açıkça belirtti:

 Alt katman modelleri, karmaşık veya deyimsel metinlerde gerçek kalite riskleri taşır. Ancak daha önemli nokta şu: konsensüs, arkasındaki modeller kadar iyidir. Ücretli kullanıcılar daha gelişmiş modellere sahip olduğunda, sadece daha iyi bireysel çıktılar elde etmekle kalmıyorlar — aynı zamanda daha güçlü bir uzlaşıya varıyorlar. Daha iyi modeller, daha iyi uzlaşma, daha güvenilir çeviriler. Profesyonel kalitede çevirinin aslında ne anlama geldiği işte budur.

Bu çerçeveleme aklımda kaldı. Bu sadece bir maliyet argümanı değil. Bu bir netlik argümanı.

Premium modellerin çalıştırma maliyeti aslında ne kadar

Daha yetenekli yapay zeka modellerinin çalıştırma maliyeti, jeton başına önemli ölçüde daha fazladır. Bu bir MachineTranslation.com politikası değil, her büyük yapay zeka sağlayıcısının amiral gemisi modellerini fiyatlandırdığı şekildir. OpenAI, Anthropic, Google ve DeepSeek'in tümü, en yeni, en yetenekli modellerini ücretli müşterileri için ayırıyor çünkü bu modellerin işletilmesi önemli ölçüde daha pahalıdır. En gelişmiş modelimizi her ücretsiz çeviride, her sıradan sorguda, her bu tabelada ne yazıyor isteğinde çalıştırmak, altyapı maliyetlerimizi önemli ölçüde artırırdı.

Daha da önemlisi, 10.000 kelimelik teknik belgeleri çeviren profesyoneller için kaliteyi korumak amacıyla ihtiyaç duyduğumuz hesaplama bütçesiyle düşük karmaşıklıktaki kullanım durumlarını çapraz sübvanse etmek anlamına gelirdi. Bu sürdürülebilir veya mantıklı bir tahsis değil.

Neden tüm katmanların eşit olduğunu iddia etmek kimseye hizmet etmiyor

Bu kararın tamamen çıkarcı bir versiyonu var — daha fazla ücret al, daha fazla ver, basit. Bunu asıl tetikleyen bu değil.

Bunu asıl tetikleyen şey, yapay zeka modelleri arasındaki kalite farklılıklarını gerçekten ortaya çıkarabilecek bir platform inşa etmiş olmamızdır. O farklılıkları açıkça görmek için dahili araçlarımız var. Kullanıcı katmanlarımızı tasarlarken bu görünürlüğü göz ardı etmeyi seçmek, var olduğuna dair kanıtımız varken boşluğun var olmadığını iddia etmek bir tür sahtekarlık olurdu.

Ücretsiz kullanıcılar ne aldıklarını bilmeyi hak eder. Ücretli kullanıcılar, anlamlı derecede farklı bir şey aldıklarını bilmeyi hak ediyorlar. Ve fark sadece daha gelişmiş modellere erişim değil, aynı zamanda bu modellerden oluşturulmuş daha güçlü bir uzlaşıya erişimdir. Bu, hiçbir tekil yapay zekanın sağlayamayacağı güvenilirlik sinyalidir.

Bunun kullanıcılar için nasıl görüneceği

Uygulama detayları üzerinde hala çalışıyoruz, bu yüzden belirli şeyler hakkında aşırı vaatlerde bulunmamak için dikkatli olmak istiyorum. Ama işte yön bu.

Ücretsiz katmanın güçlü kaldığı yer

Ücretsiz plan çevirileri yetenekli yapay zeka modellerini kullanmaya devam edecek. Günlük çeviri işlerinin büyük çoğunluğu (kısa mesajlar, gündelik okumalar, temel yazışmalar) için ücretsiz kullanıcılar doğru ve güvenilir sonuçlar elde edecektir. Bu değişmiyor.

Ücretsiz katman, dilin bir engel olmaması gerektiğine inandığımız için var ve bundan geri adım atmıyoruz.

Ücretli kullanıcıların öne geçtiği yerler

Fark en çok şuralarda görülecektir:

Bu kategorilerden herhangi birinde çalışan profesyonel kullanıcılar için model katmanı gerçek bir fark yaratacaktır. Ücretli planlarımız tam da onlar için tasarlandı.

Ve SMART'ın konsensüsü bu daha gelişmiş modellerden oluşturulduğu için, ücretli kullanıcılar sadece daha iyi bireysel çıktılar elde etmekle kalmıyor — birlikte çalışan en son modeller tarafından üretilen daha güvenilir yapay zeka çevirisi alıyorlar.

Hala üzerinde çalıştığımız şeyler

Dürüst olmak gerekirse, bu henüz tamamen çözülmedi.

Hangi modellerin hangi katmanda yer alacağını ve bunu ürün içinde kullanıcılara nasıl açıkça ileteceğimizi — yani tam model tahsisini — hala belirliyoruz. Deneyimin sorunsuz ve rahatsız edici olmamasını sağlamak için ödeme duvarı mantığı üzerinde çalışıyoruz. Ve model kalitesi bilgilerini kullanıcılara sadece bir pazarlama iddiası olmaktan ziyade gerçekten faydalı olacak bir şekilde nasıl sunacağımızı dikkatlice düşünüyoruz.

Ayrıca üzerinde durduğumuz gerçek bir soru var: ücretsiz bir kullanıcının, yükseltmenin çıktısını anlamlı bir şekilde iyileştireceği bir kullanım durumuna denk geldiklerinde, o anda bunu anlamasına nasıl yardımcı oluruz? Bu, ürünle ilgili bir zorluk olduğu kadar bir UX zorluğudur ve henüz tam cevabımız yok.

Canlıya geçtiğinde bunun nasıl sonuçlandığını yazacağım. Şimdilik düşünce bu.

Eğer ücretli bir kullanıcıysanız ve model kalitesinde sizin için en önemli olan konuda görüş bildirmek isterseniz, gerçekten ilgileniyorum. MachineTranslation.com iletişim sayfası aracılığıyla bir mesaj bırakın.

SSS

1. MachineTranslation.com modellerin tahsis edilme şeklini neden değiştiriyor?

Çünkü dahili testlerimiz, profesyonel düzeydeki çeviri görevlerinde model katmanları arasında anlamlı bir kalite farkı olduğunu gösterdi. Birden fazla yapay zeka modelini eş zamanlı olarak karşılaştırmak için bir araç geliştirdik ve veriler durumu açıkça ortaya koydu: gelişmiş modeller karmaşık, deyimsel ve alana özgü içeriği önemli ölçüde daha iyi işliyor. Seviye değişikliği o gerçeği dürüstçe yansıtır. Ücretli kullanıcılar için daha büyük fayda, SMART uzlaşısının daha gelişmiş modellerden oluşturulmasıdır, bu da güvenilirlik sinyalinin kendisinin daha güçlü olduğu anlamına gelir.

2. Bu kullanıma sunulduğunda ücretsiz plan çevirileri kötüleşecek mi?

Hayır. Ücretsiz plan kullanıcıları, günlük kullanım durumları için yetenekli, doğru çeviriler almaya devam edecek. Değişiklik, ücretli kullanıcıların daha gelişmiş modellere yükseltilmesi yönünde; ücretsiz kullanıcıların seviyesinin düşürülmesi yönünde değil.

3. Hangi tür çeviriler premium yapay zeka modellerinden en çok fayda sağlar?

Hukuki, finansal, tıbbi, teknik ve uzun metinli belgeler — ve eğitim verilerinin daha az olduğu daha az yaygın dil çiftlerindeki herhangi bir içerik. Kısa, basit, günlük metinler için, model katmanları arasındaki fark çok azdır. Ödeme yapan kullanıcılar için daha büyük fayda, SMART konsensüsünün daha gelişmiş modellerden oluşturulmasıdır, bu da güvenilirlik sinyalinin kendisinin daha güçlü olduğu anlamına gelir.

4. Bu ne zaman yayına girecek?

Şu an yapıyoruz. Sevk edildiğinde bir güncelleme yayınlayacağım; ürün içindeki deneyimin nasıl göründüğü ve erken verilerin ne gösterdiği dahil.

5. MachineTranslation.com bir metin için hangi yapay zeka modelinin en iyi olduğuna nasıl karar verir?

Birden fazla modeli eş zamanlı olarak çalıştırıyor ve çıktıları değerlendirmek için fikir birliğine dayalı bir puanlama yaklaşımı kullanıyoruz. Dahili karşılaştırma aracımız, aynı kaynak metin üzerinde model katmanları arasında kaliteyi test etmemizi sağlar; bu katmanlandırma kararını şekillendiren de buydu. MachineTranslation.com.com konsensüs sisteminin nasıl çalıştığı hakkında daha fazla bilgi edinebilirsiniz.‎