Gemma-4-31B-Humanlike-Chat: 2.0'ın geliştirilmiş insan sesli sohbeti
Yerel LLaMA topluluğu, Google'ın resmi Gemma‑4‑31B modeline insan‑odaklı bir ince ayar uygulayarak Gemma-4-31B-Humanlike-Chat'i yayınladı. Model, kör yargı testinde gerçek kullanıcı yanıtlarını %26 oranında taklit edebildi ve çeşitli araç‑çağırma benchmarklarında %90'ın üzerindeki başarılar elde etti.

Özetle
- 1
Kör yargı testinde model, gerçek kişi yanıtını %26 oranında taklit etti.
- 2
When2Call, BFCL irrelevance ve BFCL simple benchmarklarında sırasıyla %66, %90 ve %96 puan alarak Google tabanını geride bıraktı.
- 3
Eğitim iki aşamalı SFT + on‑policy distilasyon ile 13 740 satır veri ve 1 H200 GPU kullanılarak gerçekleştirildi.
- 4
Model, Apache‑2.0 lisansı altında çeşitli formatlarda HuggingFace'de yayınlandı ve vLLM/ SGLang entegrasyonu mevcut.
Reddit'te yer alan bir gönderide, daha önce 136 bin kez indirilen Qwen3.8-27B-Humanlike-Chat 2.0 modelinin başarısı üzerine, topluluk üyesi kvyb, aynı ince ayar metodunu Google'ın Gemma‑4‑31B modeline uyguladığını duyurdu. Yeni model, "humanlike chat" özelliğiyle, kullanıcıdan açık bir prompt almadan doğal, kısa ve küçük harfli yanıtlar üretiyor; aynı zamanda bir yargıcın gerçek kişi mesajı ile modelin yanıtını karşılaştırdığı testte %26 oranında gerçek kişi gibi algılandı.
Benchmark sonuçları, modelin araç‑çağırma ve tutarsızlık konularında Google'ın orijinal Gemma‑4‑31B'yi geride bıraktığını gösteriyor. When2Call (doğru çağrı, sor, reddet) testinde %66, BFCL irrelevance (uygunsuz araç çağrısı yapmama) testinde %90, BFCL simple (doğru araç ve argüman) testinde %96 gibi puanlar alırken, bilgi ölçütü MMLU‑Pro'da %82,5 ile Google tabanıyla eşit seviyede kaldı. Ayrıca LiveCodeBench (kod üretimi) ve IFEval (talimat takibi) gibi ölçütlerde de %66 ve %90 puanlarıyla belirgin bir üstünlük sağladı.
Modelin eğitimi iki aşamalı bir süreçle gerçekleştirildi: İlk aşamada 13 740 satırdan oluşan SFT (Supervised Fine‑Tuning) verisi ve 1 H200 GPU kullanıldı; ikinci aşamada ise insan tercihleriyle yönlendirilen on‑policy distilasyon uygulandı. Bu süreçte model, kendi yanıtlarını yazar, iki öğretmen token‑bazlı olarak puan verir ve gizli bir talimat sayesinde prompt almadan insan gibi sohbet eder. Uzun sohbetlerde tek kelimelik yanıtların %28'den %12'ye düşürülmesi gibi kalite iyileştirmeleri de rapor edildi.
Model, Apache‑2.0 lisansı altında HuggingFace'de çeşitli formatlarda (GGUF, Safetensors, FP8, GPTQ‑Int4) sunuluyor ve vLLM ya da SGLang gibi altyapılarla araç‑çağırma desteği sağlanıyor. Topluluk, bu yeni sürümün deneme amaçlı kullanılmasını ve geri bildirimlerin paylaşılmasını teşvik ediyor.
Yöney yorumu
Bu ince ayar, açık kaynak topluluklarının büyük modelleri özel kullanım senaryolarına adapte etme kapasitesini gösteriyor; geliştiriciler daha doğal diyaloglar ve güvenilir araç‑çağırma yetenekleri elde ederken, kullanıcılar da daha tutarlı ve insan benzeri etkileşimler yaşayacak.
Haberdeki skorlar
Bu skorların kaynak metinde birebir geçtiği doğrulandı. Bilinen testlerin sonuçları Benchmark sıralamalarına da eklenir.
- Gemma-4-31B-Humanlike-ChatWhen2Call · greedy decoding66
- Gemma-4-31B-Humanlike-ChatBFCL irrelevance · greedy decoding90
- Gemma-4-31B-Humanlike-ChatBFCL simple · greedy decoding96
- Gemma-4-31B-Humanlike-ChatMMLU-Pro · greedy decoding82.5
- Gemma-4-31B-Humanlike-ChatHumanlike judge (real person)%26
- Gemma-4-31B-Humanlike-ChatLiveCodeBench · greedy decoding66
- Gemma-4-31B-Humanlike-ChatIFEval · greedy decoding90
- Gemma-4-31B-Humanlike-ChatIFBench · greedy decoding45.7
Bu haber Reddit LocalLLaMA kaynağından derlenip Türkçeye aktarıldı. Ayrıntılar ve orijinal metin için oka tıklayın.


