Hidayet
OpenAI’nın geçtiğimiz günlerde piyasaya sürdüğü o3 ve o4-mini‘nin eski modellerle kıyaslandığında daha yanıltıcı bilgiler verdiği farkedildi.
OpenAI’nın yakın zamanda tanıttığı yeni yapay zeka modelleri 03 ve 04-mini her ne kadar özellikleri bakımından beğeni görmüş olsalar da eski modellerde olan bir sorunla geldi. Ortaya çıkan ayrıntılarda önceki modellere kıyasla bu yeni modellerin gerçek olmayan bilgiler üretme eğilimi artmş durumda. OpenAI’ın yaptığı testlere göre yeni modeller, eski ‘akıl yürütme’ modelleri olan o1, o1-mini ve o3-mini’den hem de GPT-4o gibi daha geleneksel modellerden daha fazla yanlış bilgi veriyor.
Webtekno’nun aktardığına göre daha da dikkat çekici olan ise bu artışın sebebinin henüz tam olarak anlaşılamamış olması. OpenAI yayınladığı raporda sorunun çözümü için daha fazla araştırmaya ihtiyacı olduklarını kabul etmiş durumda.OpenAI’ın şirket içi testlerine göre o3 modeli, insanlarla ilgili bilgileri değerlendiren PersonQA testinde soruların yüzde 33’ünde halüsinasyon gördü. Bu oran, o1 ve o3-mini’nin sırasıyla yüzde 16 ve yüzde 14,8 olan halüsinasyon oranlarının neredeyse iki katı. O4-mini ise bu alanda yüzde 48 ile daha da kötü bir performans sergiledi. Üçüncü parti testlerde de benzer sonuçlar ortaya çıktı. Bağımsız araştırma laboratuvarı Transluce, o3 modelinin cevap verirken tamamen gerçek dışı işlem adımları uydurma eğiliminde olduğunu ortaya koydu.
GPT-40 Hâlâ Güçlü Bir Alternatif
Transluce’un kurucularından ve eski OpenAI çalışanı Neil Chowdhury’ye göre bu durumun sebebi modellerin eğitiminde kullanılan yöntemler olabilir ancak net bir sebebe dayandırmak şu aşamada güç. o3 modeli her ne kadar bazı görevlerde, özellikle de kodlama ve matematikte başarılı sonuçlar verse de sık sık hatalı sonuçlar üretmesi ya da gerçekte olmayan kaynaklar sunması gibi ciddi sorunlara sahip. Öte yandan mevcut haliyle GPT-4o, OpenAI’ın SimpleQA testinde yüzde 90 doğruluk oranı yakalayarak güçlü bir alternatif sağlıyor.
Kaynak:https://fournewss.wordpress.com/2025/04/20/openai-yaniltici-bilgiler-veriyor/
