Gelişmiş yapay zeka modelleri ‘doğrucu’ değil

Yapay zeka dil modelleri (LLM) ne kadar gelişkinse bir soruya yanıt bulamadığını kabullenme olasılığı o kadar azalıyor.

 

Araştırmacılar her bir modelin verdiği yanıtları karşılaştırdı ve bunları doğru, yanlış ya da kaçamak yanıtlar olarak sınıflandırdı.

Yapay zeka modellerinin yeni sürümlerinde zorlu sorulara verilen doğru yanıt oranının yükseldiği görüldü.

Ancak gelişmiş modeller önceki modellere kadar ‘doğrucu’ değil.

Önceki sürümler yanıtı bulamadığını veya daha fazla bilgiye ihtiyaç duyduğunu belirtirken yeni sürümlerin tahminde bulunma ya da kolay sorulara bile yanlış yanıt üretme eğiliminde.

Temel problemleri çözmede ‘belirgin bir gelişme yok’

Araştırmaya göre yeni sürümlerde çok düşük zorluktaki sorularda bile tam güvenilirlik elde edilemiyor.

Modeller son derece zorlu örnekleri çözebilse de çok basit örneklerde başarısız.

OpenAI’nin yeni yapay zeka dil modeli ChatGPT-4’da da durum böyle. Araştırmaya göre bir önceki model GPT-3.5’e göre ‘kaçamak’ yanıtların sayısı yeni modelde önemli ölçüde düştü.

Araştırmanın yazarları “Bu durum, daha yeni LLM’lerin yanıt vermekten daha başarılı biçimde kaçınacağı beklentisiyle uyuşmuyor” diyor.

Araştırma, Nature dergisinde yayınlandı.

 

 

 

 

 

 

diken.com.tr