OpenAI’nin güçlü yapay zeka lisan modeli GPT-4, Japonya’nın ulusal fizik tedavi uzmanlığı imtihanını rastgele bir ek eğitim yahut özel hazırlık olmadan muvaffakiyetle geçti. Tıp dünyasında ses getiren muvaffakiyet, GPT-4’ün farklı bilgi alanlarındaki yeteneklerini ve potansiyelini bir kere daha gözler önüne serdi. Araştırmanın bulguları, GPT-4’ün metin tabanlı sorularda hayli tesirli olduğunu, fakat teknik ve görsel içerikli sorularda muhakkak sınırlamaları bulunduğunu ortaya koydu. İşte ayrıntılar…
GPT-4, Japonya’nın ulusal fizik tedavi uzmanlığı imtihanına girdi: %73,4 muvaffakiyet oranı elde etti
Japonya’nın ulusal fizik tedavi uzmanlığı sınavı, 160 genel bilgi sorusu ve 40 pratik soru olmak üzere toplam 200 sorudan oluşuyor. Bu imtihan iştirakçilerin hafıza, manaya, uygulama, tahlil ve kıymetlendirme maharetlerini test ediyor. Araştırmacılar, GPT-4’e bu imtihandan 1000 soru yükledi ve modelin karşılıklarını resmi yanıtlarla karşılaştırdı. Sonuçlar, GPT-4’ün bu soruların %73,4’ünü gerçek yanıtladığını gösterdi.
Model, metin tabanlı sorularda epey güçlü bir performans sergiledi ve %80,1 doğruluk oranına ulaştı. Fakat, teknik ayrıntılar içeren ve görsellerle desteklenen sorularda modelin doğruluk oranı %46,6’ya düştü. Bilhassa tablo ve fotoğraf içeren sorular, modelin en zorlandığı alanlar oldu; bu tıp sorularda doğruluk oranı %35,4 üzere düşük bir düzeyde kaldı.
Bu sonuçlar, GPT-4’ün lisan sürece konusundaki üstün yeteneklerine karşın, görsel data ile harmanlanmış kompleks sıkıntılarda sınırlamaları olduğunu gösteriyor. Araştırmanın bir başka enteresan bulgusu ise GPT-4’ün, büyük ölçüde İngilizce bilgi setleri ile eğitilmiş olmasına karşın, Japonca sorularda da epeyce başarılı sonuçlar elde etmesi.
Bu durum, modelin çok lisanlı yeteneklerini ve farklı lisanlarda tesirli bir biçimde performans gösterebilme kapasitesini de gözler önüne seriyor. Sonuç olarak, GPT-4’ün bu muvaffakiyet oranı, yapay zekanın karmaşık bilgi alanlarındaki potansiyelini ve hudutlarını keşfetmek için mutlaka kıymetli bir adım.
Metin tabanlı meselelerde güçlü olsa da, görsel ve teknik mevzularda daha fazla geliştirilmesi gerektiği açıkça görülüyor. Tekrar de bu muvaffakiyet, yapay zeka teknolojilerinin eğitim ve profesyonel imtihanlar üzere alanlarda nasıl bir rol oynayabileceğini dünyaya bir defa daha gösterdi.
Peki, siz ne düşünüyorsunuz? Görüşlerinizi aşağıdaki yorumlar kısmına yazabilirsiniz.
