ChatGBT tıpta uzmanlık sınavını geçti

ChatGPT, ABD'de doktorluk yapmak için gereken oldukça zorlu bir sınavı geçti. Araştırmacılar yapay zekaya sahip sohbet robotunun bu başarısını, tıp biliminde bir kilometre taşı olarak değerlendirdi.

Sohbet robotu ChatGBT, ABD’de üç bölümden oluşan Tıbbi Lisanslama Sınavı’nda (USMLE) çeşitli bölümlerde yüzde 52,4 ile yüzde 75 arasında başarılı oldu. Sınavın geçmek için ortalama yüzde 60 oranında başarılı olmak gerekiyor.

ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor? - 2
KİLOMETRE TAŞI
Araştırmayı yapan teknoloji şirketi AnsibleHealth'ten araştırmacılar, konuya ilişkin yaptıkları açıklamada, "Zorluğuyla ünlü bu uzman sınavı için geçme puanına ulaşmak ve bunu herhangi bir insan takviyesi olmadan yapmak, klinik yapay zekanın gelişiminde dikkate değer bir kilometre taşını işaret ediyor." ifadelerini kullandı.


ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor? - 3
DAHA ÖNCE İŞLETME VE HUKUK SINAVLARINI DA GEÇTİ
Araştırmanın sonuçları, hakemli bir bilimsel dergi olan PLOS Digital Health’de yayımlandı. Bununla birlikte ChatGBT, daha önce işletme (Pennsylvania Üniversitesi'nin Wharton İşletme Okulu) ve hukuk (Minnesota Üniversitesi) bölümlerde de teste tabi tutulmuş ve sınavları geçmişti.

ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor? - 4
Son çalışmada, araştırmacılar yazılımı Haziran 2022 USMLE'den 350 soru üzerinde test etti.
İki doktor sonuçları değerlendirdi ve tutarsızlıklar üçüncü bir uzman tarafından incelendi.
Söz konusu sınav, tıp öğrencilerinin ve eğitimdeki doktorların tıbbi alanlardaki bilgilerini değerlendiriyor ve 1992'den beri kullanılıyor.

ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor? - 5
ABD’deki tıp öğrencileri USMLE’nin birinci adıma genellikle tıp fakültesinin ikinci yılının sonunda sonunda, ikinci adımına dördüncü yılda alınır, üçüncü adımına ise tıp fakültesini bitirdikten sonra ihtisaslarının ilk yılında giriyor. Sınava her yıl yüz binden fazla öğrenci ve lisansüstü öğrenci giriyor.

ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor? - 6
Diğer taraftan araştırmacılar, ChatGPT’nin ayrıca yanıtlarının yüzde 88,9'u için "yeni ve klinik olarak geçerli" en az bir önemli içgörü ürettiğini vurguladı.

ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor? - 7
Sonuçlar, USMLE tarzı sorulardan oluşan bir sınavda yüzde 50,8 oranında başarılı olan ve , özel olarak biyomedikal alan literatürü üzerine eğitilmiş farklı bir yapay zeka robotu olan PubMedGPT'nin performansını da aştı.

ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor? - 8
Çalışmanın yazarları araştırma bulgularının ChatGPT'nin tıp eğitiminde değerli bir araç haline gelebileceğini gösterdiğini belirterek, “Yapay zeka botu, öğrencilerin farkındalık alanında olmayabilecek yeni ve açık olmayan kavramları ortaya çıkararak tıp öğretme konusunda kısmi bir yeteneğe sahip. Yapay zeka teknolojisi artık tüm sağlık sektörlerinde çeşitli uygulamalarla yakında klinik uygulamada her yerde bulunacak şekilde konumlandırıldı." açıklamasında bulundu.

ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor? - 9
CHATGBT NEDİR?
Yakın zamanda Microsoft tarafından satın alınan ChatGPT, insanlarınkine benzer metinler oluşturmak için GPT (Generative Pre-training Transformer) mimarisinin bir çeşidini kullanan büyük bir dil modeline deniliyor. Çeşitli internet metinleri üzerinde eğitilen sohbet robotu ve çok çeşitli komutlara tutarı yanıtlar üretebiliyor. Model, dil çevirisi, soru yanıtlama ve konuşma gibi çeşitli görevler için ince ayar yapılabiliyor. ABD’deki OpenAI adlı kuruluşun araştırma ekibi tarafından yaratılan ChatGBT, yeni araştırma ve gelişmelere dayalı olarak güncellenmeye devam ediyor.

ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor? - 10
CHATGPT’NİN ÖZELLİKLERİ NELERDİR?
Soru-cevap

Metin yazma (temel akademik makaleler, edebi metinler, film senaryosu vb.)

Matematik denklemleri çözme

Hata ayıklama ve düzeltme (örneğin herhangi bir kod bloğundaki hataları tespit edip doğrusuyla düzeltme)

Diller arası çeviri

Metin özetleme ve metindeki anahtar kelimeleri tespit etme

Tavsiyelerde bulunma

Sınıflandırma

Herhangi bir şeyin ne işe yaradığını açıklama (örneğin bir kod bloğunun ne işe yaradığını açıklama)