uzman
Active member
- Katılım
- 25 Eyl 2020
- Mesajlar
- 52,336
- Puanları
- 36
Yeni bir araştırmaya göre ChatGPT, tutarlı, mantıklı ve ortak içgörüler içeren yanıtlarla Amerika Birleşik Devletleri Tıbbi Lisanslama Sınavı’nda (USMLE) yaklaşık yüzde 60’lık geçiş eşiğinde veya buna yakın bir puan alabilir.
Araştırmaya göre AnsibleHealth, California, ABD’den Tiffany Kung ve meslektaşları, ChatGPT’nin performansını, ABD’de tıbbi lisans için gerekli olan Adım 1, 2CK ve 3’ü içeren, oldukça standartlaştırılmış ve düzenlenmiş üç sınavdan oluşan USMLE’de test etti.
Tıp öğrencileri ve stajyerler tarafından benimsenen USMLE, biyokimyadan teşhis muhakemesine ve biyoetiğe kadar çoğu tıp disiplinindeki bilgileri değerlendirir.
Araştırmaya göre, USMLE’den görüntü tabanlı soruları kaldırmak için yapılan taramadan sonra, yazarlar yazılımı Haziran 2022 USMLE sürümü itibarıyla mevcut olan 376 genel sorudan 350’sinde test etti.
Yazarlar, PLOS Digital Health dergisinde yayınlanan araştırmaya göre, ChatGPT’nin belirsiz yanıtları kaldırdıktan sonra üç USMLE sınavında yüzde 52,4 ile yüzde 75 arasında puan aldığını buldu.
Geçme notu her yıl yaklaşık yüzde 60’tır.
ChatGPT, Büyük Dil Modeli (LLM) olarak bilinen yeni bir yapay zeka (AI) sistemidir ve yaklaşmakta olan kelime dizilerini tahmin ederek insan benzeri yazılar oluşturmak için tasarlanmıştır.
Çalışma, çoğu sohbet robotunun aksine, ChatGPT’nin web’de arama yapamayacağını söyledi.
Bunun yerine, araştırmaya göre dahili süreçleri tarafından tahmin edilen kelime ilişkilerini kullanarak metin üretiyor.
Araştırmaya göre, ChatGPT ayrıca tüm yanıtlarında yüzde 94,6’lık bir anlaşma gösterdi ve yanıtlarının yüzde 88,9’unda yeni, açık olmayan ve klinik olarak geçerli en az bir önemli bulgu sağladı.
Araştırmaya göre ChatGPT, yalnızca biyomedikal literatür üzerine eğitilmiş bir karşı model olan ve USMLE tarzı sorulardan oluşan eski bir veri kümesinde yüzde 50,8 puan alan PubMedGPT’den de daha iyi performans gösterdi.
Nispeten küçük girdi boyutu, analizlerin derinliğini ve kapsamını sınırlandırırken, yazarlar, sonuçlarının ChatGPT’nin tıp eğitimini ve nihayetinde klinik uygulamayı iyileştirme potansiyeline ilişkin içgörü sağladığını belirtti.
Örneğin, AnsibleHealth’teki klinisyenlerin hastaların daha kolay anlaması için jargon ağırlıklı raporları yeniden yazmak için ChatGPT’yi zaten kullandıklarını eklediler.
Yazarlar, “Bu herkesin bildiği gibi zor olan uzman sınavı için geçme puanına ulaşmak ve bunu insan takviyesi olmadan yapmak, klinik AI olgunlaşmasında dikkate değer bir kilometre taşını işaret ediyor” dedi.
Kung, ChatGPT’nin bu araştırmadaki rolünün çalışmanın amacının ötesine geçtiğini ekledi.
“ChatGPT, [our] El yazması… ChatGPT ile bir meslektaşımıza benzer şekilde etkileşim kurduk ve ondan devam eden taslakları sentezlemesini, basitleştirmesini ve bunlara karşı noktalar sunmasını istedik… Tüm ortak yazarlar, ChatGPT’nin katkılarını takdir etti.”
Ortaklık bağlantıları otomatik olarak oluşturulabilir – ayrıntılar için Etik Beyanımıza bakın.
Araştırmaya göre AnsibleHealth, California, ABD’den Tiffany Kung ve meslektaşları, ChatGPT’nin performansını, ABD’de tıbbi lisans için gerekli olan Adım 1, 2CK ve 3’ü içeren, oldukça standartlaştırılmış ve düzenlenmiş üç sınavdan oluşan USMLE’de test etti.
Tıp öğrencileri ve stajyerler tarafından benimsenen USMLE, biyokimyadan teşhis muhakemesine ve biyoetiğe kadar çoğu tıp disiplinindeki bilgileri değerlendirir.
Araştırmaya göre, USMLE’den görüntü tabanlı soruları kaldırmak için yapılan taramadan sonra, yazarlar yazılımı Haziran 2022 USMLE sürümü itibarıyla mevcut olan 376 genel sorudan 350’sinde test etti.
Yazarlar, PLOS Digital Health dergisinde yayınlanan araştırmaya göre, ChatGPT’nin belirsiz yanıtları kaldırdıktan sonra üç USMLE sınavında yüzde 52,4 ile yüzde 75 arasında puan aldığını buldu.
Geçme notu her yıl yaklaşık yüzde 60’tır.
ChatGPT, Büyük Dil Modeli (LLM) olarak bilinen yeni bir yapay zeka (AI) sistemidir ve yaklaşmakta olan kelime dizilerini tahmin ederek insan benzeri yazılar oluşturmak için tasarlanmıştır.
Çalışma, çoğu sohbet robotunun aksine, ChatGPT’nin web’de arama yapamayacağını söyledi.
Bunun yerine, araştırmaya göre dahili süreçleri tarafından tahmin edilen kelime ilişkilerini kullanarak metin üretiyor.
Araştırmaya göre, ChatGPT ayrıca tüm yanıtlarında yüzde 94,6’lık bir anlaşma gösterdi ve yanıtlarının yüzde 88,9’unda yeni, açık olmayan ve klinik olarak geçerli en az bir önemli bulgu sağladı.
Araştırmaya göre ChatGPT, yalnızca biyomedikal literatür üzerine eğitilmiş bir karşı model olan ve USMLE tarzı sorulardan oluşan eski bir veri kümesinde yüzde 50,8 puan alan PubMedGPT’den de daha iyi performans gösterdi.
Nispeten küçük girdi boyutu, analizlerin derinliğini ve kapsamını sınırlandırırken, yazarlar, sonuçlarının ChatGPT’nin tıp eğitimini ve nihayetinde klinik uygulamayı iyileştirme potansiyeline ilişkin içgörü sağladığını belirtti.
Örneğin, AnsibleHealth’teki klinisyenlerin hastaların daha kolay anlaması için jargon ağırlıklı raporları yeniden yazmak için ChatGPT’yi zaten kullandıklarını eklediler.
Yazarlar, “Bu herkesin bildiği gibi zor olan uzman sınavı için geçme puanına ulaşmak ve bunu insan takviyesi olmadan yapmak, klinik AI olgunlaşmasında dikkate değer bir kilometre taşını işaret ediyor” dedi.
Kung, ChatGPT’nin bu araştırmadaki rolünün çalışmanın amacının ötesine geçtiğini ekledi.
“ChatGPT, [our] El yazması… ChatGPT ile bir meslektaşımıza benzer şekilde etkileşim kurduk ve ondan devam eden taslakları sentezlemesini, basitleştirmesini ve bunlara karşı noktalar sunmasını istedik… Tüm ortak yazarlar, ChatGPT’nin katkılarını takdir etti.”
Ortaklık bağlantıları otomatik olarak oluşturulabilir – ayrıntılar için Etik Beyanımıza bakın.