Contoh pertanyaan. Kredit: Universitas Ben-Gurion Negev
Penggunaan kecerdasan buatan, khususnya model bahasa besar seperti ChatGPT, menjadi lebih umum. Akibatnya, terdapat peningkatan keinginan untuk menggunakan model AI dalam interpretasi informasi medis sebagai alat untuk membuat keputusan medis yang penting.
Sebuah tim peneliti dari Universitas Ben-Gurion Negev memutuskan untuk menguji kemampuan model bahasa besar (LLM) yang berspesialisasi dalam informasi medis dan membandingkannya. Temuan penelitian mengejutkan ini dipublikasikan di jurnal Computers in Biology and Medicine.
Kecerdasan buatan yang diterapkan pada informasi medis telah menjadi alat umum yang digunakan untuk menjawab pertanyaan pasien melalui chatbot medis, memprediksi penyakit, membuat data sintetis untuk melindungi privasi pasien, atau menghasilkan pertanyaan dan jawaban medis untuk mahasiswa kedokteran.
Model AI yang memproses data tekstual terbukti efektif dalam mengklasifikasikan informasi.
Namun, ketika data menjadi informasi medis klinis yang menyelamatkan nyawa, terdapat kebutuhan untuk memahami makna mendalam dari kode medis dan perbedaan di antara keduanya.
Mahasiswa PhD Ofir Ben Shoham dan Dr. Nadav Rapoport dari Departemen Rekayasa Perangkat Lunak dan Sistem Informasi di Universitas Ben-Gurion Negev memutuskan untuk memeriksa sejauh mana model bahasa besar memahami dunia kedokteran dan dapat menjawab pertanyaan tentang topik ini. Untuk melakukan hal ini, mereka melakukan perbandingan antara model umum dan model yang disesuaikan berdasarkan informasi medis.
Untuk tujuan ini, para peneliti membangun metode evaluasi khusus, MedConceptsKA, untuk menjawab pertanyaan tentang konsep medis.
Para peneliti menghasilkan lebih dari 800.000 pertanyaan dan jawaban tertutup yang mencakup konsep medis internasional pada tiga tingkat kesulitan untuk menilai bagaimana orang yang bekerja dengan model bahasa menafsirkan istilah medis dan membedakan konsep medis, seperti diagnosis, prosedur, dan obat-obatan. Para peneliti membuat pertanyaan yang secara otomatis memerlukan deskripsi kode medis, menggunakan algoritma yang mereka kembangkan.
Meskipun pertanyaan mudah memerlukan pengetahuan dasar, pertanyaan sulit memerlukan pemahaman mendetail dan kemampuan untuk mengidentifikasi perbedaan kecil antara konsep medis serupa. Pertanyaan tingkat menengah memerlukan lebih banyak informasi latar belakang. Para peneliti menggunakan standar data klinis yang tersedia untuk mengevaluasi kode klinis, sehingga memungkinkan mereka membedakan konsep medis untuk tugas-tugas seperti praktik pengkodean medis, ringkasan, penagihan otomatis, dan banyak lagi.
Hasil penelitian menunjukkan bahwa sebagian besar model memiliki kinerja yang buruk – setara dengan tebakan acak – termasuk model yang dilatih berdasarkan data medis. Hal ini terjadi secara keseluruhan, kecuali ChatGPT-4, yang memiliki kinerja lebih baik dibandingkan yang lain dengan akurasi rata-rata sekitar 60%, meskipun masih jauh dari memuaskan.
“Tampaknya sebagian besar model yang dilatih khusus untuk tujuan medis mencapai tingkat akurasi yang mendekati perkiraan acak sejauh ini, meskipun sebelumnya telah dilatih berdasarkan data medis,” kata Dr. Rapoport.
Perlu diperhatikan bahwa model yang dibuat untuk tujuan umum (seperti Llama3-70B dan ChatGPT-4) mencapai performa yang lebih baik. ChatGPT-4 memiliki kinerja terbaik, meskipun akurasinya masih kurang untuk beberapa pertanyaan kode medis spesifik yang dibuat para peneliti. ChatGPT-4 mencapai peningkatan rata-rata 9-11% dibandingkan dengan Llama3-OpenBioLLM-70B, model bahasa klinis dengan kinerja terbaik.
“Ukuran kami berfungsi sebagai sumber berharga untuk menilai kemampuan model bahasa besar dalam menafsirkan kode medis dan membedakan konsep medis.” Kami menunjukkan bahwa sebagian besar model bahasa klinis mencapai kinerja tebakan acak, sementara ChatGPT-3.5, ChatGPT-4, dan Llama3-70B mengungguli model klinis ini, meskipun faktanya fokus model ini sama sekali bukan pada bidang medis,” jelas PhD murid Shoham.
“Dengan bank soal kami, kami dapat dengan mudah, hanya dengan menekan satu tombol, mengevaluasi model lain yang akan dirilis di masa depan dan membandingkannya.”
Data klinis sering kali mencakup kode medis standar dan teks bahasa alami. Penelitian ini menyoroti perlunya bahasa klinis yang lebih luas dalam model untuk memahami informasi medis dan perlunya kehati-hatian dalam penggunaannya secara luas.
“Kami menyajikan tolok ukur untuk mengevaluasi kualitas informasi kode medis dan menyoroti perlunya pengguna berhati-hati saat menggunakan informasi ini,” Dr. Rapoport menyimpulkan.
Informasi lebih lanjut: Ofir Ben Shoham dkk, MedConceptsKA: Konsep Medis Open Source KA Benchmark, Komputer dalam Biologi dan Kedokteran (2024). DOI: 10.1016/j.compbiomed.2024.109089
Disediakan oleh Universitas Ben-Gurion Negev
Kutipan: ChatGPT-4 Mengungguli Lainnya dalam Perbandingan Model AI Medis (2024, 2 Desember) Diakses pada 3 Desember 2024, dari https://medicalkpress.com/nevs/2024-12-chatgpt-outperforms-medical-ai-comparison html
Dokumen ini memiliki hak cipta. Kecuali untuk transaksi wajar untuk tujuan studi atau penelitian pribadi, tidak ada bagian yang boleh direproduksi tanpa izin tertulis. Konten disediakan untuk tujuan informasi saja.
Kesehatan
info Kesehatan
cara hidup sehat
makanan sehat
suara88
sumo7777
supermoney888
teratai88
thor88
togelhk88
topjitu88
totosloto88
trisula888
udangbet88
via88
virusjp88
warga888
waw88
winjitu88
wisdom88
wnitogel88
yoyo888
validtoto88
sule999
sule88
ss888bet
sia77
seluang88
satu88
satu777
rp88
rp88
rp88
qiuqiu88
pt88
pt77
produk88
mt88
mt77
menang66
latobet888
kedai96
kedai188
ids88
hp88
hp77
gm88
gm77
final888
duit88
duit168
divisi88
dewi500
devil88
cuputoto88
cukongbet88
bom888
bintaro888
askasino88
999aset
afb77
aset99
bendera77
bendera888
coco88
cuma77
cuma88
dwv88
fafajp88
gemar88
gocap88
gocaptoto
hakabet88
hwtoto88
ina77
ina88
jingga8888
juragan777
kastil77
kebo888
kkwin77
kokoslot88
luckydf88
microstar888
monperatoto88
mpo1122
mpo122
mpopelangi88
pamanslot88
panel88
paragon77
paragon888
pion77
prada88
prada888
qqslot88slot
rejekibet88
rezekibet88
sensa77
sensa888
singajp88
sr77
sr88
surya77
surya88
tajir77
tajir88
toto122
toto123
uangvip88
wajik77
777neko
88judi
99judi
abcslot88
suara88 permainan paling top dan garansi imbal balik hasil besar bersama https://suara88.biz/
sumo7777 permainan paling top dan garansi imbal balik hasil besar bersama https://sumo7777.com/
supermoney888 permainan paling top dan garansi imbal balik hasil besar bersama https://supermoney888.biz/
teratai88 permainan paling top dan garansi imbal balik hasil besar bersama https://teratai88.biz/
thor88 permainan paling top dan garansi imbal balik hasil besar bersama https://thor88.biz/
togelhk88 permainan paling top dan garansi imbal balik hasil besar bersama https://togelhk88.net/
topjitu88 permainan paling top dan garansi imbal balik hasil besar bersama https://topjitu88.net/
totosloto88 permainan paling top dan garansi imbal balik hasil besar bersama https://totosloto88.com/
trisula888 permainan paling top dan garansi imbal balik hasil besar bersama https://trisula888.biz/
udangbet88 permainan paling top dan garansi imbal balik hasil besar bersama https://udangbet88.net/
via88 permainan paling top dan garansi imbal balik hasil besar bersama https://via88.biz/
virusjp88 permainan paling top dan garansi imbal balik hasil besar bersama https://virusjp88.net/
warga888 permainan paling top dan garansi imbal balik hasil besar bersama https://warga888.biz/
waw88 permainan paling top dan garansi imbal balik hasil besar bersama https://waw88.biz/
winjitu88 permainan paling top dan garansi imbal balik hasil besar bersama https://winjitu88.net/
wisdom88 permainan paling top dan garansi imbal balik hasil besar bersama https://wisdom88.biz/
wnitogel88 permainan paling top dan garansi imbal balik hasil besar bersama https://wnitogel88.com/
yoyo888 permainan paling top dan garansi imbal balik hasil besar bersama https://yoyo888.biz/
validtoto88 permainan paling top dan garansi imbal balik hasil besar bersama https://validtoto88.com/
sule999 permainan paling top dan garansi imbal balik hasil besar bersama https://sule999.com/
sule88 permainan paling top dan garansi imbal balik hasil besar bersama https://sule88.org/
ss888bet permainan paling top dan garansi imbal balik hasil besar bersama https://ss888bet.com/
sia77 permainan paling top dan garansi imbal balik hasil besar bersama https://sia77.info/
seluang88 permainan paling top dan garansi imbal balik hasil besar bersama https://seluang88.com/
satu88 permainan paling top dan garansi imbal balik hasil besar bersama https://satu88.biz/
satu777 permainan paling top dan garansi imbal balik hasil besar bersama https://satu777.asia/
rp88 permainan paling top dan garansi imbal balik hasil besar bersama https://rp88.biz/
rp88 permainan paling top dan garansi imbal balik hasil besar bersama https://rp88.asia/
rp88 permainan paling top dan garansi imbal balik hasil besar bersama https://rp77.live/
qiuqiu88 permainan paling top dan garansi imbal balik hasil besar bersama https://qiuqiu88.biz/
pt88 permainan paling top dan garansi imbal balik hasil besar bersama https://pt88.org/
pt77 permainan paling top dan garansi imbal balik hasil besar bersama https://pt77.info/
produk88 permainan paling top dan garansi imbal balik hasil besar bersama https://produk88.asia/
mt88 permainan paling top dan garansi imbal balik hasil besar bersama https://mt88.org/
mt77 permainan paling top dan garansi imbal balik hasil besar bersama https://mt77.biz/
menang66 permainan paling top dan garansi imbal balik hasil besar bersama https://menang66.biz/
latobet888 permainan paling top dan garansi imbal balik hasil besar bersama https://latobet888.org/
kedai96 permainan paling top dan garansi imbal balik hasil besar bersama https://kedai96.org/
kedai188 permainan paling top dan garansi imbal balik hasil besar bersama https://kedai188.biz/
ids88 permainan paling top dan garansi imbal balik hasil besar bersama https://ids88.biz/
hp88 permainan paling top dan garansi imbal balik hasil besar bersama https://hp88.org/
hp77 permainan paling top dan garansi imbal balik hasil besar bersama https://hp77.org/
gm88 permainan paling top dan garansi imbal balik hasil besar bersama https://gm88.asia/
gm77 permainan paling top dan garansi imbal balik hasil besar bersama https://gm77.net/
final888 permainan paling top dan garansi imbal balik hasil besar bersama https://final888.org/
duit88 permainan paling top dan garansi imbal balik hasil besar bersama https://duit88.asia/
duit168 permainan paling top dan garansi imbal balik hasil besar bersama https://duit168.biz/
divisi88 permainan paling top dan garansi imbal balik hasil besar bersama https://divisi88.org/
dewi500 permainan paling top dan garansi imbal balik hasil besar bersama https://dewi500.biz/
devil88 permainan paling top dan garansi imbal balik hasil besar bersama https://devil88.info/
cuputoto88 permainan paling top dan garansi imbal balik hasil besar bersama https://cuputoto88.com/
cukongbet88 permainan paling top dan garansi imbal balik hasil besar bersama https://cukongbet88.asia/
bom888 permainan paling top dan garansi imbal balik hasil besar bersama https://bom888.biz/
bintaro888 permainan paling top dan garansi imbal balik hasil besar bersama https://bintaro888.info/
askasino88 permainan paling top dan garansi imbal balik hasil besar bersama https://askasino88.org/
999aset permainan paling top dan garansi imbal balik hasil besar bersama https://999aset.com/
afb77 permainan paling top dan garansi imbal balik hasil besar bersama https://afb77.biz/
aset99 permainan paling top dan garansi imbal balik hasil besar bersama https://aset99.biz/
bendera77 permainan paling top dan garansi imbal balik hasil besar bersama https://bendera77.biz/
bendera888 permainan paling top dan garansi imbal balik hasil besar bersama https://bendera888.com/
coco88 permainan paling top dan garansi imbal balik hasil besar bersama https://coco88.org/
cuma77 permainan paling top dan garansi imbal balik hasil besar bersama https://cuma77.biz/
cuma88 permainan paling top dan garansi imbal balik hasil besar bersama https://cuma88.org/
dwv88 permainan paling top dan garansi imbal balik hasil besar bersama https://dwv88.org/
fafajp88 permainan paling top dan garansi imbal balik hasil besar bersama https://fafajp88.com/
gemar88 permainan paling top dan garansi imbal balik hasil besar bersama https://gemar88.biz/
gocap88 permainan paling top dan garansi imbal balik hasil besar bersama https://gocap88.info/
gocaptoto permainan paling top dan garansi imbal balik hasil besar bersama https://gocaptoto.asia/
hakabet88 permainan paling top dan garansi imbal balik hasil besar bersama https://hakabet88.com/
hwtoto88 permainan paling top dan garansi imbal balik hasil besar bersama https://hwtoto88.org/
ina77 permainan paling top dan garansi imbal balik hasil besar bersama https://ina77.biz/
ina88 permainan paling top dan garansi imbal balik hasil besar bersama https://ina88.info/
jingga8888 permainan paling top dan garansi imbal balik hasil besar bersama https://jingga8888.com/
juragan777 permainan paling top dan garansi imbal balik hasil besar bersama https://juragan777.asia/
kastil77 permainan paling top dan garansi imbal balik hasil besar bersama https://kastil77.info/
kebo888 permainan paling top dan garansi imbal balik hasil besar bersama https://kebo888.biz/
kkwin77 permainan paling top dan garansi imbal balik hasil besar bersama https://kkwin77.com/
kokoslot88 permainan paling top dan garansi imbal balik hasil besar bersama https://kokoslot88.asia/
luckydf88 permainan paling top dan garansi imbal balik hasil besar bersama https://luckydf88.org/
microstar888 permainan paling top dan garansi imbal balik hasil besar bersama https://microstar888.biz/
monperatoto88 permainan paling top dan garansi imbal balik hasil besar bersama https://monperatoto88.com/
mpo1122 permainan paling top dan garansi imbal balik hasil besar bersama https://mpo1122.biz/
mpo122 permainan paling top dan garansi imbal balik hasil besar bersama https://mpo122.biz/
mpopelangi88 permainan paling top dan garansi imbal balik hasil besar bersama https://mpopelangi88.com/
pamanslot88 permainan paling top dan garansi imbal balik hasil besar bersama https://pamanslot88.biz/
panel88 permainan paling top dan garansi imbal balik hasil besar bersama https://panel88.org/
paragon77 permainan paling top dan garansi imbal balik hasil besar bersama https://paragon77.biz/
paragon888 permainan paling top dan garansi imbal balik hasil besar bersama https://paragon888.info/
pion77 permainan paling top dan garansi imbal balik hasil besar bersama https://pion77.biz/
prada88 permainan paling top dan garansi imbal balik hasil besar bersama https://prada88.asia/
prada888 permainan paling top dan garansi imbal balik hasil besar bersama https://prada888.com/
qqslot88slot permainan paling top dan garansi imbal balik hasil besar bersama https://qqslot88slot.com/
rejekibet88 permainan paling top dan garansi imbal balik hasil besar bersama https://rejekibet88.com/
rezekibet88 permainan paling top dan garansi imbal balik hasil besar bersama https://rezekibet88.org/
sensa77 permainan paling top dan garansi imbal balik hasil besar bersama https://sensa77.biz/
sensa888 permainan paling top dan garansi imbal balik hasil besar bersama https://sensa888.biz/
singajp88 permainan paling top dan garansi imbal balik hasil besar bersama https://singajp88.com/
sr77 permainan paling top dan garansi imbal balik hasil besar bersama https://sr77.org/
sr88 permainan paling top dan garansi imbal balik hasil besar bersama https://sr88.org/
surya77 permainan paling top dan garansi imbal balik hasil besar bersama https://surya77.biz/
surya88 permainan paling top dan garansi imbal balik hasil besar bersama https://surya88.asia/
tajir77 permainan paling top dan garansi imbal balik hasil besar bersama https://tajir77.info/
tajir88 permainan paling top dan garansi imbal balik hasil besar bersama https://tajir88.biz/
toto122 permainan paling top dan garansi imbal balik hasil besar bersama https://toto122.com/
toto123 permainan paling top dan garansi imbal balik hasil besar bersama https://toto123.biz/
uangvip88 permainan paling top dan garansi imbal balik hasil besar bersama https://uangvip88.com/
wajik77 permainan paling top dan garansi imbal balik hasil besar bersama https://wajik77.asia/
777neko permainan paling top dan garansi imbal balik hasil besar bersama https://777neko.org/
88judi permainan paling top dan garansi imbal balik hasil besar bersama https://88judi.net/
99judi permainan paling top dan garansi imbal balik hasil besar bersama https://99judi.org/
abcslot88 permainan paling top dan garansi imbal balik hasil besar bersama https://abcslot88.asia/
Informasi mengenai KING SLOT, Segera Daftar Bersama king selot terbaik dan terpercaya no satu di Indonesia. Boleh mendaftar melalui sini king slot serta memberikan hasil kembali yang paling tinggi saat sekarang ini hanyalah king slot paling gacor, gilak dan gaco saat sekarang di Indonesia melalui program return tinggi di kingselot serta pg king slot