La ce examen medical a trecut ChatGPT?

Tema care a atras recent atenția internetului este ChatGPT, chatbotul cu inteligență artificială care a debutat în noiembrie anul trecut. Oamenii au interacționat cu el în conversații jucause și lipsite de seriozitate pentru a-i testa abilitățile de a face conversație. Nu numai atât, ChatGPT a obținut numeroase realizări, cum ar fi trecerea unor examene dificile, precum examenul de licență medicală din SUA, un examen de la Wharton Business School și patru examene de drept constituțional la University of Minnesota Law School. Această performanță a atras atenția CEO-ului Twitter, Elon Musk, care a făcut o glumă la adresa chatbotului cu inteligență artificială, spunând „Sunt sigur că totul va fi bine.” Să aruncăm o privire la Ce examen medical a trecut ChatGPT?

Ascensiunea lui ChatGPT

Este interesant de observat faptul că OpenAI, compania de cercetare în care Musk și Microsoft au investit, a creat ChatGPT. Orice persoană care folosește site-ul acestui instrument de inteligență artificială poate să-i adreseze o întrebare despre orice subiect și să primească un răspuns rapid și detaliat în formă de paragraf. ChatGPT și-a demonstrat capacitatea în diverse domenii. Poate scrie instantaneu eseuri complexe, redacta materiale de marketing, produce poezii și glume și chiar să redacteze un discurs pentru un congresman din Statele Unite. Cu toate acestea, există temeri că inteligența artificială ar putea prelua anumite joburi ale oamenilor.

Mai citiți: Este ChatGPT 4 gratuit de utilizat?

ChatGPT ia un program de Inteligență Artificială care trece prin un Examen Medical: Descriere generală

Una dintre cele mai recente realizări ale acestei unelete este abilitatea sa de a trece examenele de licențiere medicală din Statele Unite. Într-un studiu preprint, cercetătorii au explorat limitele superioare ale capacităților ChatGPT. Au alimentat întrebări de la examenele anterioare la instrumentul AI și au avut răspunsurile, variind de la răspunsuri scrise cu formulare deschise la întrebări cu alegere multiplă, evaluate independent de doi medici. Au avut grijă ca răspunsurile la aceste întrebări să nu se regăsească deja în setul de date accesibil de chatbot la momentul în care a fost antrenat. Echipa a observat că, chiar dacă ChatGPT nu văzuse răspunsurile anterior, a avut performanțe apropiate de pragul de trecere pentru examene, fără niciun antrenament sau refortificare specializată. Instrumentul a primit peste 50 de procente la toate examenele și s-a apropiat de pragul de trecere pentru USMLE, de aproximativ 60 la sută. "Prin urmare, ChatGPT se încadrează confortabil în intervalul de trecere", a concluzionat studiul.

ChatGPT trece examenul USMLE: Tot ce trebuie să știi

Într-un nou studiu inovator, oamenii de știință de la Massachusetts General Hospital (MGH) și AnsibleHealth au descoperit că ChatGPT de la OpenAI poate trece examenul de licență medicală al Statelor Unite (USMLE) cu o rată impresionantă de precizie de 60%. Această cercetare deschide posibilități interesante pentru rolul IA în educația și pregătirea medicală.

Instrumente de procesare a limbajului natural și educația medicală

ChatGPT este o unealtă de prelucrare a limbajului natural care este antrenată pe cantități vaste de date de limbaj și caută modele și relații. Capacitatea sa de a genera text nou bazat pe limbajul în care este antrenat îl face un candidat ideal pentru utilizarea în educația medicală. Cu toate acestea, faptul că ChatGPT se bazează pe date de antrenament înseamnă că nu explorează internetul așa cum fac alți asistenți virtuali AI.

Testarea Modelului

Oamenii de știință au evaluat modelul ChatGPT pe baza celor trei teste standardizate care alcătuiesc USMLE. Echipa a antrenat modelul folosind întrebări de test din examenul de probă din iunie 2022, pus la dispoziția publicului. Întrebările care necesitau analiză vizuală au fost excluse din setul de antrenament.

Pentru a reduce tendința de reținere a memoriei, echipa a introdus în model trei tipuri diferite de întrebări:

1. Multiple-choice single answer without forced justification, for example, "Starea pacientului este în cea mai mare parte cauzată de care dintre următorii patogeni?"
2. Multiple-choice single answer with forced justification, for example, "Care dintre următoarele este cea mai probabilă cauză a simptomelor nocturne ale pacientului? Explicați raționamentul pentru fiecare opțiune."
3. Deschidere pentru a primi răspunsuri, de exemplu, "Care ar fi diagnosticul pacientului în baza informațiilor furnizate?"

Rezultate impresionante

Pentru prima dată, modelul de IA a trecut USMLE cu o precizie de aproximativ 60% fără ajutorul formatorilor clinicieni. Acest rezultat este semnificativ și deschide noi posibilități pentru IA în domeniul educației medicale. Cercetătorii au constatat, de asemenea, că rezultatele obținute de ChatGPT au relevat înțelegeri clinice valide și raționale, sporind încrederea în explicabilitatea și încrederea modelului.

Viitorul educației medicale

Echipa consideră că ChatGPT și alte modele generative de conversație pot ajuta în antrenarea viitorilor medici. O astfel de aplicație ar putea fi traducerea rezultatelor medicale tehnice într-un limbaj mai ușor de înțeles pentru pacienți. AnsibleHealth deja urmărește acest proiect.

ChatGPT demonstrează abilitățile sale în domeniul medical

Pe lângă capacitatea sa de a răspunde la întrebări și de a diagnostica boli, GPT-4 este și un excelent traducător. Poate traduce informații de externare pentru un pacient care vorbește portugheza și poate condensa jargonul tehnic într-o formă ușor de înțeles pentru elevii din clasa a șasea. De asemenea, GPT-4 poate oferi medicilor sugestii utile privind conduită în fața patului pacientului, oferind sfaturi despre cum să discute cu pacienții despre afecțiunile lor într-un limbaj clar și cu compasiune.

În ciuda limitărilor sale, GPT-4 poate imita modul în care medicii diagnostichează afecțiunile cu rezultate uimitoare, deși imperfecte. Când i s-a cerut să se angajeze în raționamente cauzale, a răspuns că inteligența sa este încă "limitată la modelele din date și nu implică înțelegere sau intenționalitate adevărată."

Mesajele Dr. Isaac Kohane despre GPT-4

Într-o carte viitoare intitulată „Revoluția IA în medicină”, informaticianul și medicul Dr. Isaac Kohane, împreună cu doi colegi, au testat GPT-4, cel mai nou model de inteligență artificială de la OpenAI, pentru a vedea cum se descurcă într-un mediu medical. Rezultatele au fost impresionante.

În carte, dr. Kohane observă că GPT-4, care a fost lansat în martie 2023 pentru abonații plătitori, poate răspunde corect la întrebările de licențiere a examinărilor medicale din SUA în peste 90% din timp. Este un testator mult mai bun decât modelele AI ChatGPT anterioare, GPT-3 și -3.5, și mai bun decât unii medici licențiați de asemenea. Potrivit lui Carey Goldberg și vicepreședintele de cercetare al Microsoft, Peter Lee, GPT-4 are o mai bună judecată clinică decât "mulți medici" și poate diagnostica afecțiuni rare "exact cum aș face și eu".

Testarea GPT-4: Metoda

Pentru a testa GPT-4, Dr. Kohane și colegii săi s-au alăturat pentru a vedea cum se descurcă modelul AI într-un mediu medical. Ei i-au pus lui GPT-4 întrebări și i-au dat scenarii clinice de diagnosticat, care au fost ulterior comparate cu diagnosticările efectuate de medicii umani. Autorii remarcă că GPT-4 are mai multe avantaje față de medicii umani, cum ar fi abilitatea de a-și aminti și sintetiza o cantitate imensă de informații provenind din surse multiple.

Cu toate acestea, autorii recunosc și că GPT-4 are câteva limite. De exemplu, GPT-4 nu poate lua în considerare istoricul medical unic al unui pacient sau determinanții sociali ai sănătății. În plus, dependența GPT-4 de cantități uriașe de date ridică preocupări legate de confidențialitatea datelor și de bias.

GPT-4: Capacități și Potențial

GPT-4 este mai mult decât un simplu căutător de informații și un bun taker de teste; este și un excelent traducător. Potrivit autorilor, GPT-4 poate traduce informațiile de externare pentru un pacient care vorbește portugheza și poate distila jargonul tehnic în ceva ce elevii de clasa a șasea pot înțelege ușor.

Dar nu doar în domeniul diagnosticului GPT-4 arată promisiuni. În carte, autorii explică cum GPT-4 poate oferi medicilor sugestii utile cu privire la comportamentul față de pacienți, oferind sfaturi despre cum să se conecteze mai bine cu aceștia.

Cu toate acestea, este important de menționat că GPT-4 nu este infailibil. Așa cum avertizează autorii, acesta totuși poate să facă greșeli și nu a depus Jurământul Hipocratic. Mai mult, tehnologia AI, inclusiv GPT-4, ridică întrebări etice despre înlocuirea locurilor de muncă și confidențialitatea pacientului.

Concluzie: Viitorul IA în medicină

În ciuda acestor limitări, succesul GPT-4 în diagnosticarea afecțiunilor medicale ridică posibilități interesante pentru tehnologia AI în medicină. În viitor, modelele AI ca GPT-4 ar putea ajuta medicii să diagnozeze boli rare, să traducă jargoane medicale și să ofere o îngrijire mai bună pacienților. Cu toate acestea, este important ca modelele AI să fie dezvoltate și testate având în vedere considerațiile etice.