ChatGPT, adesea greșit în știință, potrivit unui nou studiu

Conform ScienceDaily, o echipă de cercetători a supus evaluării un număr de peste 700 de ipoteze, adresând aceeași întrebare de 10 ori pentru fiecare, cu scopul de a cuantifica consecvența răspunsurilor.

În momentul primei desfășurări a experimentului, în 2024, răspunsurile corecte oferite de ChatGPT au reprezentat 76,5% din totalul cazurilor. Ulterior, într-un test complementar efectuat în 2025, procentajul de precizie a înregistrat o creștere modestă, ajungând la 80%.

Rezultatele ajustate ale studiului au arătat că performanța inteligenței artificiale IA a fost cu aproximativ 60% superioară celei a simplelor presupuneri aleatorii. Acest nivel de acuratețe este însă mult mai apropiat de un scor D decât de unul care ar indica o fiabilitate puternică.

Citește șiPanică AI se răspândește la nivel global: sondajul recent dezvăluie

În procesul de detectare a enunțurilor false, sistemul a înregistrat un procent de 16,4% de identificare corectă a acestora, ceea ce indică dificultăți considerabile în acest aspect.

Întrecerile lui ChatGPT în domeniul științific au scos la iveală o inconsistență considerabilă. În situații în care aceeași întrebare a fost adresată de 10 ori, răspunsurile oferite de ChatGPT au fost identice în aproximativ 73% dintre cazuri.

Se înregistrează preocupări din cauza răspunsurilor care nu sunt uniforme și prezintă inconsecvențe.

Cicek, un profesor asociat în cadrul Departamentul de Marketing și Afaceri Internaționale din Carson College of Business al WSU, a declarat:

„Nu vorbim doar despre acuratețe, vorbim despre inconsistență, pentru că dacă pui aceeași întrebare iar și iar, obții răspunsuri diferite”

ca autor principal al unei noi publicații recente.

În cadrul unui experiment, s-a observat că răspunsurile oferite de ChatGPT în domeniul științific pot fi inconsecvente.

„Am folosit 10 solicitări cu exact aceeași întrebare. Totul era identic. Răspundea că este adevărat. Apoi, spune că este fals. Este adevărat, este fals, fals, adevărat. Au existat mai multe cazuri în care au fost cinci răspunsuri adevărate și cinci false”

Aceste rezultate ridică întrebări cu privire la fiabilitatea instrumentului în domeniul științific.

Este esențial să se acorde atenție sporită atunci când se utilizează inteligența artificială pentru a lua decizii cruciale, mai ales atunci când acestea implică gândire complexă și detaliată. IA generativă are capacitatea de a crea texte articulate și persuasive, însă capacitatea sa de a înțelege în profunzime conceptele rămâne încă la un nivel inferior.

Experții recomandă o abordare prudentă atunci când vine vorba despre inteligența artificială, din cauza posibilelor implicații nefaste ale acesteia.

Nu ești conștient de ceea ce se întâmplă

atunci când folosești astfel de tehnologii, a declarat un expert. Utilizarea tehnologiilor IA ridică semne de întrebare și îngrijorări în rândul experților. O abordare prudentă și o evaluare atentă a acestor tehnologii sunt necesare pentru a evita consecințele nedorite.

Cercetătorii recomandă factorilor de decizie din domeniul afacerilor să verifice cu atenție datele produse de inteligența artificială și să păstreze o atitudine sceptică față de acestea. În plus, ei evidențiază importanța instruirii pentru o înțelegere aprofundată a capacităților și limitărilor sistemelor de inteligență artificială.

Rezultatele studiului privind ChatGPT au arătat că acesta poate avea deficiențe în domenii științifice, potrivit remarcilor lui Cicek. Studiul nu a fost unul izolat, deoarece experimente similare efectuate cu alte tehnologii de inteligență artificială au obținut rezultate asemănătoare. Cercetarea s-a sprijinit totodată pe studii anterioare care au avertizat cu privire la entuziasmul exagerat față de inteligența artificială. În anul 2024, un sondaj la nivel național a arătat că utilizatorii erau mai puțin înclinați să achiziționeze produse atunci când acestea erau promovate ca fiind bazate pe inteligența artificială.