Potrivit experților, ELIZA a avut rezultate mai bune în cazul testului Turing, scrie Yahoo News.

Testul a fost creat pentru a diferenția oamenii de inteligența artificială.

ChatGPT a fost întrecut de un program din anii 1960 într-un test Turing

Testul Turing e considerat standardul prin care experții pot determina abilitatea unei mașinării de a imita conversațiile umane. Testul a fost creat în 1950 de către cercetătorul Alan Turing. 

La peste 50 de la crearea testului, ChatGPT a fost întrecut de un program din anii 1960. În cel mai recent studiu, 652 de participanți umani au fost rugați să își dea seama dacă vorbeau unul cu altul sau cu un chatbot AI, pe Internet. 

Chatbot-ul care folosește GPT-4, cel mai recent model al companiei OpenAI, a reușit să păcălească participanții la studiu mai frecvent decât ELIZA. A avut o rată de succes de 41%. 

ELIZA a putut să păcălească participanții că e om 27% din cazuri. GPT-3.5, însă, a avut o rată de succes de doar 14%. 

Expertul Gary Marcus descrie succesul ELIZA drept „stânjenitor” pentru companiile tech moderne care creează programe AI. Alți experți susțin că ChatGPT nu a fost creat pentru a avea un scor ridicat la un test Turing. 

„Cred că faptul că GPT-3.5 pierde în fața ELIZA nu e atât de surprinzător atunci când citești studiul,” a declarat Ethan Mollick, profesor de inteligență artificială în cadrul Wharton School, SUA. 

„OpenAI a luat în considerare riscul de prefacere că e o persoană reală și are RLHF (învățare de la oameni) pentru a se asigura că ChatGPT nu va încerca acest lucru,” a continuat Mollick, după ce ChatGPT a fost întrecut de ELIZA. „ELIZA a fost creat pentru a trece testul Turing, folosindu-se de psihologia noastră.” 

ELIZA a păcălit mai mulți oameni că vorbesc cu alte persoane

Unul dintre motivele pentru care participanții au crezut că vorbesc cu un alt om, nu cu ELIZA, e faptul că programul era „prea prost” pentru a fi un model AI modern, potrivit studiului. Ca urmare, „era mai probabil să fie un om care nu voia să coopereze”. 

Chiar și așa, faptul că ChatGPT a fost întrecut de ELIZA, în varianta GPT-3.5, demonstrează că GPT-4 e mai eficient.

„Ca de obicei, testarea comportamentului nu ne spune ceva despre capacități,” a declarat Arvind Narayanan, profesor din cadrul Princeton. „ChatGPT a fost calibrat să aibă un ton formal, nu să își exprime opinii etc. Ceea ce înseamnă că nu e similar cu un om.” 

În același timp, GPT-4, care a trecut prin aceleași procese precum GPT-3.5, a trecut testul Turing din studiu. Acesta e considerat cel mai avansat model creat de OpenAI până acum. Utilizatorii pot avea acces la el cu un abonament lunar.