Chat GPT-4 на рівні лікарів-експертів може впоратися в оцінці зору – дослідження

Згідно з дослідженням Кембриджського університету OpenAI GPT-4 демонструє майже такі ж результати, як і експерти з офтальмології.

У дослідженні, опублікованому в журналі PLOS Digital Health, порівнювали LLM, GPT-3.5, PaLM 2 і LLaMa за допомогою тесту з 87 питань. Експерти-офтальмологи, стажери та молодші лікарі отримували однаковий іспит. GPT-4 правильно відповів на 60 запитань, що краще, ніж молодші лікарі (37) та краще трьох стажистів (59,7).

“GPT-4 показав кращі результати, ніж стажери та молодші лікарі, правильно відповівши на 60 із 87 питань”, – зазначили дослідники.

Хоча ці результати обнадійливі, дослідники вказують на обмеженість питань та схильність магістрантів до “галюцинацій” або вигадок. Крім того, системам також бракує нюансів, що може призвести до неточностей.

Нагадаємо, раніше дослідники OpenAI попередили про потужне відкриття у сфері штучного інтелекту, яке може бути загрозою для людства.