Фото: pixabay

PNAS: ИИ не распознает грамматические ошибки в построении предложений

В научном журнале Proceedings of the National Academy of Sciences (PNAS) опубликованы результаты исследования, проведенного испанскими учеными из Университета Ровира и Вергилия и Университета Барселоны, которые выяснили, что самые продвинутые системы искусственного интеллекта (ИИ), основанные на больших языковых моделях, значительно уступают человеку в распознавании грамматических ошибок, делится Газета.Ru.

Специалисты протестировали три лучшие на сегодняшний день языковые модели, включая ChatGPT. Они должны были распознать грамматически неправильно построенные предложения. Аналогичное задание выполняла контрольная группа людей.

Испытуемые легко обнаружили грамматические несоответствия. Но все три языковые модели давали много неправильных ответов. На самом деле искусственный интеллект определил все приведенные примеры как правильные.

Ученые пришли к выводу, что ИИ пока не способен оценивать тексты на соответствие грамматическим нормам, даже если у него загружены все необходимые правила.

В то же время человек распознает банальные ошибки в грамматике быстро и без усилий. Это свидетельствует в пользу того, что нейронные сети понимают язык иначе, чем люди.

Поделиться:

Подписывайтесь на краткие, но содержательные новости со всего мира
глазами молодого поколения в Телеграм и ВКонтакте.

Почитайте также

Российские ученые разработали ИИ программу для выявления дислексии у детей

157 Российские ученые из Центра искусственного интеллекта НИУ ВШЭ разработали уникальную систему машинного обучения «Дислектор», …