В ходе исследования удалось выяснить, с чем искусственный интеллект (ИИ) справляется хуже человека. Как ни странно, это касается корректировки текста , сообщает psm7.com .
Фото: freepik.com
В частности, люди легко распознают грамматические ошибки в предложениях, в то время как ИИ их просто не замечает.
К такому выводу пришли ученые Берлинского университета имени Гумбольдта, Автономного университета Барселоны (UAB) и Каталонского института исследований и перспективных исследований (ICREA), говорится в публикации Pnas.
Как проверяли
В эксперименте, в котором приняли участие и люди, и машины, были использованы два чата: GPT3 и ChatGPT на основе GP3.5.
Как участникам, так и языковым моделям задавали одинаковый вопрос: «Есть ли это предложение грамматически правильно?». И результаты были неожиданными: люди отвечали правильно, в то время как ИИ много раз ошибался.
По словам ученых, чат-боты в основном используют стандартную стратегию ответа «да», независимо от того, правильный ответ или нет.
«Результат удивляет, поскольку эти системы «обучаются» на основе того, что грамматически правильно в языке, а что нет», — объясняет руководившая исследованием научная сотрудница Виттория Дентелла.
В частности, в процессе обучения языковым моделям показывают неправильно построенные предложения, а затем дается правильный вариант. У людей этот процесс происходит совсем иначе, ведь они не имеют доступа к «негативным доказательствам».
Поэтому ИИ не может распознать простые грамматические ошибки, тогда как люди могут мгновенно и без труда. Таким образом, исследование показывает, что между людьми и искусственным интеллектом существует двойное несоответствие.
«Разработка полезных и безопасных инструментов искусственного интеллекта может быть очень полезна, но мы должны знать об их недостатках. Поскольку большинство приложений ИИ зависят от понимания команд, определения их ограниченного понимания грамматики, как мы это сделали в нашем исследовании, имеет жизненно важное значение», — отметила профессор ICREA Эвелина Лейвада.
Автор Дарья Шуть
Источник psm7.com