В ходе исследования удалось выяснить, с чем искусственный интеллект (ИИ) справляется хуже человека. Как ни странно, это касается корректировки текста
Фото: freepik.com
В частности, люди легко распознают грамматические ошибки в предложениях, тогда как ИИ их просто не замечает.
К такому выводу пришли ученые Берлинского университета имени Гумбольдта, Автономного университета Барселоны (UAB) и Каталонского института исследований и перспективных исследований (ICREA), говорится в публикации на Pnas.
Как проверяли
Во время эксперимента, в котором приняли участие и люди, и машины, были использованы два чата: GPT3 и ChatGPT на основе GP3.5.
Как участникам, так и языковым моделям задавали одинаковый вопрос: «Является ли это предложение грамматически правильным?». И результаты были неожиданными: люди отвечали правильно, тогда как ИИ много раз ошибался.
По словам ученых, чат-боты в основном используют стандартную стратегию ответа «да», независимо от того, правильный ответ или нет.
«Результат удивляет, поскольку эти системы «обучаются» на основе того, что грамматически правильно в языке, а что нет», — объясняет научная сотрудница Виттория Дентелла, которая руководила исследованием.
Читайте также: OpenAI запустила магазин с чат-ботами: сколько стоит подписка
В частности, в процессе обучения языковым моделям показывают неправильно построенные предложения, а затем предоставляется правильный вариант. У людей этот процесс происходит совсем иначе, ведь они не имеют доступа к «отрицательным доказательствам».
Поэтому ИИ не может распознать простые грамматические ошибки, тогда как люди могут мгновенно и без усилий. Таким образом исследование показывает, что между людьми и искусственным интеллектом существует двойное несоответствие.
«Разработка полезных и безопасных инструментов искусственного интеллекта может быть очень полезной, но мы должны знать об их недостатках. Поскольку большинство приложений ИИ зависят от понимания команд, определение их ограниченного понимания грамматики, как мы это сделали в нашем исследовании, имеет жизненно важное значение», — отметила профессор-исследователь ICREA Эвелина Лейвада.
Ранее мы писали, что искусственный интеллект (ИИ) можно научить видеть детали на изображениях, которые скрываются от человеческого глаза. Теперь нейронная сеть ИИ обнаружила кое-что необычное в лице на картине Рафаэля. Лицо, о котором идет речь, принадлежит святому Иосифу, изображенному в верхнем левом углу картины, известной как Мадонна делла Роза (или Мадонна с розой).
Напомним, Google’s Bard, Microsoft’s Bing и ChatGPT подготовили 10 реалистичных, но нестандартных задач на 2024 год. Подробнее о них — читайте в нашем материале.
Ознакомьтесь с другими популярными материалами:
Названа страна Европы, которая будет самой популярной в 2024 году по мнению ИИ
Кто из магических персонажей стал самым желательным для экспериментов с ИИ — фото
Людей призвали не рассказывать ChatGPT и другим чат-ботам секреты: почему
По материалам Techxplore
