Наблюдается падение производительности модели ИИ OpenAI GPT-4. Эксперты предполагают, что причиной этого может быть серьезная перестройка, включающая более мелкие специализированные модели.
В последнее время пользователи GPT-4 сообщают о снижении его производительности. Однако причиной этого могут быть изменения в модели. К примеру, GPT-4, некогда считавшаяся самой мощной моделью искусственного интеллекта, теперь, похоже, стала работать слабее.
Сообщается, что модель работает не на пике своих возможностей (критики называют ее «ленивой» и «глупой»). Пользователи пишут об этом в Twitter и на форуме разработчиков OpenAI. Они рассказали о таких проблемах, как несовершенная логика, повторяющиеся ответы, неспособность отслеживать предоставленную информацию и следовать инструкциям.
Один из разработчиков, полагающийся на GPT-4 при кодировании функций сайта, выразил свое разочарование. Он сказал:
«Это как ездить на Ferrari в течение месяца, а потом вдруг машина превращается в избитый старый пикап. Я не уверен, что хочу за это платить».
Такое падение производительности резко контрастирует с тем, что было в начале года. Тогда ChatGPT, работающий на GPT-3 и GPT-3.5, поразил мир технологий. Поэтому, с выпуском GPT-4 были связаны большие ожидания. Интересно, что после запуска GPT-4 пользователи были довольны.
Интересное по теме: Google отправляет ChatGPT «на пенсию».
Однако в последние недели производительность GPT-4, похоже, снизилась. Это вызвало дискуссии в сообществе специалистов по ИИ. Эксперты, в том числе генеральный директор компании Lamini Шэрон Чжоу, предполагают, что OpenAI может разрабатывать более компактные и менее дорогие версии GPT-4. Такой подход, получивший название Mixture of Experts (MOE), предполагает создание специализированных версий GPT-4 для различных предметных областей. Когда пользователи задают вопрос, новая система направляет запрос к соответствующей модели (моделям).
Чжоу сравнивает ситуацию с философской дилеммой корабля Тезея. Это парадокс, который можно сформулировать так:
«Если все составные части исходного объекта были заменены, остаётся ли объект тем же объектом?»
По аналогии поскольку части GPT-4 заменяются более мелкими моделями, у многих постает вопрос: «Стоит ли называть уже де-факто новый продукт GPT-4?» Компания OpenAI пока никак не прокомментировала этот вопрос.
Почему так произошло и что дальше?
Недавно эксперты в области ИИ поделились в социальных сетях предполагаемыми деталями архитектуры GPT-4. Существуют две основные причины для принятия подхода MOE — расширенные возможности реагирования и эффективные, быстрые ответы. Тем не менее между стоимостью и качеством может существовать компромисс.
Чжоу предполагает, что недавнее падение производительности модели может быть результатом такого подхода. К сожалению, на начальном этапе GPT-4 может не показать хороших результатов, поскольку он адаптируется к новым задачам. Однако по мнению экспертов, ожидается, что со временем он научится и улучшит свои показатели, в результате чего станет более эффективным. В итоге GPT-4 может стать более привлекательным вариантом для пользователей и разработчиков.
Другие статьи на эту тему:
- Пять лучших плагинов в работе с ChatGPT;
- Как заработать тысячи долларов с помощью ChatGPT: история писателя;
- OpenAI запускает официальное приложение ChatGPT для iOS.
По материалам: Business Insider.