OpenAI: ChatGPT 5 разрабатывается с акцентом на мышление и планирование действий

OpenAI работает над новым ИИ ChatGPT 5, который также имеет кодовое название Strawberry. Он направлен на создание когнитивных систем с продвинутыми способностями к рассуждению. Параллельно планируется усовершенствование GPT-4o, самого продвинутого ИИ на сегодняшний день. Модель сначала обучается на общем массиве данных, а затем «дообучается» на данных, релевантных конкретной задаче.

Цель проекта — научить ИИ самостоятельно проводить «глубокие исследования» в интернете и выполнять задачи, связанные с долгосрочным планированием. Способность к рассуждению считается ключевой для достижения ИИ уровня, сопоставимого или превосходящего человеческий. OpenAI намекает на скорый выпуск ИИ с навыками самостоятельного мышления.

В мае был получен внутренний документ OpenAI, подтверждающий работу над проектом Strawberry. Точная дата документа неизвестна, но он описывает план использования Strawberry для исследований. Проект пока в стадии разработки. Согласно документу, модели Strawberry смогут выйти за рамки простого ответа на запросы, планировать действия и автономно перемещаться по интернету для проведения «глубоких исследований». Эти навыки отсутствуют у существующих моделей. Время выхода проекта на публику пока неизвестно, детали засекречены даже внутри OpenAI.

Работа над проектом ChatGPT 5 началась в прошлом году под названием «Q*». Инцидент с увольнением главы OpenAI Сэма Альтмана произошел вскоре после запуска проекта и получения первых результатов. Двое сотрудников OpenAI сообщили, что в этом году они стали свидетелями демонстраций возможностей модели Q*. По их словам, модель отвечала на сложные научные вопросы и решала математические задачи.

На прошлой неделе в OpenAI прошло собрание, на котором был продемонстрирован новый исследовательский проект — ИИ с улучшенными навыками рассуждения, похожими на человеческие. Представитель OpenAI подтвердил встречу, но отказался раскрывать детали демонстрации. Reuters не смогли установить, был ли представлен именно проект Strawberry.

Предполагается, что эта разработка значительно улучшит способность ИИ к рассуждению. Способность к рассуждению у ИИ считается ключевой для выполнения различных задач: от научных открытий до создания новых программных приложений. Сэм Альтман ранее в этом году заявил, что «развитие способности к рассуждению станет важнейшим направлением прогресса в области искусственного интеллекта».

В последние месяцы OpenAI намекала разработчикам и сторонним лицам, что находится на пороге выпуска технологий с более продвинутыми возможностями рассуждения.

Strawberry использует специализированный метод пост-тренировки генеративных моделей ИИ. Этот метод включает «тонкую настройку», улучшение работы моделей в определенных областях после обучения на общих данных. Например, модели предоставляют обратную связь на основе её ответов и примеры хороших и плохих ответов.

Strawberry похожа на метод, разработанный в Стэнфорде в 2022 году под названием Self-Taught Reasoner (STaR), который позволяет моделям ИИ самостоятельно достигать более высокого уровня интеллекта через итеративное создание собственных тренировочных данных. Теоретически, этот метод можно использовать для того, чтобы языковые модели превзошли человеческий интеллект.

OpenAI стремится, чтобы Strawberry выполняла сложные задачи, требующие планирования и последовательного выполнения действий на протяжении длительного времени. Для этого компания обучает и оценивает модели на наборе данных «deep-research». После обучения модель сможет автономно пользоваться интернетом и проводить исследования с помощью специального агента CUA, способного принимать действия на основе найденной информации. OpenAI также планирует поручить Strawberry задачи программистов и специалистов по машинному обучению.

Источник: vk.com

Комментарии: