OpenAI o1 Hub

OpenAI представила новый ИИ o1: он «думает» перед ответом ?

В сфере искусственного интеллекта наблюдается значительный прогресс. OpenAI представила o1 — первый «рассуждающий» ИИ, который способен отвечать на сложные вопросы быстрее человека. Модель, ранее известная под кодовым названием Strawberry, была выпущена вместе с более компактной и доступной версией — o1-mini.

"Омни 1" превосходит своих предшественников в написании кода, математике и решении многоэтапных задач. Процесс обучения модели был принципиально иным: теперь она может «думать» перед тем, как дать ответ. Процесс обучения o1 кардинально отличается от предыдущих методов. Для тренировки модели был разработан новый алгоритм оптимизации и уникальный набор данных. Ранее модели GPT обучались по принципу копирования того, что они видели в обучающих данных. В случае с o1 был применен иной подход: модель училась самостоятельно решать задачи благодаря обучению с подкреплением. Этот метод предполагает поощрение правильных действий и наказание за ошибки. Кроме того, модель использует механизм «цепочки рассуждений», который позволяет ей последовательно анализировать запросы, подобно тому, как это делают люди. В результате o1 стала более точной и реже генерирует ошибки, хоть и не полностью избавилась от этой проблемы.

Главное отличие "рассуждающего" ИИ от GPT-4o — его способность решать сложные задачи, связанные с написанием кода, математикой и анализом данных, а также объяснять свои рассуждения. OpenAI протестировала o1 на квалификационном экзамене для Международной математической олимпиады. В то время как GPT-4o правильно решила лишь 13% задач, o1 набрала 83% . В онлайн-соревнованиях по программированию Codeforces новая модель показала результаты, соответствующие 89-му процентилю участников. По прогнозам OpenAI, следующая версия сможет демонстрировать умозаключения, сопоставимые с уровнем аспирантов в сложных контрольных заданиях по физике, химии и биологии!

И хотя o1 пока уступает GPT-4o во многих аспектах, таких как знание фактов, поиск информации в интернете и обработка файлов, OpenAI считает, что эта модель открывает совершенно новое направление в развитии искусственного интеллекта. Название «o1» символизирует начало нового этапа ?.

На демонстрации работы o1 модель попросили решить следующую задачу: «Принцессе столько лет, сколько будет принцу, когда принцессе будет вдвое больше, чем было принцу, когда возраст принцессы был вдвое меньше суммы их нынешних возрастов. Сколько лет принцу и принцессе? Приведите все решения этого вопроса.» ИИ обрабатывал запрос 30 секунд, после чего выдала верный ответ.

OpenAI также разработала интерфейс, показывающий ход рассуждений модели в реальном времени. Чтобы отвечать людям, o1 использовал такие фразы, как: «Мне интересно», «Я размышляю» и «Хорошо, давайте посмотрим». Это создавало иллюзию мыслительного процесса. Хотя, скорее всего, у нового ИИ нет сознания, он был разработан так, чтобы показать, будто он «глубже погружается в проблемы» и кажется более «человечным».

Источник: openai.com

Комментарии: