Компьютерная лингвистика, анализ текстов, корпусная лингвистика

Нейросеть написала сочинение по тургеневской "Муму". Назвала собачку кобылой. Это была не единственная лажа от этого вашего ChatGPT. В сочинении были такие роскошества как:

Так звучала тема открытой лекции генерального директора ООО «Мастерская цифровых решений» (г. Москва), аспиранта Елабужского института КФУ Алексея Александровича Голикова, которая состоялась 31 мая 2023 года.

Меня зовут Татьяна Шаврина, я — лид команды NLP в Институте AIRI. Мы исследуем большие языковые модели и развиваем методы на стыке ИИ и лингвистики. В этом посте я собрала золотые, на мой взгляд, публикации, которые рассказывают о проблемах языковых моделей.

Способна ли ChatGPT распознавать фишинговые ссылки?

Пресс-служба системы «Антиплагиат», выявляющей заимствования в курсовых, дипломных работах, научных трудах и других текстовых материалах, объявила о реализации новой функции, позволяющей определять факт того, что анализируемый текст сгенерирован с помощью ChatGPT или других больших языковых моделей.

При решении задач обработки естественного языка (NLP) одним из важнейших этапов является токенизация - разделение текста на отдельные части (токены). Часто в качестве единицы разбиения выбирают слово, однако это не единственный и, главное, не всегда удачный вариант.

Какая токенизация бывает?

Доктор Айзек Кохейн (Isaac Kohane), гарвардский специалист по информационным технологиям и медицине, совместно с двумя коллегами протестировал GPT-4 на предмет возможности использовать искусственный интеллект во врачебной сфере. По словам исследователя, система проявила себя лучше многих врачей.

Если коротко, то идея в следующем:

А что если перед ответом на вопрос к chatGPT дать ему информацию с первого сайта в выдаче Google по этому же запросу?

И вот что из этого получается:

Роботы-словотворцы

Чат-бот ChatGPT наделал много шума: люди задают ему вопросы и удивляются точности ответов, студенты с его помощью пишут дипломные работы, а копирайтеры публикуют статьи с названием типа «Сможет ли ChatGPT заменить копирайтеров?».

В этом видео мы протестируем новую модель GPT-4 на знание математики. Вопросы будут с подвохом: в них ошибаются даже знающие люди

Создатели чат-бота ChatGPT представили GPT-4. Новое поколение языковой модели может обрабатывать не только текст, но и картинки. Нейросеть стала умнее, креативнее и надёжнее.

На презентации также показали пару примеров использования GPT-4:

OpenAI представила новую модель ИИ интерпретации изображений и текста GPT-4, которую компания назвала «последней вехой в своих усилиях по расширению масштабов глубокого обучения».

В издательстве Individuum вышел сборник рассказов «Пытаясь проснуться», написанных писателем и художником Павлом Пепперштейном и генеративной нейросетью ruGPT-3, разработанной командой SberDevices. 

Это просто добавление одного слова за раз

Настоящий или ложный текст? Поговорим о ChatGPT и не только

“Анализ тональности текста” в Google Colab с использованием ChatGPT

Что такое Sentiment Analysis?

К моему удивлению, в открытом доступе оказалось не так уж много подробных и понятных объяснений того как работает модель GPT от OpenAI. Поэтому я решил всё взять в свои руки и написать этот туториал, в котором разобраны следующие темы:

Откуда взялась GPT и какую задачу она решает

Токенизация текста

Выпускница НИУ ВШЭ Любовь Поповец провела и опубликовала интересное дата-исследование, проанализировав цветовую палитру в романах классиков русской литературы. Наиболее популярным цветом у всех русских классиков был черный, а более всего его употреблял для описаний Набоков.

Привет!

В двух словах: этот бот позволяет генерировать продолжение к заданному тексту при помощи различных нейросетей. Чтобы начать использование, можете просто отправить ему любое сообщение:

Благодаря 540 миллиардам вложенных в языковую модель PaLM параметрам, нейросеть способна выстраивать многосложные языковые конструкции, зависящие от контекста, в том числе и объяснение смысла шуток, например:

Привет! Чем еще заняться на каникулах любителю Data Scienсe как не анализом тональности комментариев под новогодними обращениями?! На эту мысль меня натолкнули алгоритмы YouTube, выдавшие к просмотру первого января 2022 года два видео, с очень разными по эмоциональной окраске комментариями.

Как машинные переводчики придумали собственные правила — и что из этого вышло

«Мы сможем знать о человеке всё, куда бы он ни пошёл», заявила MT-NLG.

Профессора Оксфордского университета провели социально-технологический эксперимент, организовав дискуссию на тему искусственного интеллекта между студентами и системой машинного обучения.

Время от времени я выкладываю интересное из мира ИИ, GPT-3 ... и всегда в комментах есть "а как это сделать для себя?". Т.к. в рунете работающей и бесплатной GPT-3 модели нет, а то что есть - пока очень ограниченно.

Есть решение :)

Алгоритм действий: