Машинный перевод: основы, алгортмы, проблемы

0:00:07 Разбор теста по предыдущей лекции

0:10:20 Вводная часть лекции

0:11:33 Историческая справка

0:23:06 Neural Machine Translation

0:23:46 Seq2Seq

0:38:16 BeamSearch

0:46:05 Quality Evaluation

1:00:26 Attention

1:11:32 Ответы на вопросы по лекции

Нейронный машинный перевод (НМП) позволяет преодолеть многие недостатки традиционных систем перевода по фразам. Но в то же время нейронные модели более сложны как в обучении, так и в самом переводе. Мы подготовили статью, в которой Google представила новую систему нейронного перевода GNMT для решения этих проблем.

Коэффициент интеллекта машинного перевода

Нейросеть переводит речь напрямую, пропуская этап конвертации аудио в текст.

Google разработала алгоритм Translatotron, который напрямую переводит устную речь на разные языки, минуя конвертацию в текст. Система также умеет сохранять голос и интонацию пользователя. Об этом компания сообщила в своём блоге.

Раньше машинные переводчики работали по правилам, которые писали лингвисты. Лингвистов нужно было много, а составлять правила было долго и утомительно. Но потом на помощь человеку пришли компьютеры и статистика.

Алгоритм умеет сохранять исходный голос говорящего.

Google представила новую технологию синхронного перевода устной речи — Translatotron. Об этом компания сообщила в своём блоге.

С наступлением эры нейросетей СМИ любят писать, что машинный перевод вот-вот сравнится по качеству с продуктом профессионального переводчика. «Искусственный интеллект в машинном переводе догоняет человека», уверяют заголовки уважаемых технологических медиа. Но так ли это?

Взял несколько примеров из практики, пояснил, как принимал переводческое решение, и рискнул предположить, что машинный перевод к таким алгоритмам придет не скоро, а если и придет, то это будет ОЧЕНЬ дорогой перевод, который явно дешевле будет заказывать у людей.

- Вы занимаетесь корпусной лингвистикой. Над каким корпусом текстов сейчас работаете?

Американские биологи разработали программу DeepSqueak, которая способна понять писк крыс и мышей. Об алгоритме рассказывает издание The Verge.

Интервью со старшим научным сотрудником Института прикладной семиотики Айдаром Хусаиновым о решении проблемы машинного перевода

«Сердцебиение всадника — самая дальняя точка лошади»

Facebook

«Яндекс.Браузер» теперь переводит страницы с помощью искусственного интеллекта. Программа анализирует содержимое, расположение, оформление и тип текста. Всё это делает перевод точнее.

Материал автора блога «Вастрик.ру» о типах машинного перевода и будущем этого направления.

Как всегда, в нелёгком деле исследователям помог продвинутый искусственный интеллект.

Если вы последние полгода использовали онлайн-переводчики, то могли заметить, что иногда они предлагают странные несуществующие слова. Это результат неудачной работы нейросетей. «Афиша Daily» узнала, почему это происходит, а также собрала самые нелепые переводы и нашла им применение.

Антон Дворкович

Математик Варвара Логачева о системах машинного перевода, источниках параллельных текстов и статистических методах в переводе

ПостНаука продолжает рассказывать о современных технологиях в проекте «Банк знаний», подготовленном совместно с Корпоративным университетом Сбербанка.

Аккаунт, посвященный странному багу гугловского машинного перевода выкладывает такие пёрлы. Загружаются бессмысленные комбинации букв, а на выходе нейросеть переводчика выдает необычные результаты. Иногда абсурдные, иногда мотивирующие, а порой очень мрачные.

Яндекс.Переводчик начал использовать гибридную систему перевода. К статистическому переводчику, который мы применяем уже давно, добавилась технология перевода на основе нейронной сети. Теперь перевод выполняют обе модели, а затем алгоритм на основе метода машинного обучения CatBoost сравнивает результаты и предлагает лучший.

Описание процессов машинного перевода основанного на базе правил (Rule-Based), машинного перевода на базе фраз (Phrase-Based) и нейронного перевода

Переведено и озвучено: vertdider.com

На базе исследовательской организации OpenAI занимаются разработкой систем нейронных сетей для обучения роботов.

Перевод: Владимир Киц

Редактура: Алексей Малов

Озвучка: Тим Эрна

Монтаж видео: Кристина Утёсова

Обложка: Андрей Гавриков

Незадолго до этого в Translate внедрили машинное обучение, чтобы улучшить качество переводов.