«Аудио аватары» позволят менять голос в видеоиграх. Попробуйте сами прямо сейчас

Компьютерные игры, вышедшие в последние несколько лет, предоставляют широкие возможности для тщательной настройки персонажей. Каждый игрок может создавать уникальные лица и примерять любую одежду так, чтобы его виртуальный аватар полностью соответствовал его стилю. Единственное, что на данный момент недоступно любителям видеоигр — это изменение собственного голоса, однако и это ограничение скоро будет снято. Ожидается, что в игры и сервисы общения будет встраиваться технология Modulate, меняющая тон голоса до неузнаваемости. Опробовать ее можно уже сейчас.

Авторами технологии являются Майк Паппас и Картер Хаффман. Идея создания технологии для изменения голоса пришла им в 2015 году, когда Хаффман пользовался приложением Prisma для придания фотографиям стиля знаменитых картин. Он быстро понял, что подобную обработку можно проделывать и с аудио, и спустя год проведения опытов с генеративно-состязательной нейросетью, он получил первые результаты.

Это то, чего люди хотели на протяжении сотен лет. Технология упоминалась в научной фантастике и играх, и это то, что мы должны развивать.

Майк Паппас, соучредитель Modulate

Чтобы поменять мужской голос на женский или придать ему голос Дарта Вейдера или других персонажей, одна часть нейросети Modulate создает пример голоса, а вторая — оценивает, соответствует ли его тон и другие особенности установленным требованиям. Если он имеет неправильную высоту или другую характеристику, нейросеть создает варианты до тех пор, пока не появится достойный результат.

Авторы беспокоятся, что технология будет подвергаться жесткой критике, так как ее могут использовать злоумышленники для обмана людей. Из-за этого было решено, что она будет поставляться не в виде самостоятельного приложения, а станет частью онлайн игр — есть надежда, что такой подход не позволит использовать технологию в мошеннических целях.

Modulate может сильно разнообразить многопользовательские игры — пользователи смогут не только менять внешность персонажей, но и собственный голос в чате в режиме реального времени. Так как технология реагирует не на слова, а на тон голоса, она будет доступна на любом языке мира. Авторы надеются, что в процессе обучения нейросеть научится распознавать смех и даже менять акцент.

Опробовать технологию можно на ее официальном сайте. Для этого нужно записать 10-секундный фрагмент собственного голоса, изменить его тон при помощи ползунков и нажать «Apply». Услышать измененный голос можно нажав на кнопку воспроизведения.