Сделаем EMO снова популярным. ИИ от компании Alibaba оживляет портреты

Китайская технологическая компания Alibaba представила Emote Portrait Alive — EMO. Нейросеть может анимировать портреты. В демонстрационных видео фотографии и даже картины способны петь, читать рэп или произносить театральные монологи.

Для обучения исследователи из Института интеллектуальных вычислений Alibaba использовали более 250 часов видео с различными «говорящими головами». В системе применяется технология ИИ диффузионной модели, которая уже доказала свою эффективность при создании реалистичных синтетических изображений. EMO преобразует звуковые волны непосредственно в видеокадры, что позволяет получить удивительно естественную анимацию, отражающую тонкие манеры и индивидуальные особенности человека.

Источник: vk.com

Комментарии: