Audacity получил набор бесплатных ИИ-плагинов для редактирования аудиосигнала и генерации музыки

Разработчики говорят, что это только первый шаг в этом направлении.

Популярный бесплатный аудиоредактор Audacity получил бесплатный набор плагинов на основе искусственного интеллекта. Инструменты работают на основе тулкита Intel OpenVINO AI и фокусируются на аккуратном редактировании сигнала.

В общей сложности, в Audacity добавили шесть плагинов для генерации музыки и редактирования аудиосигнала. Каждый плагин полагается на одну из популярных моделей искусственного интеллекта, заявили разработчики.

Плагины Music Generation и Music Style работают на основе модели Stable Diffusion и её ответвления Riffusion. Инструменты генерируют музыку прямо в программе, полагаясь на текстовый запрос пользователя или одну из аудиодорожек в проекте. Music Generation призван придумывать фоновые дорожки с музыкой, в то время как Music Style предназначен для смены стилистики уже существующих композиций.

Audacity также научился отделять аудиоконтент из готовых композиций. С помощью плагина Music Separation редактор может отделить вокал от аккомпанемента или разделить всю песню на отдельные дорожки с басом, ударными, голосом и другими инструментами. В качестве дополнения к предыдущему плагину редактор также получил инструмент Stem Separation, разделяющий композиции на стэмы. Для редактирования записанного сигнала в программу добавили «умные» инструменты Noise Suppression и Whisper Transcription. Первый удаляет любые фоновые шумы из записанного сигнала, второй — транскрибирует шёпот и обычную речь в текст. По мнению разработчиков, оба инструмента особенно пригодятся авторам подкастов.

По словам менеджера по продукту Audacity Мартина Кири, создатели добавили в программу плагины на основе искусственного интеллекта с целью сделать редактор более привлекательным для новых и существующих пользователей. Таким образом разработчики стремятся «предложить возможности, которые ранее были недоступны или попросту труднореализуемы», отметил он.

В разговоре с авторами YouTube-канала Intel Business менеджер также уточнил, что «плагины работают локально на компьютере [пользователя], а не на удалённом сервере, что продиктовано вопросами конфиденциальности». При этом внедрение умных инструментов обработки и генерации звука Кири назвал «всего лишь первым шагом» для команды аудиоредактора, отметив, что в будущем команда создателей планирует расширять библиотеку подобных плагинов. Умные плагины не будут поставляться вместе с Audacity, вместо этого создатели выложили их установочные пакеты в официальном репозитории на платформе GitHub.

Отмечается, что по ряду причин работа инструментов пока что возможна только в среде Windows. Когда именно умные помощники появятся в версиях редактора для macOS и Linux, не уточняется — релиз этих версий состоится.

Получить больше подробностей о плагинах с искусственным интеллектом для Audacity, а заодно ознакомиться с инструкциями по их скачиванию и установке, можно в официальном блоге разработчиков.

Источник: vk.com

Комментарии: