Google представил нейросетевой синтезатор с открытым кодом

Google Creative Lab и Magenta представили устройство NSynth Super с открытым исходным кодом, позволяющее музыкантам исследовать новые звуки при помощи нейросетевого алгоритма NSynth.

Алгоритм NSynth (нейронный синтезатор) был разработан в 2017 году. Он использует глубокие нейронные сети для изучения характеристик звуков, и затем на их основе создает новый звук. В итоге можно получить звук, который, к примеру, является частью флейты и ситар одновременно. 

Разработчики загрузили в устройство 16 оригинальных звуков музыкальных инструментов. Пользователь может выбрать исходный звук и при помощи сенсорного экрана синтезировать более 100 тысяч новых звуков. NSynth Super работает при помощи любых устройств MIDI, таких как как DAW, секвенсор или клавиатура.

При создании всех продуктов Magenta, включая NSynth Super, используются библиотеки с открытым исходным кодом, в том числе TensorFlow и openFrameworks. Исходный код, схемы и шаблоны дизайна доступны для загрузки на GitHub.