В мае 2017 года в рамках исследовательского проекта Magenta под руководством Google был создан алгоритм NSynth, который использует результаты машинного обучения для синтеза новых звуков. NSynth был обучен на 300 тысячах музыкальных семплов с помощью оупенсорсной библиотеки Tensorflow. В марте 2018 года компания Google представила синтезатор NSynth Super, на котором можно создавать музыку с уникальным звучанием.
В прототип NSynth Super загружено всего 16 семплов, которые после обработки искусственным интеллектом преобразовались примерно в сто тысяч новых звуков. Смешивая эти звуки в разной тональности и с различными эффектами можно получать звуки, которые до сих пор нигде не использовались. Волновые характеристики результирующих семплов меняются в режиме реального времени с нулевой задержкой. NSynth Super можно использовать вместе с MIDI-контроллерами, секвенсорами и компьютером, на ходу меняя звучание и подбирая эффекты, гармонично вписывающиеся в композицию.
На видео показано, как можно смешать чистый и гранжевый басы с ситарой и электрическим пианино, получив новый многослойный звук:
Разработкой NSynth и NSynth Super занимаются экспериментальные лаборатории Creative Lab и Chrome Music Lab, которые входят в состав Google. При создании синтезатора они, скорее всего, вдохновлялись процессором эффектов Korg Kaoss Pad образца 1999 года. Он выглядит примерно так же и тоже позволяет музыкантам составлять новые звуки из нескольких заранее запрограммированных семплов.
Приобрести NSynth Super нельзя. Но можно создать самому — исходный код, схемы и дизайн-шаблоны выложены в открытый доступ на GitHub. Естественно, не обязательно делать синтезатор в точности таким, каким его создала Google. Вы вольны вносить изменения в этот проект и модифицировать его как вам хочется.
Канал iG в Telegram — t.me/iguides_ru
