Cream Soda выпустили новую песню «Меланхолия» и представили клип, полностью созданный искусственным интеллектом. При работе над видео использовались три нейросети – CLIP, StyleGAN2 и BigGAN.
Ролик «Меланхолия» представляет из себя видеоряд из картинок, в основном мрачных и абстрактных. Выглядит непривычно, но достаточно любопытно, а порой даже жутковато – но все равно интересно. А вот сама песня – нисколько не мрачная, напротив, исключительно светлая и весенняя.
Сами музыканты предпочитают называть нейросеть «цифровым художником». В интервью Vogue они рассказали, что загрузили текст в специальный алгоритм, «натренированный» на картинах художников. Они также объяснили принцип его работы: программа видит в строчке слово «Санкт-Петербург», берет первое попавшееся изображение с городом и смешивает его с другими словами из этой же строки. По словам Cream Soda, они никак не вмешивались в работу алгоритма – даже создатели программы еще не до конца понимают, как именно она работает. Музыканты уверены, что будущее за технологиями, однако без вмешательства человека никакие программы не смогут нормально развиваться.
«Меланхолия» – второй клип Cream Soda, выпущенный в 2021 году: в январе у них вышло видео «Атомы». Их последний на сегодня альбом «Интергалактик» выходил летом 2020 года. Многим слушателям он понравился благодаря необычному формату – музыкальные номера совместили с оригинальной аудиокнигой.
Если клипы, снятые нейросетями, пока еще в новинку, то писать песни компьютеры научились уже давно. В начале апреля искусственный интеллект выпустил треки в стиле Курта Кобейна, Эми Уайнхаус и Джима Моррисона, а в марте на YouTube появилась новая версия хита Эминема «My Name Is», написанная нейросетью.