Испанский артист создал очень необычный клип, обучив алгоритм deep learning на тысячах обложек альбомов. Видео от Бруно Лопеса использует комбинацию данных Spotify, скриптов Python и генеративных состязательных сетей (GAN).
Сначала Бруно написал сценарий, который скачал обложки для каждого трека, представленного в официальных редакционных плейлистах Spotify. Результатом стал набор данных из примерно 50 тысяч обложек с индивидуальным разрешением 640 x 640.
Лопес использовал эти данные для обучения Nvidia StyleGAN2 – эту систему хорошо знают любители поиграться с нейронками. Обычно именно эта нейросеть создает пользовательские запросы вроде картинки по описанию и персонажей My Little Pony, которых не существует.
После нескольких дней обучения модель научилась создавать собственные обложки альбомов. Затем Лопес создал сценарий Python, чтобы систематизировать результаты по цветам и лицам, присутствующим на обложках.
Финальным штрихом стало анимированное видео в такт песне Sound Stabs «Interference», которое испанец смонтировал в Adobe Premiere.
Автор The Next Web Томас Макэйли отмечает: хотя видео выглядит странно, оно не уступает некоторым сверхпопулярным роликам на YouTube. Более того, некоторые исполнители и группы сознательно используют подобную анимацию в клипах.
Разница только в том, что обычно такие странные видео – результат работы людей. А над Interference работала нейросеть, пускай ее и запустил Бруно Лопес.
Читайте также:
Новый инструмент дипфэйк оживляет любую фотографию – это не только весело, но и полезно
Технология face replacement становится все доступнее – опыт MEGOGO LIVE
Бренд воды “Жидкая Смерть” выпустил дэт-метал альбом, созданный из комментариев хейтеров
