В рамках нового проекта была обучена графическая нейросеть, изначально предназначенная для работы с изображениями, для создания спектрограмм, визуализирующих звук. Модель не знала, что она рисует именно звук, а не обычные картинки, что позволило ей адаптировать свои алгоритмы для музыкального контекста.
Процесс обучения включал использование множества спектрограмм, что дало нейросети возможность выявить закономерности и особенности звуковых волн. Это открывает новые горизонты для применения графических нейросетей в музыке, позволяя создавать уникальные визуализации музыкальных произведений.
Значимость данного проекта заключается в расширении возможностей использования нейросетей в креативных индустриях. Применение таких технологий может привести к новым формам искусства, где звук и визуализация будут взаимосвязаны, что может заинтересовать как музыкантов, так и художников.