Музиканти – минуле століття. Riffusion – музична нейромережа, створена Сетом Форсгреном і Айком Мартіросом. Для свого проєкту Riffusion Форсгрен і Мартірос здійснили тонке налаштування Stable Diffusion на спектрограмах – візуальних представленнях звуку, що показують амплітуду різних частот у часі. Нейромережа генерує мелодії за текстовими підказками. Сервіс працює безперебійно і максимально точно.
Riffusion генерує музику з текстових підказок. Спробуйте ваші улюблені стилі, інструменти, такі як саксофон або скрипка, модифікатори, такі як арабська або ямайська, жанри, такі як джаз або госпел, звуки, такі як церковні дзвони або дощ, або будь-яку іншу комбінацію. Пограйте з наведеними нижче налаштуваннями, щоб дослідити прихований простір звуку.
Використовується як основа для дифузії img2img. Це тримає ваш риф в ритмі і впливає на мелодійні патерни.
Чим вище рівень денойзингу, тим більш креативним буде результат, і тим більша ймовірність того, що ви збиєтеся з ритму.
Ось, як це все чудо працює: