Музыкальный клип целиком, от текста до визуала, с Hermes Agent
Alex C. поручил Hermes Agent самостоятельно сделать музыкальный клип. Агент написал текст, создал вокал и стемы, сгенерировал картинки и добавил эффекты, реагирующие на звук, и на выходе получился готовый клип.
Что сделали
Автор попросил Hermes Agent самому выдать себе нужные скиллы. Агент написал текст песни и сделал вокал и стемы в формате 8D через ACE-Step-1.5. По тексту он составил промпты для картинок и сгенерировал их во Flux-Klein-4B, привязал изображения к структуре песни и создал эффекты, реагирующие на звук. Автор сам отрендерил двух персонажей для генерации картинок и ограничил число изображений семью, потому что работал только с локальными инструментами.
Что получилось
Получился законченный клип с текстом, музыкальными стемами, визуалом, 8D-эффектами и элементами, которые реагируют на звук. О других результатах или недочётах автор не пишет.
На что обратить внимание
Если картинок нужно больше семи, понадобится локальная видеокарта или платные API.
Пояснение
Стемы это отдельные дорожки трека (например, вокал, ударные или бас), из которых собирается песня. 8D-аудио это обработка, при которой в наушниках кажется, что звук движется вокруг слушателя.
Кому пригодится
Музыкантам и авторам контента, которые хотят попробовать собрать клип целиком силами агента на локальных моделях.
Попробуйте сами с Hermes Agent
Сделай музыкальный клип про [тема или история] в стиле [жанр или настроение]. Напиши текст, сделай музыку, сгенерируй визуал, добавь звуковые эффекты и собери всё в один видеофайл в [папка для результата]. Перед финальным рендером покажи мне текст и превью визуала и остановись, когда видео будет экспортировано.
Нужна помощь с запуском? Вступайте в сообщество AI Pack ↗
Ещё 1 источник
Источник: x.com · · обновлено