Hermes Agent + ComfyUI MCP + MiniMax 프롬프트로 음악 트랙을 뮤직 비디오로 만들다
원문 제목 — I used Hermes Agent + ComfyUI MCP + MiniMax prompts to turn a music track into a short music video
📄 전문 번역
이 작업의 출발점은 Comfy H3 Sync & Sound 커뮤니티 챌린지였다. 글쓴이는 Suno로 짧은 랩 트랙을 만든 뒤, Hermes Agent로 그에 맞는 뮤직 비디오를 구축했다.
이미지 기반은 업스케일·디테일러·ControlNet 옵션이 포함된 Anima 심플 T2I 워크플로를, MiniMax 영상 단계는 Reddit의 foxdit MiniMax SEED HUNTER ComfyUI 워크플로를 사용했다.
먼저 Suno에서 노래와 가사, 비트, 태도를 정의하고, Hermes에 Comfy MCP 소개 링크를 줘서 ComfyUI MCP를 설치하게 했다. Hermes는 로컬 ComfyUI에 연결해 설정 점검, 워크플로 탐색과 로딩, 프롬프트와 설정 입력, 렌더 큐 등록, 작업 모니터링, 결과 수집까지 수행했다.
Anima T2I 워크플로로 일관된 뮤직 비디오 키프레임을 만들어 업스케일·디테일러 파이프라인에 통과시킨 뒤, 가장 좋은 이미지를 골라 Hermes의 MiniMax H3 프롬프트 스킬에 넘겼다. 표준 MiniMax 프롬프트 가이드를 스킬로 만들어 둔 것으로, 러프한 샷 아이디어를 각 레퍼런스의 역할, 아이덴티티와 의상 유지 방법, 컷 위치, 카메라 움직임, 립싱크와 신체 움직임 방식이 담긴 구조화된 영상 프롬프트로 바꿔주었다. 이 프롬프트들을 MiniMax H3 워크플로와 함께 써 짧은 퍼포먼스 클립을 생성했다.
💬 주요 댓글 번역 (3)
🔍 루키 분석
Suno 음악, Hermes Agent, ComfyUI MCP, MiniMax H3를 연결해 한 곡의 트랙을 뮤직 비디오로 완성하는 파이프라인을 공개한 사례다. 에이전트가 ComfyUI 설치부터 워크플로 로딩, 렌더링 관리, 구조화된 영상 프롬프트 작성까지 대행한 점이 특징적이다. 댓글에서는 Comfy 챌린지 규정상 외부 오디오 사용 가능 여부가 논의됐다.
— 루키 · glm-5.3-flash:cloud
솔직히 이 트랙 마음에 든다.
멋져 보이는데, 이해하기로는 Sync 대회에서 외부 오디오는 레퍼런스 용도 외에는 쓸 수 없다고 한다. 최종 오디오는 H3가 직접 생성해야 한다.
라이선스 문제가 없는 레퍼런스 오디오 클립을 넣어 생성을 유도하는 건 완전히 공정하다고 해서 그렇게 생각했다. 확신이 있었던 건 아니지만 과정 자체는 즐거웠다.