립싱크 뮤직비디오 - MiniMax H3 + 워크플로
원문 제목 — Lipsync Music Video - Minimax H3 + Workflow
📄 전문 번역
FL2VA + REF2VA LoRA를 1.4MP, 20스텝으로 사용한 참고용 워크플로다. 스파스 어텐션을 적용하고 32B 대신 4B Qwen 텍스트 인코더를 썼을 때 RTX 5090에서 총 렌더 시간은 3~4시간이었다. 터보 LoRA와 함께 1MP + 8스텝을 쓰면 20~30분 만에 매우 좋은 결과를 얻을 수 있다.
워크플로는 이해하기 쉽지 않지만 참고용으로 공개했다. 영상은 15초 클립 14개를 이어 붙인 것으로, 이 방식은 품질 열화를 막는 대신 클립 사이에 의상 드리프트를 남긴다. 신경 쓰인다면 의상 레퍼런스로 쉽게 보정할 수 있다. 클립마다 별도의 프롬프트가 필요하며, Codex나 Claude로 프롬프트를 자동 작성하라고 제안했다.
앞으로는 클립을 7초로 줄일 계획이다. 그래야 1.4MP보다 높은 해상도 생성이 가능하고(해상도가 높을수록 좋다), 생성 속도도 빨라진다. 클립이 길수록 생성 시간이 불균형하게 늘어나기 때문이다. 이 워크플로로 즐겁게 작업하길 바란다.
💬 주요 댓글 번역 (5)
🔍 루키 분석
15초 클립 14개를 이어 붙인 MiniMax H3 립싱크 뮤직비디오 제작 과정과 워크플로를 공개한 글이다. FL2VA + REF2VA LoRA에 1.4MP, 20스텝, 4B Qwen 인코더와 스파스 어텐션을 쓰면 RTX 5090 기준 3~4시간이 걸리고, 터보 LoRA의 1MP, 8스텝 구성은 20~30분에 끝난다. 댓글에는 실행 오류 문의와 더불어 Claude Code로 첫 시도 만에 뮤직비디오를 완성했다는 재현 사례가 보고됐다.
— 루키 · glm-5.3-flash:cloud
노드 실행 중 오류가 발생했다. ComfyUI 오류 보고에 따르면 Node ID 2500의 MiniMaxH3StreamLiveMusicVideoToVHS 노드에서 ValueError: h3_song_audio: 최소 5개의 소스 프레임과 보존된 접두어보다 긴 타깃이 필요하다는 예외가 발생했다.
1년 만에 Suno에 다시 접속해 봤는데 요즘 사운드가 얼마나 좋아졌는지 놀랐다. 솔직히 좀 씁쓸하다.
정말 고맙다. 내일 시도해 보겠다.
고맙다. 설명에 정리돼 있다. 새로 만드는 것들은 7초 클립, 2MP, 25스텝으로 하라고도 권하고 싶다.
정말 놀라운 워크플로다. 품질이 아주 좋은데 어떤 해상도와 스텝으로 돌리는지 물어도 될까. 직접 시도했는데 Claude Code로 돌려 한 번에 성공했다. 워크플로도 아직 제대로 보지 않았는데 완성된 뮤직비디오가 하나 생겼다. 꽤 미친 일이고, 이런 AGI류 기술은 정말 놀랍다.