RefMods, Fantastic MiniMax H3 Promptbuilder로 생성·편집·사용이 한결 쉬워진다
원문 제목 — RefMods - A little easier to create, edit, and use with Fantastic Minimax H3 Promptbuilder
📄 전문 번역
저장소는 GitHub의 Adudeguyman/ComfyUI-Fantastic-MiniMaxH3-PromptBuilder에서 확인할 수 있다. 이번에도 LLM 연동 없이 수동으로 동작하는 Fantastic MiniMax H3 Prompt Builder의 업데이트 소식이다. 개발자는 자신에게 맞는 방식으로 동작하도록 전부 바이브 코딩으로 만들었으며, 다른 이들에게도 유용할 수 있어 공개한다고 밝혔다. 이번 버전에는 RefMods가 포함됐는데, RefMods는 참조 파일들을 .safetensors 잠재 형식으로 패킹해 빠른 로딩과 네이티브 내장 참조 한도 초과를 가능하게 하는 기능이다. 결국 LoRa를 학습하거나 미디어를 수동으로 다시 불러오는 대신 즉석에서 쓸 수 있는 학습 불필요 참조를 만드는 것이 목표다. 개발자는 충분히 잘 동작해 직접 써보게 됐고, 마음에 들어 생성·조회·로드·참조를 더 쉽게 하기 위해 프로젝트에 포팅했다고 설명한다.
핵심 기능으로는 여러 노드 대신 몇 개의 노드만으로 RefMods를 로드, 생성, 편집, 사용할 수 있다는 점이 꼽힌다. 에디터에서 태그와 미리보기를 지원하며 프롬프트를 편집하면서 무엇을 참조하는지 바로 확인할 수 있다. 기본적으로 Media Loader 노드가 하던 일과 비슷하지만 RefMod를 인식한다는 점이 다르다. 'Browse library...' 버튼으로 여는 라이브러리에서 RefMods를 확인해 노드에 직접 불러올 수 있고, 노드에서 비디오와 오디오 강도를 조정하거나 즉석에서 재배치, 활성화·비활성화, 제거도 가능하다. RefMods 제작과 편집은 하나의 팝업 패널에서 아주 쉽게 처리되며, 조회, 로드, 생성·편집, 저장을 하나의 일관된 인터페이스에서 다룬다. 세부 내용이 많아 게시물에 다 담기 어렵다며 개발자는 RefMod Readme를 참고하라고 안내한다.
실제 사용 시에는 먼저 Ref2va 워크플로를 쓰고 있는지 확인해야 한다. 또 순수 참조 모델 대신 하이브리드 모델을 쓰라고 권하는데, ref2va 초기 릴리스의 공개 가중치가 엉망이라는 점은 MiniMax 스스로도 인정한 바 있다. 따라서 참조 기능을 갖춘 커뮤니티 하이브리드 모델을 사용해야 한다. 라이브러리를 열어 RefMods를 노드의 스택에 추가하고, 원하면 노드에서 비디오와 오디오 강도를 각각 조정한다. Prompt Builder를 열어 Reference 모드인지 확인하면 태깅하는 동안 RefMod 미리보기가 상단에 참조용으로 표시된다. 새로 추가된 'Draft from RefMods' 버튼은 이 에디터에서 RefMod를 만들었다면 유형 설정에 따라 자동으로 채워주는데, 예컨대 identity 유형은 첫 번째 RefMod를 <Subject 1>로 만들고 그 오디오를 보이스 파일로 참조하며 Retention_analysis 섹션에도 반영한다. 이후 평소처럼 프롬프트를 작성하고 참조 파일을 다룰 때처럼 <Subject> 등의 탭을 사용하면 된다. 더 자세한 내용은 RefMods Readme에 담겨 있다.
원조 RefMods와의 차이점에 대해 개발자는 전반적으로 더 간소화된 UI와 단순한 워크플로에 초점을 맞췄다고 설명한다. 두 번째 차이는 RefMods를 태그로 사용하는 점이다. 짝을 이룬 비디오·오디오 파일이 <Video 1>, <Audio 1>로 표시된다. 원조 RefMod 저장소(이 모든 것의 훌륭한 프레임워크를 만든 Luisacoatica에게 감사를 전한다)는 이를 소프트하게 묘사할 수도 있다고 안내하는데, 위 영상에서처럼 구울(Ghoul)을 '카우보이 복장을 한 흉측한 남자'로 정의하기만 해도 참조를 가져와 영향을 준다. 하지만 RefMods는 압축된 참조에 불과하므로 MiniMax의 RefMods 가이드라인을 따르는 편이 더 합리적이라 판단했고, 그 추가 설정 작업이 실제로 잘 작동하고 있다고 한다. 이미 모든 것을 추적하고 태깅하는 데 도움을 주는 미디어·프롬프팅 팩을 갖추고 있었기에 이를 통합하는 것이 논리적인 다음 단계였다. 결국 노드를 압축하고 라이브러리 항목마다 비디오용과 오디오용 RefMod 파일을 분리해 둔 것 외에는 프롬프팅 스위트에 통합된 포크에 가깝다며 즐거운 사용을 바란다고 덧붙였다.
💬 주요 댓글 번역 (5)
🔍 루키 분석
ComfyUI용 Fantastic MiniMax H3 Promptbuilder 업데이트는 RefMods 기능을 통합해 참조 기반 프롬프트 작성과 워크플로를 간소화한다. RefMods는 참조 파일을 .safetensors 잠재 형식으로 패킹해 LoRa 학습 없이 즉석에서 참조를 쓸 수 있게 하는 접근법이다. 댓글에서는 오디오 패킹 미지원이 남은 과제라는 지적에 대해 포크 버전은 오디오를 별도 파일 쌍으로 저장해 우회한다고 개발자가 해명했고, 일반 참조 전달에서도 문제가 있다는 반론이 이어졌다.
— 루키 · glm-5.3-flash:cloud
필요한 건 오디오를 RefMods와 함께 패킹할 수 있게 하는 구현이다.
내가 포크한 원본 코드에 변환 중 오디오가 1초의 일부로 잘리는 오류가 있었고 이를 수정했다. 원본 저장소도 지금은 고쳤을 것으로 본다. 내 구현은 오디오를 비디오 관련 요소와 별개의 파일 쌍으로 저장하므로 이를 제대로 참조하면 정상 동작한다.
남자에게 여자 목소리를, 혹은 그 반대로 입혀보라. 그렇게 해서야 동작하지 않는다는 걸 알게 됐다.
그건 RefMod 문제가 아니라 H3 MiniMax의 문제다.
일반적인 참조 전달 방식으로도 정상 동작하지 않는다.