Refmod가 정말 훌륭하다! LORA나 참조 이미지 9장 사용보다 훨씬 낫다
원문 제목 — Refmod is so good! Way better then LORAs or using 9 reference images.
📄 전문 번역
필자는 Refmod를 막 사용해보기 시작했는데, 한마디로... 놀랍다! 참조 이미지나 영상을 스캔할 필요가 없어 생성 시간이 빨라진다. 또한 원치 않는 효과가 나왔을 때 학습에 몇 시간이 걸리는 LORA와 달리 Refmod는 몇 초 만에 다시 만들 수 있다!
지금까지 인물 식별용 Refmod 5개와 영상용 Refmod 3개를 만들었으며, 모두 훌륭한 결과를 냈다. 필요한 것은 Comfyui-PlagueKind-Nodes와 ComfyUI-MiniMaxH3Mod 두 노드 팩뿐이다. 즐겨보시길 바란다.
💬 주요 댓글 번역 (5)
🔍 루키 분석
ComfyUI의 Refmod 기능이 LORA나 다수 참조 이미지보다 뛰어나다는 사용자 후기가 전해졌다. Refmod는 참조 이미지나 영상을 스캔하지 않아 생성 시간을 단축하고, 원치 않는 결과 시 몇 초 만에 재생성할 수 있는 것이 강점이다. 다만 댓글에서는 Refmod가 이미지와 동등하게 취급되지 않아 비슷한 인물이 혼동될 수 있고, 약 5,000 토큰 상한 때문에 이미지 5장 정도만 반영된다는 한계도 지적됐다. 일부 사용자는 LORA에 참조 이미지를 결합하거나 Ref2V LORA를 학습하는 방식이 더 낫다고 평가했다.
— 루키 · glm-5.3-flash:cloud
Refmod는 이미지와 동등하게 취급되지 않는다는 점을 유의하라. Refmod 사용 시 비슷한 두 사람이 혼동된다는 보고가 많다. 필자는 Refmod로 캐릭터 교체에 실패했지만(원본 캐릭터가 바뀌지 않음), 동일한 프롬프트와 Refmod의 기반이 된 동일한 이미지를 직접 사용하면 전혀 문제가 없었다. 다만 이런 특성을 알고 있다면 정말 훌륭한 도구다. 추가로 아직 완성도가 절반인 듯한(또는 필자가 안정적으로 쓰는 법을 몰랐을 수도 있는) 모션 캡처 기능도 있다.
한 가지 눈치챈 점은 때때로 모델에 RefMod 사본을 더 많이 입력해야 제대로 된 결과를 얻을 수 있다는 것이다. 언뜻 RefMod에 포함된 이미지 수와 관련 있는 것 같지만 아직 확실하지 않다.
맞다. 이미지 30장으로 만든 Refmod가 10장으로 만든 Refmod를 압도하는 경향이 있다는 보고가 있었다. 필자는 보통 고해상도 캐릭터 시트 이미지 한 장을 참조로 쓰는데, 모든 참조 자료가 그런 형태면 문제없이 작동하는 것 같다.
표준 Refmod는 토큰 상한(약 5,000)에 도달하면 잘린다. 따라서 1:1 비율 이미지 기준 약 5장이 최대이고 나머지는 버려진다. 그래서 많은 수를 로드해야 하는 것이다.
필자의 경험상 LORA보다는 낫지만 LORA에 참조 이미지를 결합한 방식보다는 훨씬 못하다. 추가로: 가장 좋은 방법은 Ref2V LORA를 학습하되 모든 예시에 동일한 캐릭터 시트를 참조 입력으로 넣고 적절한 주체 참조 프롬프트 형식을 사용하는 것이다. 그러면 특정 캐릭터 시트에 기반해 목소리, 성격, 광원에 따른 외모 변화, 움직임 등을 추가로 제공하는 좋은 잔차 LORA를 얻을 수 있으며, 캐릭터 외모가 지나치게 고정되지 않아 다른 LORA와의 작업도 쉬워진다.