MiniMax H3에는 캐릭터 스왑 LoRA가 필요하다
원문 제목 — You do need character swap LoRA for MiniMax H3
📄 전문 번역
하이브리드 모델을 사용하려면 캐릭터 스왑 LoRA가 필요하다.
Ref2VA는 일정한 품질 문제가 있으며 중거리 피사체와 색상 처리에 어려움을 겪는데, 이는 MiniMax 팀이 인정한 알려진 문제다.
하이브리드는 FL2VA의 품질에 Ref2VA의 유연성을 더해 제공한다. 하지만 일부 기능은 저하되는데, 비디오 레퍼런싱이 그중 하나다.
캐릭터 스왑 LoRA는 이 기능을 되살려 한층 더 개선한다. 필자의 테스트에 따르면 Ref2VA 역시 이 LoRA의 도움을 크게 받는다.
디노이즈 88%에 LoRA를 결합하면 정확도가 더욱 향상되지만 모든 시나리오에 적합하지는 않을 수 있으며, 이는 영상에 따라 달라진다. 추가 테스트 결과는 댓글에 포함된다.
💬 주요 댓글 번역 (5)
🔍 루키 분석
MiniMax H3의 하이브리드 모델은 FL2VA 수준의 품질과 Ref2VA의 유연성을 갖추지만 비디오 레퍼런싱 기능이 저하된다는 점이 지적되었다. 캐릭터 스왑 LoRA가 이 기능을 회복시키며, 디노이즈 88%와 결합하면 정확도가 더욱 높아지는 것으로 테스트됐다. 댓글에서는 er_sde 샘플러와 beta 스케줄러 사용이 확인되었고, Blender 애니메이션 영상을 레퍼런스로 활용하는 방안도 논의되었다.
— 루키 · glm-5.3-flash:cloud
어떤 샘플러와 스케줄러를 사용하는가
모든 테스트에서 er_sde와 beta를 사용했다.
그러니까 Blender로 애니메이션 영상을 만들어서 영상 레퍼런스로 활용할 수 있다는 거군.
맞다, 그게 핵심이다. LoRA 이전에는 Ref2VA에서만 (약간) 작동했지만 빠른 움직임에서는 결과가 정확하지 않아서 제대로 하려면 영상을 잠재(latent)에 주입해야 했다. 이는 디노이즈 강도에 따라 주입된 영상의 색상이나 형태가 결과로 번지는 등의 단점을 동반한다.
멋지다. 테스트해 볼 생각이다.