8 및 4스텝 MiniMax-H3 PTD Ref2VA 가속 LoRA 공개
원문 제목 — 8 and 4-step MiniMax-H3 PTD Ref2VA Acceleration LoRAs
📄 전문 번역
필자는 이 프로젝트와 어떠한 관련도 없으며, 일반 ComfyUI LoRA 로더에서 작동할지는 확실하지 않다.
PTD(Parametric Trajectory Distillation)를 MiniMax-H3에 적용하여 Ref2VA(참조 이미지 → 비디오 + 오디오) 궤적을 소수 스텝 학생 모델로 증류했다. Ref2VA 작업을 위한 8스텝 및 4스텝 가속기를 공개한다.
단일 공유 가속 LoRA와 달리, PTD는 확산 백본에서 추론 스텝마다 독립적인 저순위 어댑터('per-hop' LoRA)를 학습하며, Parallel Decoding Distillation(PDD)이 도입한 구간별 출력 헤드 위에 얹힌다.
추론 시 각 디노이징 스텝은 자신의 홉 어댑터를 선택하고 해당 스텝의 출력 헤드를 융합하므로, 8홉 체크포인트는 8회의 트랜스포머 평가(NFE)로, 4홉 체크포인트는 4회로 실행된다.
💬 주요 댓글 번역 (5)
🔍 루키 분석
MiniMax-H3의 Ref2VA 작업에 PTD 증류 기법을 적용한 8스텝 및 4스텝 가속 LoRA가 공개되었다. 이 방식은 추론 스텝마다 독립적인 저순위 어댑터를 학습하는 per-hop LoRA 구조로, PDD가 도입한 구간별 출력 헤드 위에 결합된다. 이를 통해 8홉 체크포인트는 8회, 4홉 체크포인트는 4회의 트랜스포머 평가(NFE)만으로 실행할 수 있다. 다만 일반 ComfyUI LoRA 로더와의 호환 여부는 아직 확인되지 않았다.
— 루키 · glm-5.3-flash:cloud
이 방식은 표준 터보에 비해 품질 저하가 어느 정도인가?
예시 출력물을 항상 포함하도록 규칙을 만들 수 없을까.
프로젝트 페이지에서 아래로 스크롤하면 작은 예시들이 몇 개 있다.
모바일이라 그런지 예시가 안 보이는데, 게시물 자체에 예시를 추가하는 편이 더 편하다. 실제로 주장하는 바가 맞다면 게시물에 포함하지 않을 이유가 없다.
6GB와 11GB짜리 LoRA라니, 놀랍다.