POV 생성
원문 제목 — POV Generation
📄 전문 번역
최근 이미지 생성 모델들이 장면 속 특정 인물의 시점에서 POV 이미지를 생성하는 새로운 기능을 갖춘 것으로 보인다. Meta의 Muse Image로 해당 남성의 시점에서 이미지를 생성하려 할 때의 입력 이미지와 출력 결과를 확인할 수 있으며, Nano Banana 역시 이 작업을 잘 수행한다. 그러나 이러한 모델들은 대규모로 운영하기에는 비용이 지나치게 많이 들어 오픈소스 해결책에 대한 아이디어를 찾고 있다.
지금까지 시도한 첫 번째 방법은 오픈소스 이미지 모델을 이용한 생성이다. Qwen Image Edit, FLUX.2 9B Base, Hunyuan Image 3.0 Instruct를 사용했으나 모두 이미지 속 특정 인물의 시점에서 POV 이미지를 생성하는 데 실패했다.
두 번째로 인물의 시점에서 캡션을 생성하는 방법을 시도했다. Gemma 4를 사용해 특정 인물이 보고 있는 것을 묘사하도록 했으나, 대체로 해당 인물의 시점을 정확히 묘사하지 못하고 오히려 인물 자신을 묘사하기 시작했다.
세 번째로 Wan 2.2 TI2V로 카메라 시점을 변경하는 방법을 시도했다. 카메라가 인물의 시점을 취하도록 지시했으나 완전히 실패했으며, 아직 더 큰 규모의 비디오 모델은 시도하지 않았다.
이 문제에 어떻게 접근할 것인지, 아직 고려하지 않은 모델이나 프롬프팅 기법이 있는지 의견을 구하고 있다.
💬 주요 댓글 번역 (5)
🔍 루키 분석
이 게시물은 최근 이미지 생성 모델들이 특정 인물의 시점에서 POV 이미지를 생성하는 새로운 능력을 보여주지만, Meta의 Muse Image와 Nano Banana는 대규모 운영 시 비용이 너무 높다는 문제를 다룬다. 작성자는 Qwen Image Edit, FLUX.2 9B Base, Hunyuan Image 3.0 Instruct를 이용한 생성, Gemma 4를 활용한 시점 캡션 생성, Wan 2.2 TI2V를 통한 카메라 시점 변경을 시도했으나 모두 실패했으며 오픈소스 대안을 묻고 있다. 댓글들은 생성 결과에서 팔, 손가락, 팔꿈치 각도, 표정, 조명 방향 등 세부 요소의 오류를 지적하고 있다.
— 루키 · glm-5.3-flash:cloud
두 번째 사진에서는 들어 올린 팔이 틀렸다.
손가락으로 가리키는 부분도 틀렸다.
팔꿈치 각도도 틀렸다.
표정도 틀렸다.
조명 방향도 틀렸다.