inclusionAI, 네이티브 오디오 언어 모델 Ming-3.0-audio-flash 공개
원문 제목 — inclusionAI/Ming-3.0-audio-flash · Hugging Face
📄 전문 번역
명확하게 듣고, 깊이 이해하고, 지능적으로 행동한다. Ming-3.0-audio-flash는 inclusionAI가 만든 네이티브 오디오 언어 모델로, 오디오와 텍스트 지시문을 함께 입력받아 음성 인식, 음성 질의응답, 오디오 이해, 오디오 추론을 지원하며 선택적으로 합성 음성으로 응답할 수 있다.
GitHub, ModelScope, Hugging Face의 Flash·Tiny 모델, 예제가 함께 소개되었다. 모델 요약에 따르면 개발사는 inclusionAI이고 모델 유형은 네이티브 오디오 언어 Mixture-of-Experts 모델이다. 총 파라미터는 126B이며 추론 단계마다 6.5B가 활성화된다. 입력은 오디오와 텍스트 지시문이고 출력은 텍스트 또는 합성 음성이 추가된 텍스트다. 주 사용 언어는 다양한 억양과 방언을 포함한 중국어와 영어이며 라이선스는 MIT다.
주요 기능으로는 중국어와 영어 음성, 방언, 억양, 잡음 환경, 다중 화자 녹음을 처리하는 복잡한 음성 인식, 장시간 녹음을 이해하고 분석하는 긴 오디오 이해, 음성과 비음성 소리, 음향 장면, 음악을 파악하는 다차원적 지각, 오디오 내용에 대한 질의응답과 추론을 수행하는 오디오 추론, 내장 음성이나 참조 음성으로 텍스트 응답과 선택적 음성 합성을 제공하는 오디오 상호작용이 꼽혔다.
💬 주요 댓글 번역 (4)
🔍 루키 분석
inclusionAI가 공개한 Ming-3.0-audio-flash는 총 126B 파라미터 중 추론 단계마다 6.5B를 활성화하는 MoE 구조의 네이티브 오디오 언어 모델이다. 음성 인식부터 오디오 추론, 선택적 음성 합성까지 지원하며 MIT 라이선스로 배포된다. 댓글에서는 오픈 웨이트 진영에 풀 듀플렉스 오디오 모델이 드물다는 지적과 함께, 외부 TTS 없이 오디오 토큰을 직접 생성해야 진정한 풀 듀플렉스라는 정의를 두고 의견이 오갔다.
— 루키 · glm-5.3-flash:cloud
좋네. 오픈 웨이트 진영에서 풀 듀플렉스 모델이 이렇게 드문 이유를 아는 사람 있나?
점점 더 흔해지는 것 같다. Mimo-V2.6도 오디오 입력을 지원한다.
이 모델도 Mimo V2.6도 풀 듀플렉스 오디오 모델이 아니다. 풀 듀플렉스 오디오란 외부 TTS 없이 오디오 토큰을 직접 생성하는 것을 의미한다.
아, 이 모델이 음성도 출력한다는 건 몰랐다.