Development of a Multilingual AI Dubbing System for the Global Export of K-Dramas
창업성장기술개발(R&D) · 창업성장기술개발사업(디딤돌)
2026년
2420026517
중소벤처기업부
중소기업기술정보진흥원
(주)딥로딩
최환조
6명
2026.01.01 ~ 2026.12.31
2025.07.01 ~ 2026.12.31
1.3억원
1.8억원
응용연구
중소기업
서울특별시 강남구
정보/통신 > 소프트웨어 > S/W 솔루션
1. 한국 드라마의 외국어 자막을 입력하면 자동으로 외국어 음성더빙을 하는 AI모델을 개발.2. 한국어 자막, 외국어 번역자막, 한국어 원본음성파일을 입력하면 외국어 음성이 자동 생성됨.3. 드라마/영화의 경우 한국어 음성에서 AI모델이 음성복제(Voice Cloning)와 감정인식을 수행.4. 한국어 음성에서 운율(Prosody), 음량(Loudness...
1. 학습데이터 구축K-드라마(넷플릭스,디즈니+ 등) 중 한국어-영어, 한국어-일본어 더빙이 기존에 되어있는 영상에서 자막Pair 데이터, 음성Pair 데이터를 추출하여 학습데이터를 대량 구축2. DeNoise모델 개발노이즈제거 오픈소스 SOTA모델(Demucs,VoiceFixer)를 드라마 전용으로 커스터마이징하고, TimeSync기능을 추가 개발3. T...
가) 1단계 (개발완료 ~ 6개월) : AI더빙 솔루션 기술검증 및 MVP 구축/적용- 초기 단계에서는 AI더빙모델의 기술검증과 성능개선에 집중함- 10분 정도의 짧고 인기있는 웹드라마 시리즈에 우선 적용하는 것을 추진 - 웹드라마 제작사는 규모가 작은 기업으로 영어, 일어 성우 더빙버젼이 없는 실정나) 2단계 ( 2027년 ~ '28년 : 48개월 ) ...