Developing a foundation model for sign language translation
개인기초연구(과기정통부)(R&D) · 우수연구-세종과학펠로우십(국외연수트랙)
2026년
2710115060
과학기술정보통신부
한국연구재단
한국과학기술원
장영준
1명
2026.09.01 ~ 2027.08.31
2026.09.01 ~ 2027.08.31
7,350만원
7,350만원
기초연구
대학
대전광역시 유성구
정보/통신 > 정보이론 > 인공지능
본 연수의 목적은 수어 파운데이션 모델 개발 및 이를 활용한 실시간 수어 통역 시스템 구현을 위한 핵심 기술을 확보하는 데에 있다. 이를 위해 컴퓨터 비전 분야의 세계 최고 연구 그룹인 ... 연구개발과제는 수어 인식과 번역 분야에서 실용적이며 성능이 우수한 AI 기술을 개발하여, 청각장애인의 정보 접근성을 획기적으로 향상시키고, 수어 기반 소통 환경 개선을 목표로 한다.● [WP1] 키포인트 ...
... 사전학습WP1-1: OpenPose[3], MediaPipe[4] 등에서 추출한 키포인트 정보로부터 수어에 특화된 포즈 표현을 확보WP1-2: 시계열 정보를 보존하면서도 연산 효율을 극대화할 ... 과제에의 활용 가능성을 검증WP2. 대규모 데이터셋 구축: 음성-수어 정합을 통한 반자동 라벨링 시스템 개발목표: 자막·음성 기반 수어 문장 라벨링 자동화로 학습 데이터 생성 효율 향상WP2-1: ...
... 인프라 구축] 과제를 통해 확보된 새로운 모델은 수어 인식, 정렬, 번역 등 다양한 다운스트림 과제의 연구 벤치마크 및 기반 기술로 활용되어 수어 AI 분야의 발전을 선도.[멀티모달 AI 시스템 기술적 진보] 비디오-언어 처리 및 긴 시퀀스 이해에 대한 노하우는 수어 도메인을 넘어, 일반적인 멀티모달 파운데이션 모델 개발에 핵심적인 방법론으로 응용될 수 있다. 2) 연구과제의 기대효과[학술적·기술적 ...