Development of Foundational 4D-AuGS Technology for Immersive Audio-Visual Dynamic Scene Reconstruction with Novel View and Novel Acoustic Synthesis
개인기초연구(과기정통부)(R&D) · 우수연구-핵심연구(기본연구A)
2026년
2710114584
과학기술정보통신부
한국연구재단
조선대학교
김원열
6명
2026.09.01 ~ 2027.08.31
2026.09.01 ~ 2028.08.31
4,580만원
4,580만원
기초연구
대학
광주광역시 동구
정보/통신 > 정보이론 > 인공지능
본 연구는 실제 환경에서 취득한 데이터를 기반으로 객체의 이동 경로, 음원 위치 변화, 반향·차폐에 영향을 주는 공간 구조를 단일 4D 좌표계에 정합하고, 형상제어·압축·Audio 인코딩 등 최적화를 통해 대규모 장면에서도 4D 시청각 기반 Novel View Acoustic Synthesis를 수행 가능한 4D-AuGS 기술을 개발하고자 함
1차년도(2026.09~2027.08) 연구 목표 및 내용연구목표 1: 실제 환경 4D-AuGS 데이터셋 구축 및 Audio 속성 학습 기초 연구RGB 영상, Depth/LiDAR, IMU, microphone 기반 데이터 획득 및 동기화 시스템 구축- Dry 환경(Chamber 또는 흡음 환경)과 Reverberant 환경(Room 또는 일반 실내 환경)...
... 디지털 트윈 기반 공간 시뮬레이션활용방안? 국가 개방형 데이터셋·벤치마크로 공개? NVAS Viewer 기반 실증 데모 시스템 구축? 산학협력·기술이전·후속 과제 연계? 알고리즘 및 소프트웨어 패키지화확산경로? SCI 논문 및 국제학회 발표? 특허·SW 등록 및 기술이전? 산업체 공동실증 및 사업화? GitHub 등 오픈소스 확산? 차세대 시청각 4DGS 연구의 기반 기술로 확장기대효과과학기술적 ...