Development of a Spatio-temporal Interpretation Model for Human Micro-Action through Body Part-Aware Multi-View Clustering and Representation Learning
이공학학술연구기반구축(R&D) · 석사과정생연구장려금지원
2026년
2340066419
교육부
한국연구재단
전남대학교산학협력단
배채묵
1명
2026.09.01 ~ 2027.08.31
2026.09.01 ~ 2027.08.31
1,200만원
1,200만원
개발연구
대학
광주광역시 북구
정보/통신 > 정보이론 > 인공지능
본 연구의 최종목표는 단순한 미세행동 인식을 넘어, 인간 행동을 신체 부위별 작은 움직임 단위와 중요한 시간 구간 수준에서 시공간적으로 설명할 수 있는 해석 모델을 개발하는 것입니다. 기존 행동인식 연구는 최종 행동 범주를 분류하는 데에는 효과적이지만, 행동이 어떠한 미세 움직임들의 조합으로 구성되는지와 모델이 어떤 근거를 바탕으로 판단하는지를 충분히 설명...
본 연구에서는 먼저 사전학습된 ViTPose를 활용하여 미세행동 데이터로부터 포즈 정보(skeleton)를 추출하고, 이를 바탕으로 머리, 상체, 팔, 다리 등 신체 부위별 멀티뷰 데이터를 구성할 계획입니다. 이후 각 신체 부위별 뷰에 대해 사전학습된 Video Swin Transformer 백본의 인코더를 활용하여 국소적인 움직임 특징을 추출하고, 각 부...
본 연구의 성과는 기존 행동인식 연구에서 포착하기 어려웠던 인간 행동을 작은 움직임 단위와 시간 구간 수준에서 설명 가능하게 해석할 수 있다는 점에서 큰 의미가 있습니다. 이를 통해 전신 중심 행동인식에서 놓치기 쉬운 국소적 미세 움직임을 효과적으로 반영할 수 있으며, 행동을 단순한 최종 범주가 아니라 여러 작은 움직임 단위의 조합으로 이해할 수 있는 기반...