거대언어모델 능력의 다면적·효율적 진단 방법 연구

연구목표

본 연구의 최종목표는 거대언어모델의 능력을 실제 배포 환경의 다양한 맥락 조건에서 분해하여 추정하고, 최소한의 관측만으로 신뢰할 수 있는 맥락별 성능 진단 결과를 산출하는 통합 평가 방법론을 정립하는 것이다. 기존 LLM 평가는 단일 벤치마크 점수와 리더보드 순위에 의존하여, 프롬프트, 검색 증강, 출력 형식, 도구 조건, 에이전트 실행 상태 등 맥락 변화...