논문 정보
- 날짜:
2026-04-12
- 카테고리: -
- 우선순위 점수: 3.067
핵심 요약
KnowU-Bench는 정적 데이터가 아닌 실시간 GUI 환경에서 사용자의 선호도를 추론하고 능동적으로 개입하는 모바일 에이전트를 평가하기 위한 벤치마크입니다. 에이전트가 사용자 프로필을 직접 보는 대신 행동 로그를 통해 선호도를 파악하고, LLM 기반 사용자 시뮬레이터와 상호작용하며 개입 여부를 결정하는 능력을 측정합니다. 실험 결과, 기존의 우수한 모델들도 모호한 지시 상황에서의 선호도 추론 및 개입 시점 결정에서 성능이 크게 저하되는 한계가 드러났습니다.
학습자 관점 포인트
- 우리 팀 영향: 단순 GUI 조작을 넘어 사용자 맞춤형 상호작용과 능동적 지원이 필요한 에이전트 개발 시 평가 지표로 활용할 수 있습니다.
- 권장 액션: 실험
- 액션 근거: 기존 벤치마크와 달리 상호작용을 통한 선호도 추론과 능동적 개입 능력을 정교하게 평가할 수 있는 환경을 제공하기 때문입니다.
원문 링크
학습자는 이 문서를 읽고 실험 여부를 바로 결정하세요.
