논문 정보
- 날짜:
2026-03-10 - 카테고리: -
- 우선순위 점수: 2.2
핵심 요약
LLM이 생성하는 장문 서사에서 발생하는 일관성 오류를 평가하기 위해 ConStory-Bench 벤치마크를 제안합니다. 5개 카테고리와 19개 세부 유형으로 구성된 오류 체계를 정의하고, 자동 탐지 파이프라인인 ConStory-Checker를 개발했습니다. 실험 결과 일관성 오류는 주로 서사의 중간 부분에서 사실 및 시간적 차원을 중심으로 빈번하게 발생함을 확인했습니다.학습자 관점 포인트
- 우리 팀 영향: 장문 텍스트 생성 시 발생하는 논리적 모순을 정밀하게 측정하고 개선하기 위한 평가 지표로 활용할 수 있습니다.
- 권장 액션: 실험
- 액션 근거: 자체 서비스의 장문 생성 품질을 고도화하기 위해 제안된 오류 탐지 파이프라인과 벤치마크의 적용 가능성을 검토할 가치가 있습니다.
원문 링크
- arXiv: https://arxiv.org/abs/2603.05890
- Hugging Face Papers: https://huggingface.co/papers/2603.05890