정치 토론 분석을 위한 RAG 접근법: 오류 탐지 및 관계 검색
Retrieving Relations, Detecting Fallacies: A RAG Approach to Political Debate Analysis
이 연구는 정치적 토론에서의 오류를 자동으로 탐지하는 방법을 제안한다. 오류 탐지는 단순한 텍스트 분석을 넘어서는 맥락적 지식이 필요하며, 논의 중인 주제에 대한 세계 지식과 주장의 관계를 이해해야 한다. 제안된 방법은 지원 및 공격의 논증 관계를 활용하여 관련 문서의 검색을 동적으로 조정하는 방식으로, ElecDeb60to20 벤치마크에서 42개의 검색 구성과 14개의 모델을 평가하여 15GB의 정치 관련 문서 데이터베이스에서 수행되었다. 결과적으로 오류 탐지에서 매크로 F1 점수가 0.864, 분류에서 0.725로 비검색 기반보다 향상되었다.
제안된 방법은 외부 지식을 통합하여 오류 탐지 및 분류 성능을 향상시킨다.
원문 출처
arXiv cs.AI (인공지능)