본 논문은 인간의 주석 작성자 의사결정 과정을 모방하여 오정보를 감지하고 반박하는 새로운 다중 에이전트 시스템을 제안하며, GPT-4 및 GPT-3.5와 같은 개별 대규모 언어 모델(LLM)에 비해 우수한 결과를 달성했습니다.

  • 이 시스템은 인간의 행동에서 영감을 받은 합의 메커니즘, 인지적 다양성, 지식의 다양성 및 계층적 구조를 통합합니다.
  • 투명성을 보장하기 위해 LLaMA, Kimi, Qwen, Deepseek 및 LLaMA-Nemotron을 포함한 오픈소스 모델을 활용합니다.
  • 평가는 영어(고자원), 폴란드어(중간자원), 슬로바키아어(저자원) 및 불가리아어(저자원) 데이터셋을 포함합니다.
  • 실험은 직접적인 오정보 감지, 검증 대상 텍스트 식별 및 검증 가능한 사실 주장 감지를 다룹니다.

저자들은 이 접근 방식이 중요하다고 간주하는데, 그 이유는 오정보의 규모가 수동 사실 확인을 부적절하게 만들기 때문에 오픈소스 구성 요소를 통해 투명성을 유지하면서 개별 LLM보다 성능이 우수한 자동화 방법이 필요하기 때문입니다.