Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

A Cautionary Tale About "Neutrally" Informative AI Tools Ahead of the 2025 Federal Elections in Germany

Created by
  • Haebom

저자

Ina Dormuth, Sven Franke, Marlies Hafer, Tim Katzke, Alexander Marx, Emmanuel Muller, Daniel Neider, Markus Pauly, Jerome Rutinowski

개요

본 연구는 AI 기반 투표 조언 애플리케이션(VAAs)과 대규모 언어 모델(LLMs)이 객관적인 정치 정보를 제공하는 신뢰성을 조사합니다. 독일의 잘 알려진 온라인 도구인 Wahl-O-Mat의 38개 진술에 대한 정당의 반응과의 비교 분석을 기반으로 합니다. LLMs의 경우, 좌파 정당에 대해서는 평균 75% 이상의 높은 정렬을 보이는 반면, 중도우파 정당(50% 미만)과 우파 정당(약 30%)에 대해서는 상당히 낮은 정렬을 보이며, 상당한 편향성을 나타냅니다. 또한, 유권자에게 객관적으로 정보를 제공하고자 하는 VAAs의 경우, Wahl-O-Mat에서 정당의 진술된 입장과 상당한 차이를 발견했습니다. 한 VAA는 25%의 경우에, 다른 VAA는 50% 이상의 경우에 차이를 보였습니다. 후자의 경우, 단순한 프롬프트 주입으로 인해 정당과 극우 세력 간의 비존재하는 연관성과 같은 허위 주장을 포함한 심각한 환각이 발생하는 것을 관찰했습니다.

시사점, 한계점

시사점: AI 기반 VAAs와 LLMs가 정치 정보 제공에 있어 상당한 편향성과 신뢰성 문제를 가지고 있음을 보여줍니다. 특히, LLMs의 좌파 성향 편향과 VAAs의 객관성 부족은 심각한 문제로 지적됩니다. 단순한 프롬프트 조작으로 인한 허위 정보 생성 가능성 또한 심각한 우려 사항입니다.
한계점: 본 연구는 독일의 Wahl-O-Mat 데이터에 기반하므로, 다른 국가 또는 다른 정치 시스템에 대한 일반화에는 주의가 필요합니다. 분석 대상이 된 VAAs와 LLMs의 수가 제한적일 수 있으며, 더 광범위한 분석이 필요할 수 있습니다. 또한, 편향의 원인에 대한 심층적인 분석이 부족할 수 있습니다.
👍