Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

DayDreamer at CQs-Gen 2025: Generating Critical Questions through Argument Scheme Completion

Created by
  • Haebom

저자

Wendi Zhou, Ameer Saadat-Yazdi, Nadin Kokciyan

개요

본 논문은 ArgMining 2025의 비판적 질문 생성(CQs-Gen) 공유 과제를 위한 시스템을 제시합니다. Walton의 논증 체계를 안내 삼아, 사고 연쇄 프롬프팅을 사용하는 거대 언어 모델(LLM)을 활용하여 비판적 질문을 생성하는 접근 방식을 사용합니다. 각 입력 개입에 대해, LLM에게 대화형 프롬프트를 제공하여 해당 논증 체계 템플릿을 인스턴스화하여 구조화된 논증을 얻은 다음, 관련 비판적 질문을 생성합니다. 그 후, LLM에게 프롬프트를 제공하여 원본 개입 텍스트를 기반으로 상위 3개의 가장 유용한 질문을 선택하여 모든 사용 가능한 비판적 질문을 순위 지정합니다. 구조화된 논증 이론과 단계별 추론을 결합하여 맥락에 맞고 다양한 비판적 질문을 생성할 수 있습니다. 본 시스템은 최종 테스트 세트에서 경쟁력 있는 성능을 달성하여 논증적 텍스트를 고려하여 비판적 사고를 촉진하고 누락되거나 정보가 부족한 주장을 감지하는 잠재력을 보여줍니다. 코드는 DayDreamer에서 확인할 수 있습니다.

시사점, 한계점

시사점:
Walton의 논증 체계와 사고 연쇄 프롬프팅을 결합한 LLM 기반 비판적 질문 생성 시스템의 효과성을 보여줌.
논증적 텍스트에 대한 비판적 사고 촉진 및 누락된 주장 감지 가능성 제시.
경쟁력 있는 성능으로 CQs-Gen 과제에서의 실용성 입증.
한계점:
구체적인 성능 지표 및 비교 대상 시스템에 대한 자세한 정보 부족.
Walton의 논증 체계에 대한 의존성으로 인한 일반화 가능성의 한계.
LLM의 성능에 대한 의존도가 높아 편향이나 오류 발생 가능성 존재.
👍