본 논문은 대규모 언어 모델(LLM)이 과학 논문의 비판적 동료 검토를 수행하는 데 어려움을 겪는 문제를 해결하기 위해, 지속적인 워크플로 프롬프팅(PWP)이라는 새로운 프롬프트 엔지니어링 방법론을 제안한다. PWP는 표준 LLM 채팅 인터페이스를 사용하여 계층적이고 모듈화된 마크다운 구조의 프롬프트를 통해 상세한 분석 워크플로를 정의하며, 메타 프롬프팅 및 메타 추론 기법을 통해 전문가 검토 워크플로를 체계적으로 코딩한다. 실험 화학 논문 분석을 위한 PWP 프롬프트의 개념 증명을 통해, LLM이 주요 방법론적 결함을 식별하고, 입력 편향을 완화하며, 주장과 증거 구분, 텍스트/사진/그림 분석을 통한 매개변수 추론, 정량적 타당성 검사, 추정치와 주장 비교, 사전 타당성 평가 등 복잡한 작업을 수행하는 것을 보여준다. 본 연구는 특정 응용 프로그램을 넘어, 상세한 워크플로 형식화를 바탕으로 PWP의 잠재력을 강조하며, 복잡한 과학적 작업을 위해 쉽게 이용 가능한 LLM을 사용한 정교한 분석을 가능하게 한다.
