Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Can postgraduate translation students identify machine-generated text?

Created by
  • Haebom

저자

Michael Farrell

개요

본 연구는 생성형 인공지능(ChatGPT-4o)이 다국어 콘텐츠 생성에 활용됨에 따라, 언어 훈련을 받은 사람들이 기계 생성 텍스트(ST)와 인간이 작성한 텍스트(HT)를 구별할 수 있는지 조사했습니다. 23명의 대학원 번역학과 학생들이 합성 텍스트의 특징에 대한 간략한 교육 후 이탈리아어 산문을 분석하고, 인간이 작성했거나 AI가 생성했을 가능성 점수를 매겼습니다. 결과적으로 학생들은 HT와 ST를 구별하는 데 어려움을 겪었으며, 두 명만 상당한 정확도를 달성했습니다. 분석 결과, 학생들은 HT와 ST 모두에서 동일한 텍스트 이상 현상을 식별하는 경우가 많았지만, 낮은 버스트니스와 자기 모순과 같은 특징은 ST와 더 자주 연관되었습니다.

시사점, 한계점

시사점: 합성 텍스트의 자연스러움 향상을 위한 교육 방식 개선이 필요함을 시사합니다. AI 생성 텍스트가 이미 충분히 자연스러운지, 추가적인 다듬기가 필요한지에 대한 추가 연구가 필요합니다. AI 생성 텍스트의 자연스러움 수준에 대한 의문을 제기합니다.
한계점: 참가자 수가 제한적(23명)이며, 특정 언어(이탈리아어)와 AI 모델(ChatGPT-4o)에 국한된 연구 결과입니다. 교육 방식의 효과에 대한 더 자세한 분석이 필요합니다.
👍