Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Name of Thrones: Evaluating How LLMs Rank Student Names, Race, and Gender in Status Hierarchies

Created by
  • Haebom

저자

Annabella Sakunkoo, Jonathan Sakunkoo

개요

본 논문은 대규모 언어 모델(LLM)이 이름을 기반으로 성별, 인종, 사회적 지위에 따른 편향된 평가를 내리는지 조사한 연구이다. 5개 민족의 다양한 이름 변형을 분석하여 LLM이 성별과 민족을 나타내는 이름을 기반으로 능력, 리더십, 경제적 잠재력에 대한 차별적인 기대치를 부호화하여 지위 계층을 반영하고 강화하는 방식을 밝혔다. 기존의 AI가 백인을 선호한다는 일반적인 가정과 달리, 동아시아계, 그리고 어떤 경우 남아시아계 이름이 더 높은 순위를 받는다는 것을 보여주었으며, 아시아계를 단일 집단으로 보는 편견을 깨고 아시아계 내부의 다층적인 편향을 드러냈다. 또한, 성별에 따라 편향이 달라지며, 특히 일부 인종 집단의 여자아이들이 불공정한 불이익을 받는다는 점을 밝혔다. 서구식 이름을 사용하면 동아시아계와 동남아시아계 학생들의 AI에 의한 지위 평가가 향상되는데, 특히 여자아이들에게 더욱 그러하다. 결론적으로, LLM 평가 시 인종, 성별, 혼합된 정체성에 대한 교차적이고 세밀한 이해의 중요성을 강조한다.

시사점, 한계점

시사점:
LLM이 이름을 기반으로 성별, 인종, 사회적 지위에 대한 편향을 보인다는 것을 실증적으로 밝힘.
기존의 단순한 인종 차별적 편향을 넘어, 아시아계 내부의 다층적이고 복잡한 편향을 드러냄.
성별이 편향에 영향을 미치며, 특히 여성이 불이익을 받는 경우가 있음을 보임.
이름 변경을 통한 편향 완화 가능성 제시 (서구식 이름 채택).
LLM 개발 및 활용 시, 교차적인 정체성에 대한 고려의 중요성 강조.
한계점:
연구 대상이 된 민족의 수와 이름의 종류가 제한적일 수 있음.
LLM의 특정 버전 또는 모델에 대한 분석 결과이므로 일반화에 한계가 있을 수 있음.
이름 외 다른 요인(예: 교육 수준, 경제적 배경)의 영향을 충분히 통제하지 못했을 가능성.
이름 변경이 장기적인 해결책이 될 수 없는 윤리적 문제점 고려 필요.
👍