AI 시스템이 전문 분야에서 널리 사용됨에 따라, STEM 분야 외 배경을 가진 사람들이 AI 도구를 효과적이고 책임감 있게 사용할 수 있도록 AI 리터러시를 갖추는 것이 시급하다. 기존의 AI 리터러시 평가가 프로그래밍, 수학, 통계 등 기초 기술 지식에 중점을 두는 경향이 있어, 모델 결과 해석, 도구 선택, 윤리적 문제 식별과 같은 실용적 지식에 대한 평가가 부족하다. 본 연구는 실제 업무 환경에서 AI 도구를 효과적으로 사용하는 데 필요한 역량에 기반한 AI 리터러시 평가 모델을 제안한다. 미국 해군 로봇 공학 훈련 프로그램을 통해 개발된 새로운 AI 리터러시 평가 도구와 형성 평가를 설명한다. 이 프로그램은 로봇 공학 및 AI 리터러시 교육, 실용적인 과제를 포함한 경쟁, 그리고 AI 활용 시나리오를 시뮬레이션하는 객관식 과제를 포함했다. 실용적인 AI 리터러시 측정에서 경쟁의 시나리오 과제가 기존 연구에서 채택하거나 자체 개발한 테스트보다 우수한 성과를 보였다. 본 연구는 기술적 배경이 없는 작업자가 AI 통합 역할을 준비할 때, 추상적인 기술 지식보다 맥락적이고 실용적인 기술을 강조하는 평가 도구를 활용해야 함을 주장한다.
