본 논문은 인간 협력자의 주관적인 관점에서 AI 에이전트를 더 나은 또는 더 나쁜 팀 동료로 만드는 측정 가능한 특성을 조사합니다. 협력 카드 게임인 하나비를 사용하여 AI 팀 연구의 일반적인 벤치마크로 실험을 진행합니다. 먼저 인간의 상호 작용 없이 측정 가능한 작업 성과, 정보 이론 및 게임 이론을 기반으로 한 일련의 객관적인 지표에 대해 AI 에이전트를 평가합니다. 다음으로 대규모(N=241) 인간-AI 팀 실험에서 AI 팀 동료에 대한 주관적인 인간의 선호도를 평가합니다. 마지막으로 AI 전용 객관적 지표와 인간의 주관적 선호도를 상호 연관시킵니다. 연구 결과는 강화 학습에 대한 이전 문헌의 일반적인 가정을 반박하고 AI 행동과 인간의 선호도 사이의 새로운 상관 관계를 밝힙니다. 인간-AI 팀이 달성하는 최종 게임 점수는 AI 행동 다양성, 전략적 우위 및 다른 AI와 협력하는 능력과 같은 난해한 측정값보다 인간의 선호도를 예측하는 데 효과가 적다는 것을 발견했습니다. 향후 이러한 상관 관계는 인간 협력적 AI를 훈련하기 위한 보상 함수를 형성하는 데 도움이 될 수 있습니다.