Nghiên cứu này đã khảo sát nhận thức của sinh viên về phản hồi AI tạo sinh dựa trên các mô hình ngôn ngữ quy mô lớn (LLM) trong môi trường giáo dục đại học, cung cấp những hiểu biết giá trị cho việc triển khai và áp dụng hiệu quả. Thông qua thiết kế thử nghiệm với 91 sinh viên đại học, chúng tôi đã so sánh và phân tích niềm tin của sinh viên vào phản hồi do LLM tạo ra, do con người tạo ra và phản hồi đồng tạo ra giữa con người và AI. Cụ thể, chúng tôi đã xem xét các yếu tố ảnh hưởng đến việc xác định loại phản hồi, nhận thức về chất lượng phản hồi và các thành kiến tiềm ẩn liên quan đến nguồn phản hồi. Kết quả cho thấy khi nguồn phản hồi bị ẩn, sinh viên có xu hướng thích phản hồi do AI tạo ra và phản hồi đồng tạo ra hơn phản hồi của con người về tính hữu ích và khách quan. Tuy nhiên, khi nguồn phản hồi được tiết lộ, một thành kiến tiêu cực mạnh mẽ hơn đối với AI đã xuất hiện. Điều thú vị là, tính xác thực giảm khi nguồn phản hồi được tiết lộ chỉ giới hạn ở phản hồi AI, trong khi phản hồi đồng tạo ra vẫn duy trì nhận thức tích cực. Kinh nghiệm với AI giáo dục đã cải thiện khả năng của sinh viên trong việc xác định phản hồi do LLM tạo ra và tăng niềm tin của họ vào tất cả các loại phản hồi. Ngược lại, sinh viên có nhiều kinh nghiệm sử dụng AI cho các mục đích chung có xu hướng đánh giá phản hồi là kém hữu ích và đáng tin cậy hơn. Những kết quả này cho thấy tầm quan trọng của việc cải thiện khả năng phản hồi và khả năng hiểu biết về AI đối với độ tin cậy của các nguồn phản hồi cũng như việc áp dụng và tác động giáo dục của phản hồi dựa trên AI.
