Arxiv hàng ngày

Đây là trang tổng hợp các bài báo về trí tuệ nhân tạo được xuất bản trên toàn thế giới.
Trang này sử dụng Google Gemini để tóm tắt nội dung và hoạt động phi lợi nhuận.
Bản quyền của các bài báo thuộc về tác giả và tổ chức liên quan; khi chia sẻ, chỉ cần ghi rõ nguồn.

Các mô hình ngôn ngữ lớn không mô phỏng được tâm lý con người

Created by
  • Haebom

Tác giả

Sarah Schr oder, Thekla Morgenroth, Ulrike Kuhl, Valerie Vaquet, Benjamin Paa{\ss}vi

Phác thảo

Bài báo này xem xét một cách phê phán tuyên bố rằng các mô hình ngôn ngữ quy mô lớn (LLM), chẳng hạn như ChatGPT, có thể thay thế người tham gia trong nghiên cứu tâm lý. Chúng tôi trình bày các lập luận khái niệm cho giả thuyết rằng LLM mô phỏng tâm lý con người và cung cấp bằng chứng thực nghiệm bằng cách sử dụng một số LLM, bao gồm mô hình CENTAUR, được điều chỉnh cụ thể theo các phản ứng tâm lý. Chúng tôi chứng minh rằng có sự khác biệt đáng kể giữa LLM và phản ứng của con người khi những thay đổi nhỏ về từ ngữ dẫn đến những thay đổi ngữ nghĩa lớn, và rằng các LLM khác nhau thể hiện những phản ứng rất khác nhau đối với các mục mới, chứng minh tính không đáng tin cậy của LLM. Tóm lại, chúng tôi lập luận rằng LLM không mô phỏng tâm lý con người, và các nhà nghiên cứu tâm lý nên coi LLM là những công cụ hữu ích nhưng về cơ bản là không đáng tin cậy, cần được xác thực so với phản ứng của con người trong tất cả các ứng dụng mới.

Takeaways, Limitations

Takeaways: Mặc dù LLM có thể là một công cụ hữu ích cho nghiên cứu tâm lý, nhưng chúng không thể thay thế hoàn toàn người tham gia. Kết quả LLM luôn phải được so sánh và xác nhận với phản hồi của con người. Việc nhận thức được những hạn chế của LLM và thận trọng trong thiết kế và diễn giải nghiên cứu được nhấn mạnh.
Limitations: Nghiên cứu này có thể có tính khái quát hạn chế do dựa trên một chương trình LLM cụ thể và tập dữ liệu hạn chế. Cần có thêm nghiên cứu về các loại hình nghiên cứu tâm lý học và LLM khác nhau. Với tốc độ phát triển nhanh chóng của LLM, không chắc chắn liệu những kết luận của nghiên cứu này có còn giá trị lâu dài hay không.
👍