Arxiv hàng ngày

Đây là trang tổng hợp các bài báo về trí tuệ nhân tạo được xuất bản trên toàn thế giới.
Trang này sử dụng Google Gemini để tóm tắt nội dung và hoạt động phi lợi nhuận.
Bản quyền của các bài báo thuộc về tác giả và tổ chức liên quan; khi chia sẻ, chỉ cần ghi rõ nguồn.

LLM-D12: Thang đo hai chiều của sự phụ thuộc công cụ và quan hệ vào các mô hình ngôn ngữ lớn

Created by
  • Haebom

Tác giả

Ala Yankouskaya, Areej B. Babiker, Syeda WF Rizvi, Sameha Alshakhsi, Magnus Liebherr, Raian Ali

Phác thảo

Bài báo này phát triển và xác thực một bảng câu hỏi mới để đánh giá sự phụ thuộc hoặc hành vi nghiện trên các mô hình ngôn ngữ quy mô lớn (LLM). Để khắc phục những hạn chế về mặt khái niệm của các nghiên cứu trước đây áp dụng các triệu chứng nghiện hành vi hiện có vào môi trường sử dụng LLM, chúng tôi trình bày một góc nhìn mới, xem xét các khía cạnh tinh tế của LLM và tương tác giữa con người. Bảng câu hỏi 12 mục (LLM-D12) được phát triển với 526 người tham gia tại Vương quốc Anh đã được xác nhận bao gồm hai cấu trúc yếu tố, "sự phụ thuộc công cụ" và "sự phụ thuộc quan hệ", thông qua phân tích yếu tố thăm dò và xác nhận. Sự phụ thuộc công cụ phản ánh mức độ phụ thuộc vào LLM trong các nhiệm vụ ra quyết định và nhận thức, và sự phụ thuộc quan hệ phản ánh xu hướng coi LLM là những sinh vật có ý nghĩa xã hội, có nhận thức hoặc giống như một người bạn đồng hành. LLM-D12 cho thấy tính nhất quán nội tại tuyệt vời và giá trị phân biệt rõ ràng, và cơ sở khái niệm cũng như sự khác biệt của hai thang đo phụ đã được xác nhận thông qua xác thực bên ngoài. Các đặc tính và cấu trúc trắc nghiệm tâm lý của thang đo LLM-D12 được diễn giải dựa trên giả định rằng mặc dù sự phụ thuộc vào LLM không nhất thiết chỉ ra tình trạng rối loạn chức năng, nhưng nó có thể phản ánh mức độ phụ thuộc có thể gây ra vấn đề trong một số tình huống nhất định.

Takeaways, Limitations

•
Takeaways:
◦
Chúng tôi đã phát triển và xác nhận một thang đo mới (LLM-D12) để đo lường mức độ phụ thuộc vào LLM, góp phần vào việc nghiên cứu hiện tượng nghiện và lệ thuộc liên quan đến việc sử dụng LLM.
◦
Bằng cách chia sự phụ thuộc vào LLM thành hai yếu tố, "sự phụ thuộc về công cụ" và "sự phụ thuộc về quan hệ", chúng tôi cung cấp một sự hiểu biết sắc thái hơn về sự tương tác giữa LLM và con người.
◦
ĐIều này cho thấy rằng sự phụ thuộc vào LLM không nhất thiết ngụ ý rối loạn chức năng và đặt ra nhu cầu nghiên cứu sâu hơn về mức độ phụ thuộc có thể gây ra vấn đề.
•
Limitations:
◦
Vì mẫu người tham gia nghiên cứu chỉ giới hạn ở Vương quốc Anh nên phải tính đến đặc điểm văn hóa.
◦
Do những hạn chế của phương pháp khảo sát trực tuyến nên có khả năng xảy ra sai lệch trong phản hồi.
◦
Cần có thêm các nghiên cứu để xác định tính ổn định lâu dài và giá trị dự đoán của LLM-D12.
◦
Cần phải xác minh khả năng khái quát hóa trên nhiều loại LLM và môi trường sử dụng khác nhau.
👍
Made with Slashpage