Arxiv hàng ngày

Đây là trang tổng hợp các bài báo về trí tuệ nhân tạo được xuất bản trên toàn thế giới.
Trang này sử dụng Google Gemini để tóm tắt nội dung và hoạt động phi lợi nhuận.
Bản quyền của các bài báo thuộc về tác giả và tổ chức liên quan; khi chia sẻ, chỉ cần ghi rõ nguồn.

Giáo dục đàm thoại quy mô lớn: Quy trình làm việc của nhiều tác nhân LLM cho việc học theo thủ tục và đánh giá chất lượng sư phạm

Created by
  • Haebom

Tác giả

Jiahuan Pei, Fanghua Ye, Xin Sun, Wentao Deng, Koen Hindriks, Junxiao Wang

Phác thảo

Bài báo này đề xuất một quy trình làm việc đa tác tử, WikiHowAgent, tận dụng các mô hình ngôn ngữ quy mô lớn (LLM) để mô phỏng các cuộc trò chuyện dạy-học tương tác. WikiHowAgent tích hợp các tác tử giáo viên và học viên, một trình quản lý tương tác và một người đánh giá để hỗ trợ việc học theo quy trình và đánh giá chất lượng giáo dục. Chúng tôi trình bày một tập dữ liệu gồm 114.296 cuộc trò chuyện giữa giáo viên và học viên trải rộng trên 17 lĩnh vực và 727 chủ đề, dựa trên 14.287 bài hướng dẫn. Chúng tôi sử dụng một giao thức đánh giá kết hợp các số liệu tính toán và dựa trên tiêu chí với sự điều chỉnh đánh giá của con người. Chúng tôi chứng minh hiệu quả của quy trình làm việc trong nhiều bối cảnh khác nhau và cung cấp thông tin chi tiết về khả năng của LLM trên nhiều lĩnh vực. Tập dữ liệu và việc triển khai hoàn toàn là mã nguồn mở.

Takeaways, Limitations

Takeaways:
Một cách tiếp cận mới để phát triển hệ thống dạy-học tương tác bằng LLM.
Cung cấp các tập dữ liệu quy mô lớn bao gồm nhiều lĩnh vực và chủ đề khác nhau
Trình bày một giao thức đánh giá khách quan dựa trên tính toán và đánh giá của con người.
Cung cấp cái nhìn sâu sắc về tiềm năng và hạn chế trong giáo dục của LLM.
Tăng khả năng tái tạo và khả năng mở rộng của nghiên cứu thông qua nguồn mở
Limitations:
Cần có thêm sự xác thực về khả năng tổng quát hóa các tình huống học tập dựa trên dữ liệu WikiHow.
Khả năng áp dụng hạn chế đối với các loại phương pháp học tập và đánh giá khác nhau
Thiếu sự cân nhắc đến thành kiến ​​và các vấn đề đạo đức của LLM
Thiếu phân tích so sánh với giáo viên thực sự
Cần có thêm nghiên cứu về ứng dụng vào môi trường giáo dục thực tế.
👍