Arxiv hàng ngày

Đây là trang tổng hợp các bài báo về trí tuệ nhân tạo được xuất bản trên toàn thế giới.
Trang này sử dụng Google Gemini để tóm tắt nội dung và hoạt động phi lợi nhuận.
Bản quyền của các bài báo thuộc về tác giả và tổ chức liên quan; khi chia sẻ, chỉ cần ghi rõ nguồn.

Compliance Brain Assistant: AI đàm thoại hỗ trợ các nhiệm vụ tuân thủ trong môi trường doanh nghiệp

Created by
  • Haebom

Tác giả

Shitong Zhu, Chenhao Fang, Derek Larson, Neel Reddy Pochareddy, Rajeev Rao, Sophie Zeng, Yanqing Peng, Wendy Summer, Alex Goncalves, Arya Pudota, Herv e Robert

Phác thảo

Bài báo này trình bày Compliance Brain Assistant (CBA), một trợ lý AI đàm thoại được thiết kế để cải thiện hiệu quả các nhiệm vụ tuân thủ hàng ngày của nhân viên trong môi trường doanh nghiệp. CBA sử dụng bộ định tuyến truy vấn người dùng cung cấp hai chế độ để cân bằng chất lượng phản hồi và độ trễ. Thứ nhất, chế độ FastTrack, xử lý các yêu cầu đơn giản, truy xuất thông tin liên quan từ kho lưu trữ kiến thức. Thứ hai, chế độ FullAgentic, xử lý các yêu cầu phức tạp, chủ động tìm kiếm ngữ cảnh trong nhiều tài liệu tuân thủ khác nhau và thực hiện các thao tác phức tạp và gọi công cụ để xử lý các yêu cầu bằng cách tận dụng các API/mô hình khác nhau. Kết quả đánh giá thử nghiệm cho thấy CBA cải thiện đáng kể hiệu suất của LLM hiện tại về tỷ lệ khớp từ khóa trung bình (83,7% so với 41,7%) và tỷ lệ vượt qua đánh giá LLM (82,0% so với 20,0%) cho nhiều truy vấn liên quan đến quyền riêng tư/tuân thủ trong thế giới thực. Ngoài ra, thiết kế dựa trên định tuyến được so sánh với chế độ chỉ theo dõi nhanh và chế độ tác nhân đầy đủ , và kết quả cho thấy tỷ lệ khớp lệnh trung bình và tỷ lệ vượt qua cao hơn trong khi vẫn duy trì thời gian thực hiện gần như giống nhau, xác minh giả thuyết rằng cơ chế định tuyến cung cấp sự cân bằng tốt giữa hai chế độ.

Takeaways, Limitations

Takeaways:
Trình bày cách trợ lý AI đàm thoại có thể cải thiện hiệu quả tuân thủ của công ty.
Chúng tôi chứng minh rằng cơ chế định tuyến truy vấn của người dùng có thể kiểm soát hiệu quả sự cân bằng giữa chất lượng phản hồi và độ trễ.
Hiệu suất cải thiện được xác minh bằng thực nghiệm so với LLM hiện tại.
Limitations:
Thiếu mô tả chi tiết về quy mô và tính đa dạng của dữ liệu thực nghiệm.
Vì nó được thiết kế cho một môi trường doanh nghiệp cụ thể nên cần phải nghiên cứu thêm để xác định khả năng áp dụng của nó cho các môi trường khác.
Cần phải cân nhắc đến tính ổn định và khả năng bảo trì của hệ thống trong quá trình sử dụng lâu dài.
Cần phải cải thiện hiệu suất của các thuật toán định tuyến có khả năng xác định chính xác độ phức tạp của các truy vấn của người dùng.
👍