[공지사항]을 빙자한 안부와 근황 
Show more

Arxiv hàng ngày

Đây là trang tổng hợp các bài báo về trí tuệ nhân tạo được xuất bản trên toàn thế giới.
Trang này sử dụng Google Gemini để tóm tắt nội dung và hoạt động phi lợi nhuận.
Bản quyền của các bài báo thuộc về tác giả và tổ chức liên quan; khi chia sẻ, chỉ cần ghi rõ nguồn.

Tổng hợp cấu hình dựa trên LLM yêu cầu giải thích rõ ràng

Created by
  • Haebom

Tác giả

Rajdeep Mondal, Nikolaj Bjorner, Todd Millstein, Alan Tang, George Varghese

Phác thảo

Trong bài báo này, chúng tôi giải quyết vấn đề mơ hồ về ý định của người dùng bên cạnh vấn đề ảo giác trong tổng hợp chương trình bằng mô hình ngôn ngữ quy mô lớn (LLM). Chúng tôi chứng minh vấn đề mơ hồ này trong bối cảnh mạng lưới tổng hợp thành phần gia tăng của bản đồ tuyến đường và Danh sách Kiểm soát Truy cập (ACL). Các cấu trúc này thường chồng chéo trong không gian tiêu đề, khiến LLM không thể suy ra mức độ ưu tiên tương đối của các tác vụ mà không có sự tương tác của người dùng. Các phép đo trong môi trường đám mây quy mô lớn cho thấy các ACL phức tạp với hàng trăm điểm chồng chéo, chứng minh rằng mơ hồ là một vấn đề thực sự. Trong bài báo này, chúng tôi đề xuất một hệ thống nguyên mẫu có tên là Clarify, bổ sung một mô-đun mới, Disambiguator, vào LLM để giúp khơi gợi ý định của người dùng. Clarify tổng hợp và xác minh các chính sách định tuyến một cách gia tăng sau khi khử mơ hồ cho các khối lượng công việc tổng hợp nhỏ. Cách tiếp cận của chúng tôi đối với mơ hồ cũng hữu ích trong trường hợp tổng quát hơn, khi LLM có thể tổng hợp chính xác ý định của các bản cập nhật, nhưng việc tích hợp chúng lại mơ hồ và có thể dẫn đến các hành vi toàn cục khác nhau.

Takeaways, Limitations

Takeaways: Làm rõ vấn đề mơ hồ ý định người dùng trong tổng hợp chương trình dựa trên LLM, và đề xuất một phương pháp tiếp cận mới (hệ thống Clarify) để giải quyết vấn đề này. Việc làm rõ ý định người dùng thông qua mô-đun Disambiguator có thể góp phần cải thiện độ tin cậy của LLM. Bài báo gợi ý khả năng ứng dụng để giải quyết vấn đề tích hợp ý định mơ hồ của LLM vào các lĩnh vực khác cũng như cấu hình mạng.
Limitations: Hệ thống Clarify chỉ được đánh giá trên một khối lượng công việc tổng hợp nhỏ, do đó cần xác minh hiệu suất và khả năng mở rộng của hệ thống trong môi trường thực tế quy mô lớn. Mô tả chi tiết về thiết kế và triển khai mô-đun Disambiguator chưa đầy đủ. Chưa cân nhắc đầy đủ đến sự mệt mỏi của người dùng và độ phức tạp của tương tác có thể phát sinh trong quá trình khử nhập nhằng.
👍