Arxiv hàng ngày

Đây là trang tổng hợp các bài báo về trí tuệ nhân tạo được xuất bản trên toàn thế giới.
Trang này sử dụng Google Gemini để tóm tắt nội dung và hoạt động phi lợi nhuận.
Bản quyền của các bài báo thuộc về tác giả và tổ chức liên quan; khi chia sẻ, chỉ cần ghi rõ nguồn.

Tối ưu hóa mã dựa trên LLM công nghiệp theo quy định: Phương pháp tiếp cận kết hợp các tác nhân

Created by
  • Haebom

Tác giả

Mari Ashiga, Vardan Voskanyan, Fateme Dinmohammadi, Jingzhi Gong, Paul Brookes, Matthew Truscott, Rafail Giavrimis, Mike Basios, Leslie Kanthan, Wei Jie

Phác thảo

Bài báo này trình bày một phương pháp tiếp cận tác nhân hỗn hợp (MoA) để tối ưu hóa mã trong các ngành công nghiệp được quản lý. Trong môi trường mà việc sử dụng LLM thương mại bị hạn chế do các lo ngại về tuân thủ quy định và quyền riêng tư dữ liệu, chúng tôi đề xuất MoA, kết hợp nhiều LLM nguồn mở chuyên biệt để tạo mã. Chúng tôi so sánh nó với hệ thống tổng hợp dựa trên thuật toán di truyền (GA) của TurinTech AI và các trình tối ưu hóa LLM riêng lẻ. Kết quả thử nghiệm sử dụng các cơ sở mã công nghiệp trong thế giới thực chứng minh rằng MoA đạt được mức tiết kiệm chi phí lần lượt là 14,3% và 22,2% và giảm thời gian tối ưu hóa lần lượt là 28,6% và 32,2% khi sử dụng các mô hình nguồn mở. Hơn nữa, chúng tôi chứng minh tính ưu việt của tổng hợp dựa trên GA so với các mô hình thương mại và cả hai tổng hợp đều vượt trội hơn các LLM riêng lẻ. Chúng tôi xác thực khả năng ứng dụng của nó trong môi trường thực tế bằng cách sử dụng 50 đoạn mã và bảy tổ hợp LLM. Cuối cùng, chúng tôi cung cấp hướng dẫn thực tế về việc cân bằng giữa tuân thủ quy định và hiệu suất tối ưu hóa.

Takeaways, Limitations

Takeaways:
Chúng tôi trình bày khả năng tối ưu hóa mã hiệu quả bằng cách sử dụng MoA dựa trên LLM nguồn mở trong môi trường công nghiệp được quản lý.
Chứng minh bằng thực nghiệm rằng MoA mang lại lợi ích đáng kể trong việc giảm chi phí và giảm thời gian tối ưu hóa.
Phân tích so sánh ưu và nhược điểm của LLM thương mại và mã nguồn mở để cung cấp hướng dẫn áp dụng cho môi trường công nghiệp.
Kết quả có độ tin cậy cao dựa trên các thí nghiệm quy mô lớn sử dụng cơ sở mã ngành thực tế.
Limitations:
Các loại và phiên bản LLM nguồn mở và thương mại được sử dụng trong nghiên cứu này không được đề cập rõ ràng, hạn chế khả năng khái quát hóa.
Vì hiệu suất của MoA có thể thay đổi tùy thuộc vào loại và cấu hình LLM được sử dụng nên cần nghiên cứu thêm về nhiều sự kết hợp khác nhau.
Vì các đặc điểm của cơ sở mã được sử dụng trong thí nghiệm không được trình bày rõ ràng nên cần phải xem xét khả năng khái quát hóa sang các loại cơ sở mã khác.
Trong phân tích so sánh với các hệ thống tổng hợp dựa trên GA, thiếu thông tin về các thiết lập cụ thể của hệ thống GA.
👍