Arxiv hàng ngày

Đây là trang tổng hợp các bài báo về trí tuệ nhân tạo được xuất bản trên toàn thế giới.
Trang này sử dụng Google Gemini để tóm tắt nội dung và hoạt động phi lợi nhuận.
Bản quyền của các bài báo thuộc về tác giả và tổ chức liên quan; khi chia sẻ, chỉ cần ghi rõ nguồn.

TransLLM: Khung nền tảng đa nhiệm thống nhất cho giao thông đô thị thông qua tính năng nhắc nhở có thể học được

Created by
  • Haebom

Tác giả

Jiaming Leng, Yunying Bi, Chuan Qin, Bing Yin, Yanyong Zhang, Chao Wang

Phác thảo

Bài báo này đề xuất TransLLM, một khuôn khổ tích hợp kết hợp mô hình không gian thời gian và mô hình ngôn ngữ quy mô lớn (LLM) để giải quyết các thách thức đa dạng trong hệ thống giao thông đô thị, bao gồm dự đoán giao thông, dự báo nhu cầu sạc xe điện và điều phối taxi. TransLLM nắm bắt các mối phụ thuộc phức tạp thông qua bộ mã hóa không gian thời gian nhẹ và tương tác liền mạch với LLM thông qua cấu trúc nhắc nhở có thể học được. Cơ chế định tuyến nhắc nhở ở cấp độ cá thể được đào tạo thông qua học tăng cường sẽ cá nhân hóa các nhắc nhở một cách động dựa trên các đặc điểm đầu vào. Nó mã hóa các mẫu không gian thời gian dưới dạng biểu diễn theo ngữ cảnh, xây dựng các nhắc nhở được cá nhân hóa để hướng dẫn suy luận LLM và tạo ra các dự đoán cụ thể cho từng tác vụ thông qua một lớp đầu ra chuyên biệt. Kết quả thử nghiệm trên bảy tập dữ liệu và ba tác vụ chứng minh rằng TransLLM hoạt động cạnh tranh trong cả cài đặt có giám sát và không có cảnh quay nào, thể hiện khả năng tổng quát hóa tuyệt vời và khả năng thích ứng giữa các tác vụ.

Takeaways, Limitations

Takeaways:
Nó khắc phục được những hạn chế của các mô hình nhiệm vụ cụ thể hiện có và đưa ra giải pháp tích hợp cho nhiều vấn đề giao thông đô thị.
Bằng cách kết hợp hiệu quả dữ liệu không gian thời gian với LLM, chúng tôi tận dụng thế mạnh của LLM để giải quyết các vấn đề về giao thông đô thị.
Cải thiện hiệu suất mô hình và khả năng khái quát hóa thông qua cấu hình nhắc nhở có thể học được và cơ chế định tuyến nhắc nhở dựa trên học tăng cường.
Nó cho thấy hiệu suất tuyệt vời ngay cả trong cài đặt không có ảnh, giúp giảm thiểu vấn đề thiếu dữ liệu.
Limitations:
Có thể thiếu sự phân tích về tương tác giữa các yếu tố góp phần cải thiện hiệu suất của mô hình đề xuất.
Cần phải đánh giá sâu hơn về hiệu suất tổng quát trên nhiều môi trường đô thị và hệ thống giao thông khác nhau.
Cần nghiên cứu thêm về khả năng mở rộng và hiệu suất xử lý thời gian thực để ứng dụng vào các hệ thống thực tế.
Có thể cần phân tích chi tiết hơn để xác định đặc điểm của tập dữ liệu được sử dụng ảnh hưởng như thế nào đến hiệu suất của mô hình.
👍