Arxiv hàng ngày

Đây là trang tổng hợp các bài báo về trí tuệ nhân tạo được xuất bản trên toàn thế giới.
Trang này sử dụng Google Gemini để tóm tắt nội dung và hoạt động phi lợi nhuận.
Bản quyền của các bài báo thuộc về tác giả và tổ chức liên quan; khi chia sẻ, chỉ cần ghi rõ nguồn.

Sự thích ứng mạnh mẽ của các mô hình đa phương thức lớn để tăng cường phát hiện meme thù hận

Created by
  • Haebom

Tác giả

Jingbiao Mei, Jinghong Chen, Guanyu Yang, Weizhe Lin, Bill Byrne

Phác thảo

Bài báo này tập trung vào việc phát triển một hệ thống mạnh mẽ để tự động phát hiện các meme chứa ngôn từ kích động thù địch, một vấn đề nghiêm trọng trên Internet. Mặc dù các mô hình đa phương thức (LMM) quy mô lớn đã cho thấy kết quả khả quan, nhưng chúng vẫn gặp phải những thách thức như hiệu suất chưa tối ưu và khả năng khái quát hóa liên miền hạn chế. Để giải quyết những thách thức này, chúng tôi đề xuất một khuôn khổ thích ứng mạnh mẽ, duy trì khả năng ngôn ngữ thị giác chung của LMM đồng thời cải thiện cả độ chính xác trong miền và khả năng khái quát hóa liên miền. Phương pháp được đề xuất chứng minh tính mạnh mẽ trước các cuộc tấn công đối nghịch so với các mô hình tinh chỉnh có giám sát (SFT) hiện có. Kết quả thử nghiệm trên sáu tập dữ liệu phân loại meme cho thấy phương pháp này vượt trội hơn các mô hình tiên tiến hiện có và tạo ra bằng chứng chất lượng cao hơn, do đó nâng cao khả năng diễn giải của mô hình.

Takeaways, Limitations

_____T27556____:
Chúng tôi trình bày một khuôn khổ thích ứng mới giúp cải thiện độ chính xác trong miền và khái quát hóa miền chéo trong việc phát hiện meme thù hận bằng cách sử dụng LMM.
ĐảM bảo khả năng chống chịu mạnh mẽ trước các cuộc tấn công của đối phương.
ĐạT được hiệu suất vượt trội hơn hiệu suất tốt nhất hiện tại (SOTA).
Cung cấp khả năng diễn giải mô hình được cải thiện (tạo ra bằng chứng chất lượng cao).
Limitations:
Cần có thêm nghiên cứu về hiệu suất tổng quát của khuôn khổ đề xuất.
Cần phải đánh giá hiệu suất tổng quát cho các loại meme thù hận khác nhau.
Cần phải đánh giá hiệu suất và giám sát liên tục trong môi trường thực tế.
👍