Bài báo này trình bày khung công tác AutoBot, tự động xác định và giảm thiểu các mẫu lừa đảo trong giao diện kỹ thuật số. AutoBot phân tích ảnh chụp màn hình trang web để xác định và định vị chính xác các mẫu lừa đảo mà không cần mã HTML. Một quy trình hai giai đoạn sử dụng các mô hình thị giác chuyên biệt và các mô hình ngôn ngữ quy mô lớn (LLM) sẽ phân tích các đặc điểm hình ảnh và văn bản của trang web để xác định các mẫu lừa đảo. Hơn nữa, AutoBot được sử dụng để huấn luyện các mô hình ngôn ngữ nhỏ hơn bằng cách trích xuất kiến thức từ một LLM "giáo viên", tạo ra một tập dữ liệu tổng hợp. AutoBot được triển khai dưới dạng ba ứng dụng phụ: tiện ích mở rộng trình duyệt cho người dùng, công cụ kiểm tra Lighthouse cho nhà phát triển và công cụ đo lường cho các nhà nghiên cứu và cơ quan quản lý, hỗ trợ nhiều bên liên quan đến web. Kết quả đánh giá chứng minh tính hiệu quả của nó, đạt điểm F1 là 0,93 cho khả năng phát hiện mẫu lừa đảo.
