SweeperBot: Making 3D Browsing Accessible through View Analysis and Visual Question Answering
Created by
Haebom
Category
Empty
저자
Chen Chen, Cuong Nguyen, Alexa Siu, Dingzeyu Li, Nadir Weibel
SweeperBot: 3D 모델 탐색을 위한 시각 질의 응답 시스템
개요
본 논문은 화면 판독기(SR) 사용자를 위한 3D 모델 접근성 문제를 해결하기 위해 SweeperBot 시스템을 제시한다. SweeperBot은 시각 질의 응답(VQA) 기술을 활용하여 SR 사용자가 3D 모델을 탐색하고 비교할 수 있도록 돕는다. 최적의 뷰 선택 기술과 생성 및 인식 기반 파운데이션 모델을 결합하여 SR 사용자의 시각적 질문에 답변한다. 10명의 시각 장애(BLV) 사용자를 대상으로 한 전문가 리뷰를 통해 SweeperBot의 유용성을 입증했으며, 30명의 시각 사용자를 대상으로 한 설문 조사를 통해 SweeperBot이 생성하는 설명의 품질을 검증했다.