Sign In

FaRAccel: FPGA-Accelerated Defense Architecture for Efficient Bit-Flip Attack Resilience in Transformer Models

Created by
  • Haebom
Category
Empty

저자

Najmeh Nazari, Banafsheh Saber Latibari, Elahe Hosseini, Fatemeh Movafagh, Chongzhou Fang, Hosein Mohammadi Makrani, Kevin Immanuel Gubbi, Abhijit Mahalanobis, Setareh Rafatirad, Hossein Sayadi, Houman Homayoun

FaRAccel: FPGA 기반의 Transformer 모델을 위한 비트 플립 공격 방어 하드웨어 가속기

개요

FaRAccel은 Transformer 기반 모델에 대한 비트 플립 공격(BFA)에 대한 방어를 위해 설계된 FPGA 기반 하드웨어 가속기입니다. 이는 동적 리와이어링을 통해 중요한 파라미터를 난독화하여 BFA에 강한 저항성을 보이는 FaR(Forget and Rewire) 방법을 FPGA에 구현하여 성능 및 메모리 오버헤드를 줄이는 것을 목표로 합니다. FaRAccel은 동적 활성화 경로 재라우팅을 위한 재구성 가능한 로직과 리와이어링 구성을 위한 경량 스토리지를 통합하여 낮은 지연 시간과 에너지 효율적인 추론을 가능하게 합니다.

시사점, 한계점

FaR 방법의 추론 지연 시간을 크게 줄이고 에너지 효율성을 향상시킴
Transformer 모델의 BFA 방어 능력을 유지하면서 하드웨어 가속화 성공
실제 AI 플랫폼에서 알고리즘적 강인성과 효율적인 배포 사이의 격차를 해소
FPGA 기반 구현의 특성상 특정 하드웨어 환경에서만 동작 가능
FaR 방법 자체의 성능 저하 및 메모리 오버헤드는 완전히 해결되지 않음
다른 유형의 공격에 대한 방어 능력은 추가 연구가 필요함
👍