Sign In

Privacy Preserving and Robust Aggregation for Cross-Silo Federated Learning in Non-IID Settings

Created by
  • Haebom
Category
Empty

저자

Marco Arazzi, Mert Cihangiroglu, Antonino Nocera

개요

본 논문은 연합 학습에서 가장 널리 사용되는 집계 전략인 연합 평균화(Federated Averaging, FedAvg)의 한계점을 해결하기 위해 클래스 인식 기울기 마스킹(class-aware gradient masking)을 도입한 새로운 집계 전략을 제안합니다. FedAvg는 비IID(Non-IID) 데이터 설정에서 성능이 저하되고, 개인 정보 보호 위험이 있는 메타데이터 전송에 의존한다는 단점이 있습니다. 제안된 방법은 추가적인 클라이언트 메타데이터 없이 기울기 업데이트만을 사용하여 개인 정보 보호를 강화하고, 클래스별 중요도에 따라 클라이언트 기여도를 동적으로 가중치를 부여하여 비IID 분포, 수렴 방지 및 백도어 공격에 대한 강건성을 보장합니다. 벤치마크 데이터셋에 대한 실험 결과, 제안된 방법이 비IID 설정에서 FedAvg 및 다른 일반적인 집계 전략보다 우수한 성능을 보이며, 적대적 시나리오에서도 모델 무결성을 유지함을 보여줍니다.

시사점, 한계점

시사점:
클래스 인식 기울기 마스킹을 통해 비IID 데이터 설정에서 연합 학습의 성능을 향상시킬 수 있음을 보여줍니다.
메타데이터 전송 없이 개인 정보 보호를 강화하는 새로운 집계 전략을 제시합니다.
백도어 공격에 대한 강건성을 확보하여 모델 무결성을 유지합니다.
기존 연합 평균화보다 향상된 성능과 보안성을 제공합니다.
한계점:
제안된 방법의 실제 환경 적용에 대한 추가적인 연구가 필요합니다.
다양한 비IID 데이터 분포에 대한 일반화 성능 평가가 더 필요합니다.
클래스별 중요도를 결정하는 방법에 대한 세부적인 설명이 부족할 수 있습니다.
특정 유형의 공격에 대한 취약성 여부에 대한 추가적인 분석이 필요합니다.
👍