Sign In

A Multimodal Framework for Depression Detection during Covid-19 via Harvesting Social Media: A Novel Dataset and Method

Created by
  • Haebom
Category
Empty

저자

Ashutosh Anshul, Gumpili Sai Pranav, Mohammad Zia Ur Rehman, Nagendra Kumar

개요

코로나19 팬데믹 기간 동안 우울증과 같은 정신 건강 문제 증가에 대응하기 위해, 소셜 미디어 데이터를 활용한 우울증 감지 프레임워크를 제안합니다. 이 프레임워크는 텍스트, 사용자별 정보, 이미지 분석을 결합하며, 트윗 내 URL을 활용한 외부 특징과 이미지 내 텍스트 추출을 통해 사용자 감정 상태에 대한 맥락을 제공합니다. 또한, 이미지 임베딩을 생성하는 Visual Neural Network (VNN) 딥러닝 모델을 도입하여 시각적 특징 벡터를 생성합니다. 연구 목적으로 코로나19 관련 우울증 환자 데이터셋을 구축했으며, 제안 모델은 기존 방법보다 우수한 성능을 보였습니다.

시사점, 한계점

시사점:
소셜 미디어 데이터를 활용하여 우울증을 효과적으로 감지할 수 있는 새로운 접근 방식 제시.
텍스트, 사용자 정보, 이미지 분석을 통합하는 다중 모달 프레임워크를 통해 정확도 향상.
VNN 모델을 활용한 이미지 분석으로 시각적 특징 추출의 중요성 강조.
코로나19 관련 우울증 데이터셋 구축 및 모델 성능 검증.
각 모달리티의 영향력 분석을 통해 사용자 정신 건강 상태에 대한 통찰력 제공.
한계점:
기존 방법과의 비교에 대한 구체적인 방법론과 데이터셋 정보 부족.
다양한 소셜 미디어 플랫폼에 대한 일반화 가능성 추가 연구 필요.
모델의 실제 적용 시 개인 정보 보호 및 윤리적 문제 고려 필요.
모델의 복잡성 및 계산 비용에 대한 추가 분석 필요.
👍