Sign In

H3M-SSMoEs: Hypergraph-based Multimodal Learning with LLM Reasoning and Style-Structured Mixture of Experts

Created by
  • Haebom
Category
Empty

저자

Peilin Tan, Liang Xie, Churan Zhi, Dian Tu, Chuanqi Shi

개요

본 논문은 복잡한 시간 종속성, 이질적인 양상, 그리고 동적으로 변화하는 주식 간 관계 때문에 근본적으로 어려운 주가 예측 문제를 해결하기 위해 H3M-SSMoEs라는 새로운 아키텍처를 제시합니다. 이 아키텍처는 세 가지 핵심 혁신을 통합합니다: (1) Local Context Hypergraph (LCH)와 Global Context Hypergraph (GCH)를 사용하여 세밀한 시공간적 동역학을 포착하는 Multi-Context Multimodal Hypergraph, (2) 정량적 및 텍스트 양상을 의미적으로 융합하고 정렬하기 위해 사전 학습된 대규모 언어 모델을 활용하는 LLM 기반 추론 모듈, (3) 희소 활성화 하에서 regime-aware 특화를 가능하게 하는 Style-Structured Mixture of Experts (SSMoEs). 세 개의 주요 주식 시장에 대한 광범위한 실험을 통해 H3M-SSMoEs는 예측 정확도 및 투자 성과 면에서 최첨단 방법을 능가하며 효과적인 위험 관리를 보여줍니다.

시사점, 한계점

시사점:
Multi-Context Multimodal Hypergraph를 통해 세밀한 시공간적 동역학 및 주식 간 의존성을 효과적으로 포착.
LLM 기반 추론 모듈을 활용하여 도메인 관련 지식을 통합하고 다양한 양상을 융합.
SSMoEs를 통해 regime-aware 특화 및 시장 변동성에 대응.
우수한 예측 정확도 및 투자 성과를 달성하며 위험 관리 측면에서도 효과적임.
데이터 세트, 소스 코드 및 모델 가중치를 공개하여 연구의 재현성 및 활용성 증대.
한계점:
LLM 사용으로 인한 계산 비용 및 모델 복잡성 증가 가능성.
다양한 시장 상황에 대한 일반화 성능 추가 검증 필요.
하이퍼파라미터 튜닝의 민감도 및 최적화 전략에 대한 추가 연구 필요.
👍