Sign In

COSINT-Agent: A Knowledge-Driven Multimodal Agent for Chinese Open Source Intelligence

Created by
  • Haebom
Category
Empty

저자

Wentao Li, Congcong Wang, Xiaoxiao Cui, Zhi Liu, Wei Guo, Lizhen Cui

개요

본 논문은 중국어 분야의 오픈소스 인텔리전스(OSINT) 과제 해결을 위해 지식 기반 다중 모달 에이전트인 COSINT-Agent를 제안합니다. COSINT-Agent는 미세 조정된 다중 모달 대규모 언어 모델(MLLM)의 지각 능력과 엔티티-이벤트-장면 지식 그래프(EES-KG)의 구조적 추론 능력을 통합합니다. 핵심적인 EES-Match 프레임워크는 COSINT-MLLM과 EES-KG을 연결하여 다중 모달 정보의 체계적인 추출, 추론 및 맥락화를 가능하게 합니다. 실험 결과는 엔티티 인식, EES 생성, 맥락 매칭 등 핵심 OSINT 과제에서 COSINT-Agent의 우수한 성능을 보여주며, 자동화된 다중 모달 추론 및 OSINT 방법론 효율성 향상을 위한 강력하고 확장 가능한 솔루션으로서의 잠재력을 강조합니다.

시사점, 한계점

시사점:
중국어 OSINT 분야에서 다중 모달 데이터의 효과적인 분석 및 활용 가능성 제시.
MLLM과 지식 그래프의 통합을 통한 향상된 추론 능력 및 정확도.
EES-Match 프레임워크의 효율적인 다중 모달 정보 처리 및 맥락화.
자동화된 OSINT 분석 시스템 개발을 위한 새로운 접근 방식 제시.
한계점:
현재 중국어 데이터에 특화되어 있어 다른 언어로의 확장성 검증 필요.
EES-KG의 완전성 및 정확성에 대한 의존도가 높음. 지식 그래프의 부정확성이 결과에 영향을 미칠 수 있음.
실제 OSINT 환경에서의 적용 가능성 및 성능 평가 추가 연구 필요.
COSINT-Agent의 확장성 및 처리 속도에 대한 추가적인 평가가 필요.
👍