본 논문은 의료, 기후 모델링, 금융과 같은 실제 응용 분야에서 자주 발생하는 불규칙하고 다중 모드이며 지저분한 시계열 데이터(샘플링 속도가 다르고, 비동기적 모드이며, 누락된 데이터가 널리 퍼져 있음) 문제를 해결하기 위해, 원인에 의한 불규칙성을 포착하도록 특별히 설계된 Time-IMM 데이터셋을 제시한다. Time-IMM은 트리거 기반, 제약 기반, 인공물 기반 메커니즘으로 분류된 9가지 유형의 시계열 불규칙성을 나타낸다. 이 데이터셋과 함께, 불규칙한 다중 모드 시계열 예측을 위한 벤치마크 라이브러리인 IMM-TSF를 소개한다. IMM-TSF는 시간 스탬프-텍스트 융합 모듈과 다중 모드 융합 모듈을 포함한 특수 융합 모듈을 포함하며, 최신성을 고려한 평균화 및 어텐션 기반 통합 전략을 모두 지원한다. 실험 결과는 불규칙한 시계열 데이터에서 다중 모드를 명시적으로 모델링하면 예측 성능이 크게 향상됨을 보여준다. Time-IMM과 IMM-TSF는 실제 조건에서 시계열 분석을 발전시키기 위한 기반을 제공한다. 데이터셋은 https://www.kaggle.com/datasets/blacksnail789521/time-imm/data 에서, 벤치마크 라이브러리는 https://anonymous.4open.science/r/IMMTSF_NeurIPS2025 에서 접근 가능하다.