Sign In

Brain-OF: An Omnifunctional Foundation Model for fMRI, EEG and MEG

Created by
  • Haebom
Category
Empty

μ €μž

Hanning Guo, Farah Abdellatif, Hanwen Bi, Andrei Galbenus, Jon. N. Shah, Abigail Morrison, Jurgen Dammers

πŸ’‘ κ°œμš”

λ³Έ 논문은 fMRI, EEG, MEG μ„Έ 가지 λ‡Œ μ‹ ν˜Έ λͺ¨λ‹¬λ¦¬ν‹°λ₯Ό ν†΅ν•©ν•˜μ—¬ λ‡Œ μ˜μƒ 데이터λ₯Ό μœ„ν•œ 졜초의 λ‹€κΈ°λŠ₯ 기반 λͺ¨λΈμΈ Brain-OFλ₯Ό μ œμ•ˆν•©λ‹ˆλ‹€. μ„œλ‘œ λ‹€λ₯Έ μ‹œκ³΅κ°„ 해상도λ₯Ό 가진 λ‡Œ μ‹ ν˜Έλ“€μ„ 곡유 의미 κ³΅κ°„μœΌλ‘œ νˆ¬μ˜ν•˜λŠ” Any-Resolution Neural Signal Sampler와 λͺ¨λ‹¬λ¦¬ν‹° λΆˆλ³€/특이적 ν‘œν˜„μ„ ν•™μŠ΅ν•˜λŠ” DINT attention 및 Sparse Mixture of Expertsλ₯Ό 톡해 이질적인 λ‡Œ μ‹ ν˜Έλ₯Ό 효과적으둜 μ²˜λ¦¬ν•©λ‹ˆλ‹€. λ˜ν•œ, μ‹œκ°„ 및 주파수 μ˜μ—­ λͺ¨λ‘μ—μ„œ λ‡Œ μ‹ ν˜Έλ₯Ό μž¬κ΅¬μ„±ν•˜λŠ” Masked Temporal-Frequency Modelingμ΄λΌλŠ” 이쀑 μ˜μ—­ 사전 ν•™μŠ΅ λͺ©ν‘œλ₯Ό λ„μž…ν•˜μ—¬, λŒ€κ·œλͺ¨ 닀쀑 λͺ¨λ‹¬λ¦¬ν‹° λ°μ΄ν„°μ…‹μœΌλ‘œ 사전 ν•™μŠ΅λœ Brain-OFλŠ” λ‹€μ–‘ν•œ ν•˜μœ„ μž‘μ—…μ—μ„œ λ›°μ–΄λ‚œ μ„±λŠ₯을 λ³΄μž…λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
λ‹€μ–‘ν•œ λ‡Œ μ‹ ν˜Έ λͺ¨λ‹¬λ¦¬ν‹°(fMRI, EEG, MEG)λ₯Ό 단일 ν”„λ ˆμž„μ›Œν¬μ—μ„œ ν†΅ν•©ν•˜μ—¬ μ‹œκ³΅κ°„μ  μ—­ν•™ 및 데이터 규λͺ¨λ₯Ό μ΅œλŒ€ν•œ ν™œμš©ν•  수 μžˆμŠ΅λ‹ˆλ‹€.
β€’
이질적인 λ‡Œ μ‹ ν˜Έ 해상도 문제λ₯Ό ν•΄κ²°ν•˜κΈ° μœ„ν•œ ν˜μ‹ μ μΈ μƒ˜ν”Œλ§ 기법과 효과적인 사전 ν•™μŠ΅ 방법둠을 μ œμ‹œν•©λ‹ˆλ‹€.
β€’
닀쀑 λͺ¨λ‹¬λ¦¬ν‹° 톡합 및 이쀑 μ˜μ—­ 사전 ν•™μŠ΅μ΄ λ‡Œ μ‹ κ²½κ³Όν•™ μž‘μ—…μ—μ„œ λšœλ ·ν•œ μ„±λŠ₯ ν–₯상을 κ°€μ Έμ˜΄μ„ μž…μ¦ν•©λ‹ˆλ‹€.
β€’
μ‹€μ œ μž„μƒ ν™˜κ²½μ—μ„œμ˜ 적용 κ°€λŠ₯성을 κ²€μ¦ν•˜κ³ , νŠΉμ • λ‡Œ μ§ˆν™˜μ— λŒ€ν•œ νŠΉν™”λœ μ„±λŠ₯을 ν‰κ°€ν•˜λŠ” μΆ”κ°€ 연ꡬ가 ν•„μš”ν•©λ‹ˆλ‹€.
πŸ‘
Made with Slashpage