haebom
Sign In
UCSF-PDGM-VQA: Visual Question Answering dataset for brain tumor MRI interpretation
μμ±μ
Haebom
μΉ΄ν κ³ λ¦¬
Empty
μ μ
Shiv Ghosh, Junayd Lateef, Chih-Hua Liu, Yannan Yu, Andreas M. Rauschecker, Madhumita Sushil
π‘ κ°μ
λ³Έ λ Όλ¬Έμ λμ’ μ MRI νλ μ μ΄λ €μμ ν΄κ²°νκΈ° μν΄ μμμ μΌλ‘ κ΄λ ¨μ± λμ μκ°μ μ§μμλ΅(VQA) λ²€μΉλ§ν¬μΈ UCSF-PDGM-VQA λ°μ΄ν°μ μ μ μν©λλ€. μ΄ λ°μ΄ν°μ μ 473건μ κ΅λͺ¨μΈν¬μ’ κ΄λ ¨ MRI μ°κ΅¬μμ μΆμΆν 2,387κ°μ μ§μμλ΅ μμΌλ‘ ꡬμ±λ©λλ€. μ΅μ VLM λ° LLMμ μ±λ₯μ νκ°ν κ²°κ³Ό, νμ¬ λͺ¨λΈλ€μ λ€μ€ μνμ€ 3μ°¨μ MRIλ₯Ό ν¨κ³Όμ μΌλ‘ μ²λ¦¬νμ§ λͺ»νλ©° μκ°μ νΉμ§ μΆμΆμ΄ λΆμ‘±νκ³ μΈμ΄μ μ¬μ μ 보μ κ³Όλνκ² μμ‘΄νλ κ²½ν₯μ 보μμ΅λλ€.
π μμ¬μ λ° νκ³
β’
λμ’ μ MRI νλ κ³Ό κ°μ΄ 볡μ‘νκ³ κ³ μ°¨μμ μΈ μλ£ μμ λΆμμ VLMμ μ μ©νκΈ° μν μλ‘μ΄ λ²€μΉλ§ν¬λ₯Ό μ 곡ν©λλ€.
β’
νμ¬ μ¬μ©λλ VLM λ° LLMμ΄ μλ£ μμ, νΉν λ€μ€ μνμ€ 3μ°¨μ MRI μ²λ¦¬ λ₯λ ₯μ μμ΄ μλΉν νκ³λ₯Ό κ°μ§κ³ μμμ μ€μ¦μ μΌλ‘ 보μ¬μ€λλ€.
β’
μλ£ μμ λΆμΌμ νΉμμ±μ κ³ λ €ν, κ²¬κ³ νκ³ λλ©μΈ νΉνλ VLM κ°λ°μ νμμ±μ κ°μ‘°ν©λλ€.
β’
νμ¬ λͺ¨λΈλ€μ μμ νκ²½μμμ μ λ’°μ±κ³Ό μμ μ±μ λν μ¬κ°ν κ²°νμ μ§μ νλ©°, ν₯ν μ°κ΅¬ λ°©ν₯μ μ μν©λλ€.
PDF 보기
Made with Slashpage