Sign In

UltraGS: Real-Time Physically-Decoupled Gaussian Splatting for Ultrasound Novel View Synthesis

Created by
  • Haebom
Category
Empty

μ €μž

Yuezhe Yang, Qingqing Ruan, Wenjie Cai, Yudang Dong, Dexin Yang, Xingbo Dong, Zhe Jin, Yong Dai

πŸ’‘ κ°œμš”

λ³Έ μ—°κ΅¬λŠ” μ œν•œλœ μ‹œμ•Όκ° 문제λ₯Ό κ°€μ§„ 초음파 μ˜μƒμ˜ μƒˆλ‘œμš΄ μ‹œμ  합성을 μœ„ν•΄ Gaussian Splatting을 μ‹€μ‹œκ°„μœΌλ‘œ μ μš©ν•˜λŠ” UltraGS ν”„λ ˆμž„μ›Œν¬λ₯Ό μ œμ•ˆν•©λ‹ˆλ‹€. 물리 기반 음ν–₯ λͺ¨λΈλ§κ³Ό μœ΅ν•©λœ 깊이 인식 Gaussian ν”„λ¦¬λ―Έν‹°λΈŒ 및 κ°€λ³€ μ‹œμ•Όκ° ν•™μŠ΅μ„ 톡해 μ œμ•½ μ—†λŠ” 탐침 μ›€μ§μž„ ν•˜μ—μ„œμ˜ κΈ°ν•˜ν•™μ  일관성을 ν–₯μƒμ‹œμΌ°μŠ΅λ‹ˆλ‹€. λ˜ν•œ, λ―ΈλΆ„ κ°€λŠ₯ν•œ 음ν–₯ λ Œλ”λ§ 기법인 PD Rendering을 κ°œλ°œν•˜μ—¬ 효율적인 강도 합성을 λ‹¬μ„±ν–ˆμœΌλ©°, μ‹€μ œ μž„μƒ ν™˜κ²½μ—μ„œ νšλ“ν•œ 데이터셋을 기반으둜 GPU 단일 ν™˜κ²½μ—μ„œ μ‹€μ‹œκ°„(64.69 fps) μ²˜λ¦¬κ°€ κ°€λŠ₯ν•œ λ™μ‹œμ— 졜고 μˆ˜μ€€μ˜ PSNR(29.55) 및 SSIM(0.89) μ„±λŠ₯을 λ‹¬μ„±ν–ˆμŠ΅λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
κΈ°μ‘΄ Gaussian Splatting κΈ°μˆ μ„ 초음파 μ˜μƒμ˜ μƒˆλ‘œμš΄ μ‹œμ  합성에 μ„±κ³΅μ μœΌλ‘œ μ μš©ν•˜μ—¬ μ‹€μ‹œκ°„ 처리 μ„±λŠ₯κ³Ό μ˜μƒ ν’ˆμ§ˆμ„ λ™μ‹œμ— ν–₯μƒμ‹œμΌ°μŠ΅λ‹ˆλ‹€.
β€’
물리 기반 음ν–₯ λͺ¨λΈλ§κ³Ό ν•™μŠ΅ κ°€λŠ₯ν•œ κΈ°ν•˜ν•™μ  ν‘œν˜„μ„ κ²°ν•©ν•˜μ—¬ 탐침 μ›€μ§μž„μ˜ λΆˆν™•μ‹€μ„± μ†μ—μ„œλ„ 일관성 μžˆλŠ” 3D 초음파 μ˜μƒ 생성이 κ°€λŠ₯ν•΄μ‘ŒμŠ΅λ‹ˆλ‹€.
β€’
μ‹€μ œ μž„μƒ 데이터λ₯Ό ν™œμš©ν•œ 검증을 톡해 μ œμ•ˆ λ°©λ²•λ‘ μ˜ μ‹€μš©μ„±κ³Ό μš°μˆ˜μ„±μ„ μž…μ¦ν•˜μ˜€μœΌλ©°, μ˜€ν”ˆμ†ŒμŠ€ 곡개λ₯Ό 톡해 κ΄€λ ¨ 연ꡬ 및 개발 ν™œμ„±ν™”μ— κΈ°μ—¬ν•  κ²ƒμœΌλ‘œ κΈ°λŒ€λ©λ‹ˆλ‹€.
β€’
PD Renderingμ—μ„œ κ³ λ €ν•˜λŠ” μ €μ°¨ ꡬ면 μ‘°ν™” ν•¨μˆ˜μ™€ 1μ°¨ νŒŒλ™ 효과 외에 더 λ³΅μž‘ν•œ 음ν–₯ ν˜„μƒ(예: λ°˜μ‚¬, 회절)을 λͺ¨λΈλ§ν•˜λŠ” 것은 ν–₯ν›„ 과제둜 λ‚¨μŠ΅λ‹ˆλ‹€.
πŸ‘