Sign In

EndoVGGT: GNN-Enhanced Depth Estimation for Surgical 3D Reconstruction

์ž‘์„ฑ์ž
  • Haebom
์นดํ…Œ๊ณ ๋ฆฌ
Empty

์ €์ž

Falong Fan, Yi Xie, Arnis Lektauers, Bo Liu, Jerzy Rozenblit

๐Ÿ’ก ๊ฐœ์š”

๋ณธ ๋…ผ๋ฌธ์€ ์ˆ˜์ˆ  ๋กœ๋ด‡์˜ ์ธ์‹์„ ์œ„ํ•ด ํ•„์ˆ˜์ ์ธ ๋ณ€ํ˜• ๊ฐ€๋Šฅํ•œ ์—ฐ์กฐ์ง์˜ ์ •ํ™•ํ•œ 3D ์žฌ๊ตฌ์„ฑ์— ๋Œ€ํ•œ ์–ด๋ ค์›€์„ ํ•ด๊ฒฐํ•ฉ๋‹ˆ๋‹ค. ๊ธฐ์กด์˜ ๊ณ ์ •๋œ ์œ„์ƒ ๋ฐฉ์‹์ด ๋‚ฎ์€ ์งˆ๊ฐ, ๋ฐ˜์‚ฌ๊ด‘, ๋„๊ตฌ ์ฐจํ๋กœ ์ธํ•œ ๊ธฐํ•˜ํ•™์  ์—ฐ์†์„ฑ ๋‹จ์ ˆ ๋ฌธ์ œ๋ฅผ ๊ฒช๋Š” ๋ฐ˜๋ฉด, ์ œ์•ˆ๋œ EndoVGGT๋Š” ๋™์ ์œผ๋กœ ํŠน์ง• ๊ณต๊ฐ„ ์˜๋ฏธ๋ก ์  ๊ทธ๋ž˜ํ”„๋ฅผ ๊ตฌ์ถ•ํ•˜๋Š” DeGAT ๋ชจ๋“ˆ์„ ํ†ตํ•ด ์žฅ๊ฑฐ๋ฆฌ ์ƒ๊ด€๊ด€๊ณ„๋ฅผ ํฌ์ฐฉํ•ฉ๋‹ˆ๋‹ค. ์ด๋ฅผ ํ†ตํ•ด occlusion์„ ๋„˜์–ด ๊ตฌ์กฐ์  ํ๋ฅผ ๊ฒฌ๊ณ ํ•˜๊ฒŒ ์ „ํŒŒํ•˜๊ณ  ์ „์—ญ์  ์ผ๊ด€์„ฑ์„ ๊ฐ•ํ™”ํ•˜์—ฌ ๋น„๊ฐ•์ฒด ๋ณ€ํ˜• ๋ณต๊ตฌ๋ฅผ ๊ฐœ์„ ํ•ฉ๋‹ˆ๋‹ค.

๐Ÿ”‘ ์‹œ์‚ฌ์  ๋ฐ ํ•œ๊ณ„

โ€ข
DeGAT ๋ชจ๋“ˆ์„ ํ†ตํ•ด ํŠน์ง• ๊ณต๊ฐ„์—์„œ ๋™์ ์œผ๋กœ ๊ทธ๋ž˜ํ”„๋ฅผ ๊ตฌ์ถ•ํ•˜์—ฌ ๊ธฐ์กด์˜ ๊ณ ์ •๋œ ์ด์›ƒ ๋ฐฉ์‹์˜ ํ•œ๊ณ„๋ฅผ ๊ทน๋ณตํ•˜๊ณ  ์žฅ๊ฑฐ๋ฆฌ ์ƒ๊ด€๊ด€๊ณ„๋ฅผ ํšจ๊ณผ์ ์œผ๋กœ ํฌ์ฐฉํ•ฉ๋‹ˆ๋‹ค.
โ€ข
occlusion ์ƒํ™ฉ์—์„œ๋„ ๊ตฌ์กฐ์  ์ •๋ณด๋ฅผ ๊ฒฌ๊ณ ํ•˜๊ฒŒ ์ „ํŒŒํ•˜์—ฌ 3D ์žฌ๊ตฌ์„ฑ์˜ ์ „์—ญ์  ์ผ๊ด€์„ฑ์„ ๋†’์ด๊ณ  ๋น„๊ฐ•์ฒด ๋ณ€ํ˜• ๋ณต๊ตฌ ์„ฑ๋Šฅ์„ ํฌ๊ฒŒ ํ–ฅ์ƒ์‹œํ‚ต๋‹ˆ๋‹ค.
โ€ข
SCARED ๋ฐ์ดํ„ฐ์…‹์—์„œ ์ด์ „ ์ตœ์‹  ๊ธฐ๋ฒ• ๋Œ€๋น„ PSNR 24.6%, SSIM 9.1% ํ–ฅ์ƒ์„ ๋‹ฌ์„ฑํ–ˆ์œผ๋ฉฐ, SCARED์™€ EndoNeRF ๋ฐ์ดํ„ฐ์…‹ ๋ชจ๋‘์—์„œ ์šฐ์ˆ˜ํ•œ ์ œ๋กœ์ƒท ๊ต์ฐจ ๋ฐ์ดํ„ฐ์…‹ ์ผ๋ฐ˜ํ™” ์„ฑ๋Šฅ์„ ๋ณด์—ฌ์ฃผ์—ˆ์Šต๋‹ˆ๋‹ค.
โ€ข
DeGAT ๋ชจ๋“ˆ์ด ๋„๋ฉ”์ธ์— ๊ตฌ์• ๋ฐ›์ง€ ์•Š๋Š” ๊ธฐํ•˜ํ•™์  ์‚ฌ์ „ ์ •๋ณด๋ฅผ ํ•™์Šตํ•จ์„ ํ™•์ธํ•˜์˜€์œผ๋‚˜, ๋ณต์žกํ•˜๊ณ  ๋™์ ์ธ ์ˆ˜์ˆ  ํ™˜๊ฒฝ์—์„œ์˜ ์ถ”๊ฐ€์ ์ธ ๊ฒ€์ฆ ๋ฐ ์‹ค์ œ ์ ์šฉ ๊ฐ€๋Šฅ์„ฑ์— ๋Œ€ํ•œ ์—ฐ๊ตฌ๊ฐ€ ํ•„์š”ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
๐Ÿ‘
Made with Slashpage