Sign In

Geometric 4D Stitching for Grounded 4D Generation

์ž‘์„ฑ์ž
  • Haebom
์นดํ…Œ๊ณ ๋ฆฌ
Empty

์ €์ž

Sunwoo Park, Taesung Kwon, Jong Chul Ye

๐Ÿ’ก ๊ฐœ์š”

๋ณธ ๋…ผ๋ฌธ์€ ๊ธฐ์กด 4D ์ƒ์„ฑ ๋ฐฉ๋ฒ•๋ก ์ด ์”ฌ ๋ ˆ๋ฒจ์˜ ๋ˆ„๋ฝ๋œ ์ •๋ณด๋ฅผ ์ƒ์„ฑ ๋ชจ๋ธ๋กœ ๋ณด์™„ํ•˜๊ณ  radiance ๊ธฐ๋ฐ˜ ํ‘œํ˜„์œผ๋กœ ์žฌ๊ตฌ์„ฑํ•  ๋•Œ ๋ฐœ์ƒํ•˜๋Š” ๊ธฐํ•˜ํ•™์  ๋ถˆ์ผ์น˜ ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ณ ์ž ํ•ฉ๋‹ˆ๋‹ค. ์ด๋ฅผ ์œ„ํ•ด ๊ธฐํ•˜ํ•™์ ์œผ๋กœ ์ ‘์ง€๋œ 4D ์Šคํ‹ฐ์น˜๋กœ ๋ˆ„๋ฝ๋œ ๊ธฐํ•˜ํ•™์  ์˜์—ญ์„ ๋ช…์‹œ์ ์œผ๋กœ ์‹๋ณ„ํ•˜๊ณ  ๋ณด์™„ํ•˜๋Š” 'Geometric 4D Stitching' ํ”„๋ ˆ์ž„์›Œํฌ๋ฅผ ์ œ์•ˆํ•ฉ๋‹ˆ๋‹ค. ๊ฒฐ๊ณผ์ ์œผ๋กœ ์ œ์•ˆ ๋ฐฉ๋ฒ•์€ 10๋ถ„ ์ด๋‚ด์— 4D ์žฅ๋ฉด ํ‘œํ˜„์„ ํšจ์œจ์ ์œผ๋กœ ๊ตฌ์„ฑํ•˜๋ฉฐ ๊ธฐํ•˜ํ•™์  ์ผ๊ด€์„ฑ์„ ํ–ฅ์ƒ์‹œํ‚ต๋‹ˆ๋‹ค.

๐Ÿ”‘ ์‹œ์‚ฌ์  ๋ฐ ํ•œ๊ณ„

โ€ข
๊ธฐ์กด radiance ๊ธฐ๋ฐ˜ 4D ์ƒ์„ฑ ๋ฐฉ์‹์˜ ๊ธฐํ•˜ํ•™์  ๋ถˆ์ผ์น˜ ๋ฌธ์ œ๋ฅผ ๋ช…์‹œ์ ์ธ 4D ์Šคํ‹ฐ์นญ ๊ธฐ๋ฒ•์œผ๋กœ ํ•ด๊ฒฐํ–ˆ์Šต๋‹ˆ๋‹ค.
โ€ข
๋‹จ์ผ GPU์—์„œ 10๋ถ„ ์ด๋‚ด์˜ ๋น ๋ฅธ 4D ์žฅ๋ฉด ์žฌ๊ตฌ์„ฑ์ด ๊ฐ€๋Šฅํ•˜์—ฌ ํšจ์œจ์„ฑ์ด ๋†’์Šต๋‹ˆ๋‹ค.
โ€ข
์ œ์•ˆ๋œ 4D ์Šคํ‹ฐ์นญ์€ 4D ๋ฉ”์‰ฌ์˜ ์ƒํ˜ธ ์ž‘์šฉ์  ํ™•์žฅ์„ ์ง€์›ํ•˜๋ฉฐ, 4D ์žฅ๋ฉด ํŽธ์ง‘ ๊ฐ€๋Šฅ์„ฑ์„ ์—ด์—ˆ์Šต๋‹ˆ๋‹ค.
โ€ข
(ํ•œ๊ณ„์  ๋˜๋Š” ํ–ฅํ›„ ๊ณผ์ œ) ๋…ผ๋ฌธ์—์„œ๋Š” ํšจ์œจ์„ฑ๊ณผ ๊ธฐํ•˜ํ•™์  ์ผ๊ด€์„ฑ ํ–ฅ์ƒ์— ์ดˆ์ ์„ ๋งž์ถ”์—ˆ์œผ๋‚˜, ๋‹ค์–‘ํ•œ ๋ณต์žก์„ฑ์˜ 4D ์žฅ๋ฉด์œผ๋กœ์˜ ์ผ๋ฐ˜ํ™” ์„ฑ๋Šฅ ๋ฐ ์ƒ์„ฑ๋œ 4D ์Šคํ‹ฐ์น˜์˜ ์‚ฌ์‹ค์„ฑ์— ๋Œ€ํ•œ ์ถ”๊ฐ€์ ์ธ ์—ฐ๊ตฌ๊ฐ€ ํ•„์š”ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
๐Ÿ‘