Sign In

SALIENT: Frequency-Aware Paired Diffusion for Controllable Long-Tail CT Detection

Created by
  • Haebom
Category
Empty

์ €์ž

Yifan Li, Mehrdad Salimitari, Taiyu Zhang, Guang Li, David Dreizin

๐Ÿ’ก ๊ฐœ์š”

๋ณธ ๋…ผ๋ฌธ์€ ๊ทน์‹ฌํ•œ ํด๋ž˜์Šค ๋ถˆ๊ท ํ˜•๊ณผ ๋‚ฎ์€ ํƒ€๊ฒŸ-๋ณผ๋ฅจ ๋น„์œจ๋กœ ์ธํ•ด ํฌ๊ท€ ๋ณ‘๋ณ€ ํƒ์ง€์— ์–ด๋ ค์›€์„ ๊ฒช๋Š” ์ „์‹  CT ์˜์ƒ์˜ ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ณ ์ž ํ•ฉ๋‹ˆ๋‹ค. SALIENT๋Š” ๋งˆ์Šคํฌ ์กฐ๊ฑด๋ถ€ ์›จ์ด๋ธ”๋ฆฟ ์˜์—ญ ํ™•์‚ฐ ๋ชจ๋ธ์„ ์‚ฌ์šฉํ•˜์—ฌ ์ œ์–ด ๊ฐ€๋Šฅํ•œ CT ์ฆ๊ฐ•์„ ์œ„ํ•œ ๋ณ‘๋ ฌ ๋ณ‘๋ณ€-๋งˆ์Šคํ‚น ๋ณผ๋ฅจ์„ ํ•ฉ์„ฑํ•ฉ๋‹ˆ๋‹ค. ํ”ฝ์…€ ๊ณต๊ฐ„์ด ์•„๋‹Œ ์›จ์ด๋ธ”๋ฆฟ ๊ณ„์ˆ˜ ์ƒ์—์„œ ๊ตฌ์กฐ์  ๋””ํ…Œ์ผ์„ ๋ถ„๋ฆฌํ•˜์—ฌ ๋ช…์•”์„ ์ œ์–ดํ•˜๋ฉฐ, ์ด๋ฅผ ํ†ตํ•ด ํฌ๊ท€ ๋ณ‘๋ณ€ ํƒ์ง€ ์„ฑ๋Šฅ์„ ํšจ๊ณผ์ ์œผ๋กœ ๊ฐœ์„ ํ•ฉ๋‹ˆ๋‹ค.

๐Ÿ”‘ ์‹œ์‚ฌ์  ๋ฐ ํ•œ๊ณ„

โ€ข
์ฃผ์š” ์‹œ์‚ฌ์  1: ์›จ์ด๋ธ”๋ฆฟ ์˜์—ญ์—์„œ์˜ ํ™•์‚ฐ ๋ชจ๋ธ ์ ์šฉ์€ ํ”ฝ์…€ ๊ณต๊ฐ„ ํ™•์‚ฐ์˜ ๊ณ„์‚ฐ ๋น„์šฉ์„ ์ ˆ๊ฐํ•˜๋ฉด์„œ๋„, ์ €์ฃผํŒŒ ๋ฐ๊ธฐ ์ •๋ณด์™€ ๊ณ ์ฃผํŒŒ ๊ตฌ์กฐ์  ๋””ํ…Œ์ผ์„ ๋ช…ํ™•ํ•˜๊ฒŒ ๋ถ„๋ฆฌํ•˜์—ฌ ๋ณด๋‹ค ๊ตฌ์กฐ์ ์ด๊ณ  ์ œ์–ด ๊ฐ€๋Šฅํ•œ ๋ฐ์ดํ„ฐ ์ฆ๊ฐ•์„ ๊ฐ€๋Šฅํ•˜๊ฒŒ ํ•ฉ๋‹ˆ๋‹ค.
โ€ข
์ฃผ์š” ์‹œ์‚ฌ์  2: ๋นˆ๋„ ์ธ์‹ ๋ชฉํ‘œ ํ•จ์ˆ˜๋ฅผ ํ†ตํ•ด ๋ณ‘๋ณ€๊ณผ ๋ฐฐ๊ฒฝ ์†์„ฑ(๊ตฌ์กฐ, ๋Œ€๋น„, ์—ฃ์ง€ ์ถฉ์‹ค๋„)์„ ๋ถ„๋ฆฌํ•จ์œผ๋กœ์จ, ํ•ด์„ ๊ฐ€๋Šฅํ•˜๊ณ  ์•ˆ์ •์ ์ธ ์ตœ์ ํ™”๋ฅผ ๋‹ฌ์„ฑํ•˜์—ฌ ๋ฐ์ดํ„ฐ ์ฆ๊ฐ•์˜ ํ’ˆ์งˆ๊ณผ ์‹ ๋ขฐ์„ฑ์„ ๋†’์ž…๋‹ˆ๋‹ค.
โ€ข
ํ•œ๊ณ„์  ๋˜๋Š” ํ–ฅํ›„ ๊ณผ์ œ: ์ œ์•ˆ๋œ ๋ฐฉ๋ฒ•์€ ํ•™์Šต ๋ฐ์ดํ„ฐ์˜ ํฌ๊ธฐ์— ๋”ฐ๋ผ ์ตœ์ ์˜ ํ•ฉ์„ฑ ๋น„์œจ์ด ๋‹ฌ๋ผ์ง์„ ๋ณด์—ฌ์ฃผ๋ฉฐ, ํŠนํžˆ ๋ ˆ์ด๋ธ”์ด ์ ์€ ์ €์ฃผํŒŒ ์กฐ๊ฑด์—์„œ ์ด๋Ÿฌํ•œ ์‹œ๋“œ ์˜์กด์ ์ธ ์ฆ๊ฐ• ๋ฐฉ์‹์ด ๋”์šฑ ์ค‘์š”ํ•ด์ง‘๋‹ˆ๋‹ค. ํ–ฅํ›„ ์—ฐ๊ตฌ์—์„œ๋Š” ์ด๋Ÿฌํ•œ ์‹œ๋“œ ์˜์กด์„ฑ์„ ๋”์šฑ ์„ธ๋ฐ€ํ•˜๊ฒŒ ์ œ์–ดํ•˜๊ณ  ์ผ๋ฐ˜ํ™” ์„ฑ๋Šฅ์„ ๋†’์ด๋Š” ๋ฐฉ์•ˆ์ด ํ•„์š”ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
๐Ÿ‘