Sign In

MedSynapse-V: Bridging Visual Perception and Clinical Intuition via Latent Memory Evolution

์ž‘์„ฑ์ž
  • Haebom
์นดํ…Œ๊ณ ๋ฆฌ
Empty

์ €์ž

Chunzheng Zhu, Jiaqi Zeng, Junyu Jiang, Jianxin Lin, Yijun Wang

๐Ÿ’ก ๊ฐœ์š”

๋ณธ ๋…ผ๋ฌธ์€ ์˜๋ฃŒ ์ด๋ฏธ์ง€ ์ง„๋‹จ ์‹œ ์ „๋ฌธ๊ฐ€์˜ ์•”๋ฌต์  ๊ธฐ์–ต ํ™œ์šฉ ๋Šฅ๋ ฅ์„ ๋ชจ๋ฐฉํ•˜๋Š” MedSynapse-V ํ”„๋ ˆ์ž„์›Œํฌ๋ฅผ ์ œ์•ˆํ•ฉ๋‹ˆ๋‹ค. ๊ธฐ์กด ์˜๋ฃŒ VLM์˜ ์ด์‚ฐ ํ† ํฐํ™”๋กœ ์ธํ•œ ์ •๋ณด ์†์‹ค ๋ฐ ์ „๋ฌธ์„ฑ ๋ถ€์กฑ ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•ด, ์ˆจ๊ฒจ์ง„ ์‹ ๊ฒฝ๋ง ์ŠคํŠธ๋ฆผ ๋‚ด์—์„œ ์•”๋ฌต์  ์ง„๋‹จ ๊ธฐ์–ต์„ ๋™์ ์œผ๋กœ ํ•ฉ์„ฑํ•˜๋Š” ๋ฐฉ์‹์„ ์‚ฌ์šฉํ•ฉ๋‹ˆ๋‹ค. ์ด๋ฅผ ํ†ตํ•ด ๊ธฐ์กด ์ตœ์‹  ๋ฐฉ๋ฒ•๋ก  ๋Œ€๋น„ ์ง„๋‹จ ์ •ํ™•๋„๋ฅผ ํฌ๊ฒŒ ํ–ฅ์ƒ์‹œํ‚ต๋‹ˆ๋‹ค.

๐Ÿ”‘ ์‹œ์‚ฌ์  ๋ฐ ํ•œ๊ณ„

โ€ข
์˜๋ฃŒ VLM์ด ์ „๋ฌธ๊ฐ€์˜ ๊ฒฝํ—˜์  ๊ธฐ์–ต์„ ํšจ๊ณผ์ ์œผ๋กœ ํ•™์Šตํ•˜๊ณ  ํ™œ์šฉํ•  ์ˆ˜ ์žˆ๋Š” ์ƒˆ๋กœ์šด ์ ‘๊ทผ ๋ฐฉ์‹์„ ์ œ์‹œํ•ฉ๋‹ˆ๋‹ค.
โ€ข
์•”๋ฌต์  ๊ธฐ์–ต์˜ ํ•ฉ์„ฑ๊ณผ ์ •์ œ๋ฅผ ํ†ตํ•ด ์ง„๋‹จ ๋…ผ๋ฆฌ์™€ ์ผ์น˜ํ•˜๋Š” ์ž ์žฌ ํ‘œํ˜„์„ ๊ตฌ์ถ•ํ•˜์—ฌ, ๋ณต์žกํ•œ ์˜๋ฃŒ ์ง„๋‹จ ๋ฌธ์ œ ํ•ด๊ฒฐ์— ๊ธฐ์—ฌํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
โ€ข
์ œ์•ˆ๋œ ํ”„๋ ˆ์ž„์›Œํฌ์˜ ๋ณต์žก์„ฑ๊ณผ ๊ณ„์‚ฐ๋Ÿ‰, ๊ทธ๋ฆฌ๊ณ  ์‹ค์ œ ์ž„์ƒ ํ™˜๊ฒฝ์—์„œ์˜ ์ ์šฉ ๊ฐ€๋Šฅ์„ฑ์— ๋Œ€ํ•œ ์ถ”๊ฐ€ ์—ฐ๊ตฌ๊ฐ€ ํ•„์š”ํ•ฉ๋‹ˆ๋‹ค.
๐Ÿ‘