Sign In

FineVision: Open Data Is All You Need

์ž‘์„ฑ์ž
  • Haebom
์นดํ…Œ๊ณ ๋ฆฌ
Empty

์ €์ž

Luis Wiedmann, Orr Zohar, Amir Mahla, Xiaohan Wang, Rui Li, Thibaud Frere, Leandro von Werra, Aritra Roy Gosthipaty, Andres Marafioti

๐Ÿ’ก ๊ฐœ์š”

๋ณธ ๋…ผ๋ฌธ์€ ํŒŒํŽธํ™”๋˜๊ณ  ์˜ค์—ผ๋œ ๊ณต๊ฐœ ๋ฐ์ดํ„ฐ์…‹์œผ๋กœ ์ธํ•ด ๋น„์ „-์–ธ์–ด ๋ชจ๋ธ(VLM)์˜ ๋ฐœ์ „์ด ๋”๋ŽŒ์ง€๋Š” ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•ด, 2400๋งŒ ๊ฐœ์˜ ์ƒ˜ํ”Œ๋กœ ๊ตฌ์„ฑ๋œ ๋Œ€๊ทœ๋ชจ์˜ ํ†ต์ผ๋œ ๊ณต๊ฐœ ๋ฐ์ดํ„ฐ์…‹์ธ FineVision์„ ์ œ์•ˆํ•ฉ๋‹ˆ๋‹ค. 200๊ฐœ ์ด์ƒ์˜ ์†Œ์Šค๋ฅผ ๋ฐ˜์ž๋™ํ™”๋œ ํœด๋จผ ์ธ ๋” ๋ฃจํ”„ ํŒŒ์ดํ”„๋ผ์ธ์„ ํ†ตํ•ด ํ†ตํ•ฉํ•˜๊ณ , ์—„๊ฒฉํ•œ ์ค‘๋ณต ์ œ๊ฑฐ ๋ฐ ์˜ค์—ผ ์ œ๊ฑฐ ๊ณผ์ •์„ ๊ฑฐ์ณ ๋ฐ์ดํ„ฐ ํ’ˆ์งˆ์„ ๋†’์˜€์Šต๋‹ˆ๋‹ค. FineVision์œผ๋กœ ํ•™์Šต๋œ ๋ชจ๋ธ์€ ๊ธฐ์กด ๋ฐ์ดํ„ฐ์…‹์œผ๋กœ ํ•™์Šต๋œ ๋ชจ๋ธ๋ณด๋‹ค ์šฐ์ˆ˜ํ•œ ์„ฑ๋Šฅ์„ ๋ณด์˜€์œผ๋ฉฐ, ์ด๋Š” ๋Œ€๊ทœ๋ชจ, ๋†’์€ ๋ฐ์ดํ„ฐ ์œ„์ƒ, ์ธ๊ฐ„์˜ ๊ฐ๋…์ด ๊ท ํ˜• ์žกํžŒ ์ž๋™ํ™”์˜ ์ด์ ์„ ๋ณด์—ฌ์ค๋‹ˆ๋‹ค.

๐Ÿ”‘ ์‹œ์‚ฌ์  ๋ฐ ํ•œ๊ณ„

โ€ข
FineVision์€ VLM ์—ฐ๊ตฌ์— ํ•„์š”ํ•œ ๋Œ€๊ทœ๋ชจ์˜ ๊ณ ํ’ˆ์งˆ ๊ณต๊ฐœ ๋ฐ์ดํ„ฐ์…‹์„ ์ œ๊ณตํ•˜์—ฌ ๋ฐ์ดํ„ฐ ์ค‘์‹ฌ VLM ์—ฐ๊ตฌ๋ฅผ ๊ฐ€์†ํ™”ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
โ€ข
๋ฐ˜์ž๋™ํ™”๋œ ํœด๋จผ ์ธ ๋” ๋ฃจํ”„ ํŒŒ์ดํ”„๋ผ์ธ์€ ๋Œ€๊ทœ๋ชจ ๋ฐ์ดํ„ฐ์…‹ ๊ตฌ์ถ•์˜ ํšจ์œจ์„ฑ๊ณผ ๋ฐ์ดํ„ฐ ํ’ˆ์งˆ์„ ๋™์‹œ์— ํ™•๋ณดํ•˜๋Š” ํšจ๊ณผ์ ์ธ ๋ฐฉ๋ฒ•๋ก ์ž„์„ ์ž…์ฆํ•ฉ๋‹ˆ๋‹ค.
โ€ข
์—์ด์ „ํŠธ/GUI ์ž‘์—…์— ๋Œ€ํ•œ ํ†ตํ•ฉ๋œ ์•ก์…˜ ์ŠคํŽ˜์ด์Šค๋ฅผ ์ œ๊ณตํ•จ์œผ๋กœ์จ, VLM์˜ ์‹ค์งˆ์ ์ธ ์ ์šฉ ๋ฒ”์œ„๋ฅผ ๋„“ํžˆ๋Š” ๋ฐ ๊ธฐ์—ฌํ•ฉ๋‹ˆ๋‹ค.
โ€ข
๋…ผ๋ฌธ์—์„œ ์ œ์‹œ๋œ ํœด๋จผ ์ธ ๋” ๋ฃจํ”„ ํŒŒ์ดํ”„๋ผ์ธ์˜ ์ธ์  ์ž์› ์š”๊ตฌ ์‚ฌํ•ญ ๋ฐ ๊ตฌ์ถ• ๋น„์šฉ์— ๋Œ€ํ•œ ๊ตฌ์ฒด์ ์ธ ๋ถ„์„์ด ๋ถ€์กฑํ•ฉ๋‹ˆ๋‹ค.
โ€ข
66๊ฐœ์˜ ๊ณต๊ฐœ ๋ฒค์น˜๋งˆํฌ์— ๋Œ€ํ•œ ์˜ค์—ผ ์ œ๊ฑฐ์—๋„ ๋ถˆ๊ตฌํ•˜๊ณ , ์ž ์žฌ์ ์ธ ๋ฏธํ™•์ธ๋œ ์˜ค์—ผ์›์˜ ์กด์žฌ ๊ฐ€๋Šฅ์„ฑ์€ ์—ฌ์ „ํžˆ ๋‚จ์•„์žˆ์Šต๋‹ˆ๋‹ค.
๐Ÿ‘
Made with Slashpage