Sign In

MegaRAG: Multimodal Knowledge Graph-Based Retrieval Augmented Generation

Created by
  • Haebom
Category
Empty

์ €์ž

Chi-Hsiang Hsiao, Yi-Cheng Wang, Tzung-Sheng Lin, Yi-Ren Yeh, Chu-Song Chen

๐Ÿ’ก ๊ฐœ์š”

์ด ๋…ผ๋ฌธ์€ ๊ธฐ์กด ํ…์ŠคํŠธ ์ค‘์‹ฌ์˜ ๊ฒ€์ƒ‰ ์ฆ๊ฐ• ์ƒ์„ฑ(RAG)์ด ๊ธด ํ˜•์‹์˜ ๋„๋ฉ”์ธ ํŠนํ™” ์ฝ˜ํ…์ธ ์— ๋Œ€ํ•œ ์‹ฌ์ธต์ ์ธ ์ถ”๋ก ์— ์–ด๋ ค์›€์„ ๊ฒช๋Š” ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•ด ๋‹ค์ค‘ ๋ชจ๋‹ฌ(ํ…์ŠคํŠธ ๋ฐ ์‹œ๊ฐ) ์ง€์‹ ๊ทธ๋ž˜ํ”„(KG) ๊ธฐ๋ฐ˜ RAG ๋ฐฉ๋ฒ•๋ก ์ธ MegaRAG๋ฅผ ์ œ์•ˆํ•ฉ๋‹ˆ๋‹ค. MegaRAG๋Š” ์‹œ๊ฐ์  ์ •๋ณด๋ฅผ KG ๊ตฌ์ถ•, ๊ฒ€์ƒ‰, ๋‹ต๋ณ€ ์ƒ์„ฑ ๊ณผ์ •์— ํ†ตํ•ฉํ•˜์—ฌ ํ…์ŠคํŠธ์™€ ์‹œ๊ฐ ์ •๋ณด๋ฅผ ๋ชจ๋‘ ํ™œ์šฉํ•œ ํฌ๋กœ์Šค ๋ชจ๋‹ฌ ์ถ”๋ก ์„ ๊ฐ€๋Šฅํ•˜๊ฒŒ ํ•ฉ๋‹ˆ๋‹ค. ์‹คํ—˜ ๊ฒฐ๊ณผ, MegaRAG๋Š” ํ…์ŠคํŠธ ๋ฐ ๋‹ค์ค‘ ๋ชจ๋‹ฌ ์ฝ”ํผ์Šค ๋ชจ๋‘์—์„œ ๊ธฐ์กด RAG ๊ธฐ๋ฐ˜ ์ ‘๊ทผ ๋ฐฉ์‹๋ณด๋‹ค ์šฐ์ˆ˜ํ•œ ์„ฑ๋Šฅ์„ ๋ณด์˜€์Šต๋‹ˆ๋‹ค.

๐Ÿ”‘ ์‹œ์‚ฌ์  ๋ฐ ํ•œ๊ณ„

โ€ข
๋‹ค์ค‘ ๋ชจ๋‹ฌ ์ •๋ณด๋ฅผ ํ™œ์šฉํ•˜์—ฌ ์ง€์‹ ๊ทธ๋ž˜ํ”„ ๊ธฐ๋ฐ˜ RAG์˜ ์ดํ•ด ๋ฐ ์ถ”๋ก  ๋Šฅ๋ ฅ์„ ํฌ๊ฒŒ ํ–ฅ์ƒ์‹œํ‚ฌ ์ˆ˜ ์žˆ์Œ์„ ์ž…์ฆํ•ฉ๋‹ˆ๋‹ค.
โ€ข
ํ…์ŠคํŠธ ์™ธ ์‹œ๊ฐ์ , ๊ณต๊ฐ„์  ์ •๋ณด๊นŒ์ง€ ๊ตฌ์กฐํ™”๋œ ํ˜•ํƒœ๋กœ ํ†ตํ•ฉํ•จ์œผ๋กœ์จ ๋ณต์žกํ•˜๊ณ  ๋„๋ฉ”์ธ ํŠนํ™”๋œ ์ฝ˜ํ…์ธ ์— ๋Œ€ํ•œ ๋ณด๋‹ค ๊นŠ์ด ์žˆ๋Š” ์ดํ•ด๋ฅผ ์ œ๊ณตํ•ฉ๋‹ˆ๋‹ค.
โ€ข
ํ˜„์žฌ ๋ฐฉ๋ฒ•๋ก ์€ ํ…์ŠคํŠธ์™€ ์‹œ๊ฐ ์ •๋ณด์˜ ํ†ตํ•ฉ ๋ฐฉ์‹, ๊ทธ๋ฆฌ๊ณ  ๋‹ค์–‘ํ•œ ์ข…๋ฅ˜์˜ ์‹œ๊ฐ์  ์ •๋ณด(์˜ˆ: ํ‘œ, ๊ทธ๋ž˜ํ”„ ๋“ฑ)์— ๋Œ€ํ•œ ํ™•์žฅ์„ฑ ์ธก๋ฉด์—์„œ ์ถ”๊ฐ€์ ์ธ ์—ฐ๊ตฌ๊ฐ€ ํ•„์š”ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
๐Ÿ‘