Sign In

CitePrism: Human-in-the-Loop AI for Citation Auditing and Editorial Integrity

์ž‘์„ฑ์ž
  • Haebom
์นดํ…Œ๊ณ ๋ฆฌ
Empty

์ €์ž

Gowrika Mahesh, Budanur Madappa Darshan Gowda, Kavana Gopladevarahalli Papegowda, Prajwal Basavaraj, Binh Vu, Swati Chandna, Mehrdad Jalali

๐Ÿ’ก ๊ฐœ์š”

๋…ผ๋ฌธ์€ ํ•™์ˆ  ์ถœํŒ๋ฌผ์—์„œ ์ˆ˜๋™์ ์ด๊ณ  ๋น„ํšจ์œจ์ ์ธ ์ธ์šฉ ๊ฒ€ํ†  ๊ณผ์ •์„ ๊ฐœ์„ ํ•˜๊ธฐ ์œ„ํ•œ "CitePrism"์ด๋ผ๋Š” ์ƒˆ๋กœ์šด ์ธ๊ฐ„-AI ํ˜‘์—… ํ”„๋ ˆ์ž„์›Œํฌ๋ฅผ ์ œ์•ˆํ•ฉ๋‹ˆ๋‹ค. CitePrism์€ LLM ๊ธฐ๋ฐ˜์˜ ๋ฌธ๋งฅ ์ดํ•ด, ์ž„๋ฒ ๋”ฉ ๊ธฐ๋ฐ˜ ์˜๋ฏธ๋ก ์  ์œ ์‚ฌ์„ฑ, ๋ฉ”ํƒ€๋ฐ์ดํ„ฐ ๊ฒ€์ฆ, ์œค๋ฆฌ์  ํ”Œ๋ž˜๊ทธ ๋“ฑ์„ ๊ฒฐํ•ฉํ•˜์—ฌ ์ธ์šฉ์˜ ์ ์ ˆ์„ฑ๊ณผ ๋ฌด๊ฒฐ์„ฑ์„ ํ‰๊ฐ€ํ•ฉ๋‹ˆ๋‹ค. ์˜ˆ๋น„ ์—ฐ๊ตฌ์—์„œ๋Š” ํ•ด๋‹น ๋…ผ๋ฌธ์˜ ์ธ์šฉ ๊ฒ€ํ† ์—์„œ ์ธ๊ฐ„์˜ ํŒ๋‹จ๊ณผ์˜ ์ผ์น˜๋„๊ฐ€ Cohen's kappa = 0.429๋กœ ๋‚˜ํƒ€๋‚ฌ์œผ๋ฉฐ, ํŠน์ • ์ž„๊ณ„๊ฐ’์—์„œ ๊ด€๋ จ ์—†๋Š” ์ธ์šฉ์„ ํšจ๊ณผ์ ์œผ๋กœ ํƒ์ง€ํ–ˆ์ง€๋งŒ, ์ถ”๊ฐ€์ ์ธ ๋ถ„์„๊ฐ€ ๊ฒ€ํ† ๊ฐ€ ํ•„์š”ํ•œ ์˜คํƒ๋„ ๋ฐœ์ƒํ–ˆ์Šต๋‹ˆ๋‹ค.

๐Ÿ”‘ ์‹œ์‚ฌ์  ๋ฐ ํ•œ๊ณ„

โ€ข
CitePrism์€ ํŽธ์ง‘์ž๋“ค์˜ ์ธ์šฉ ๊ฒ€ํ†  ๋ถ€๋‹ด์„ ์ค„์ด๊ณ  ํšจ์œจ์„ฑ์„ ๋†’์ผ ์ˆ˜ ์žˆ๋Š” ์˜์‚ฌ๊ฒฐ์ • ์ง€์› ๋„๊ตฌ๋กœ์„œ์˜ ์ž ์žฌ๋ ฅ์„ ๋ณด์—ฌ์ค๋‹ˆ๋‹ค.
โ€ข
๋…ผ๋ฌธ์˜ ์ธ์šฉ ํ’ˆ์งˆ์„ ๋ณด์ˆ˜์ ์œผ๋กœ ์„ ๋ณ„ํ•˜๊ณ  ๋ถ„๋ฅ˜ํ•˜๋Š” ๋ฐ ๊ธฐ์—ฌํ•  ์ˆ˜ ์žˆ์œผ๋ฉฐ, ํ–ฅํ›„ ํ•™์ˆ  ์ถœํŒ ๊ณผ์ •์˜ ๋ฌด๊ฒฐ์„ฑ์„ ๊ฐ•ํ™”ํ•˜๋Š” ๋ฐ ํ™œ์šฉ๋  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
โ€ข
๋ณธ ์—ฐ๊ตฌ ๊ฒฐ๊ณผ๋Š” ๋‹จ์ผ ์‚ฌ๋ก€ ์—ฐ๊ตฌ์— ๊ธฐ๋ฐ˜ํ•˜๊ณ  ์žˆ์œผ๋ฉฐ, ์ผ๋ฐ˜์ ์ธ ํŽธ์ง‘ ์„ฑ๋Šฅ์„ ์ž…์ฆํ•˜๊ธฐ์—๋Š” ์ œํ•œ์ ์ž…๋‹ˆ๋‹ค. ๋‹ค์–‘ํ•œ ๋…ผ๋ฌธ, ํ•™๋ฌธ ๋ถ„์•ผ, ์ฃผ์„๊ฐ€, ๊ธฐ์ค€์„  ๋ฐ ์šด์˜ ํ™˜๊ฒฝ์— ๋Œ€ํ•œ ๊ด‘๋ฒ”์œ„ํ•œ ๊ฒ€์ฆ์ด ํ•„์š”ํ•ฉ๋‹ˆ๋‹ค.
๐Ÿ‘