Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

It's Not Just Labeling" -- A Research on LLM Generated Feedback Interpretability and Image Labeling Sketch Features

Created by
  • Haebom

저자

Baichuan Li, Larry Powell, Tracy Hammond

개요

본 연구는 교통, 의료, 로봇 공학 등 분야에서 기계 학습 애플리케이션의 성능에 중요한 영향을 미치는 훈련 데이터의 품질 향상을 목표로 한다. 정확한 이미지 라벨링은 시간이 많이 걸리고 전문가의 지식이 필요하며 피드백이 제한적인 경우가 많다. 이를 해결하기 위해, 본 연구는 대규모 언어 모델(LLM)을 지원하는 스케치 기반 주석 접근 방식을 제시하여 기술적 장벽을 줄이고 접근성을 높인다. 합성 데이터셋을 사용하여 스케치 인식 기능과 LLM 피드백 지표 간의 관계를 조사하여 LLM 지원 라벨링의 신뢰성과 해석력을 향상시키고자 한다. 또한 프롬프팅 전략과 스케치 변형이 피드백 품질에 미치는 영향을 조사한다. 주요 기여는 비전문가의 주석 작업을 단순화하고 확장성, 접근성, 설명 가능성 측면에서 LLM 기반 라벨링 도구를 발전시키는 스케치 기반 가상 비서이다.

시사점, 한계점

시사점:
스케치 기반 주석 방식을 통해 전문가가 아닌 사람도 쉽게 이미지 라벨링에 참여할 수 있도록 함으로써 데이터 라벨링의 접근성을 향상시킨다.
LLM을 활용하여 라벨링 과정의 효율성을 높이고, 시간 및 비용을 절감한다.
스케치 인식 기능과 LLM 피드백 지표 간의 관계를 분석하여 LLM 지원 라벨링의 신뢰성과 해석력을 향상시킨다.
스케치 기반 가상 비서를 개발하여 LLM 기반 라벨링 도구의 확장성을 높인다.
한계점:
현재는 합성 데이터셋을 사용하여 연구를 진행하였으므로, 실제 데이터셋에 적용했을 때의 성능은 추가적인 연구가 필요하다.
스케치의 해석에 대한 주관성이 존재할 수 있으며, 이로 인해 라벨링의 정확도에 영향을 미칠 수 있다.
다양한 유형의 이미지와 스케치에 대한 일반화 성능을 평가해야 한다.
LLM의 성능에 의존적이므로, LLM의 한계점이 본 연구의 성능에 영향을 줄 수 있다.
👍