Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Mobile Edge Intelligence for Large Language Models: A Contemporary Survey

Created by
  • Haebom
Category
Empty

저자

Guanqiao Qu, Qiyuan Chen, Wei Wei, Zheng Lin, Xianhao Chen, Kaibin Huang

개요

본 논문은 모바일 에지 인텔리전스(MEI)를 활용하여 에지 디바이스에서 대규모 언어 모델(LLM)을 구현하는 방법에 대한 최신 연구 동향을 조사한 논문입니다. 클라우드 기반 LLM보다 비용 효율적이고, 지연 시간이 짧으며, 개인 정보 보호에 유리한 온디바이스 LLM의 한계점을 MEI를 통해 극복하는 방안을 제시합니다. 네트워크 에지에 LLM을 배포해야 하는 시급한 필요성을 보여주는 여러 응용 프로그램을 소개하고, LLM과 MEI의 기본 원리를 설명하며, 자원 효율적인 LLM 기술을 제시합니다. MEI 기반 LLM 배포 아키텍처(MEI4LLM)의 핵심 구성 요소와 LLM 배포 지원 방식을 개괄하고, 에지 LLM 캐싱 및 전달, 에지 LLM 학습, 에지 LLM 추론 등 다양한 측면을 심층적으로 다룹니다. 마지막으로 미래 연구 방향을 제시합니다.

시사점, 한계점

시사점:
MEI를 활용한 에지 디바이스 LLM 구현의 효용성을 보여줌으로써, 비용, 지연 시간, 개인 정보 보호 문제를 해결할 수 있는 가능성을 제시합니다.
에지 LLM 캐싱, 전달, 학습, 추론 등 다양한 측면에 대한 심층적인 분석을 제공합니다.
다양한 응용 프로그램에 대한 LLM의 잠재력을 실현하는 데 기여할 수 있는 미래 연구 방향을 제시합니다.
한계점:
본 논문은 MEI 기반 LLM 구현에 대한 개괄적인 조사에 초점을 맞추고 있어, 특정 기술이나 구현에 대한 상세한 분석은 부족할 수 있습니다.
미래 연구 방향 제시는 있지만, 구체적인 연구 계획이나 방법론 제시는 부족할 수 있습니다.
실제 구현 및 성능 평가에 대한 결과는 포함되어 있지 않습니다.
👍