본 연구는 TripAdvisor와 Reddit 게시글에서 여행 고객의 니즈를 추출하기 위한 대규모 언어 모델(LLM)의 비교 분석을 수행했습니다. GPT-4, Gemini와 같은 오픈소스 및 독점 모델들을 다양하게 활용하여 특정 도메인에서 각 모델의 강점과 약점을 밝히고자 했습니다. BERTScore, ROUGE, BLEU와 같은 지표를 사용하여 평가 과정을 거쳐 각 모델의 고객 니즈 정확한 식별 및 요약 성능을 평가했습니다. 그 결과, Mistral 7B와 같은 오픈소스 LLM이 더 큰 폐쇄형 모델과 비슷한 성능을 달성하면서 경제성과 사용자 정의 가능성이라는 이점을 제공함을 강조했습니다. 또한 고객 니즈 분석 작업에 가장 적합한 LLM을 선택할 때 모델 크기, 리소스 요구 사항 및 성능 지표와 같은 요소를 고려하는 것이 중요함을 강조했습니다. 전반적으로 이 연구는 여행 업계에서 고객 경험 향상과 운영 효율성을 높이기 위해 고급 NLP 기술을 활용하고자 하는 기업에 귀중한 통찰력을 제공합니다.
