본 논문은 다양한 분야에 걸쳐 (다중 모달) 규제 규칙을 모델링하기 위한 통합 사양 언어인 Horae를 제시합니다. 기존 AI 기반 규제 기술의 일반화 어려움을 해결하기 위해, Horae를 이용한 지능형 서비스 규제 파이프라인을 제시하고, Horae 모델링 프로세스를 자동화하는 미세 조정된 대규모 언어 모델 RuleGPT를 활용합니다. 실제 세계의 다양한 규제 영역에 대한 벤치마크를 통해 이 프레임워크의 실현 가능성과 효과를 보여주며, 7B 매개변수를 가진 오픈소스 RuleGPT가 GPT-3.5를 능가하고 GPT-4와 동등한 성능을 보임을 입증합니다.
시사점, 한계점
•
시사점:
◦
다양한 분야에 적용 가능한 통합 규제 규칙 모델링 언어 Horae 제시
◦
Horae 모델링 프로세스 자동화를 위한 RuleGPT 활용으로 완전 자동화된 지능형 서비스 규제 프레임워크 구축
◦
RuleGPT의 우수한 성능 검증 (GPT-3.5 초과, GPT-4와 동등)
◦
오픈소스 RuleGPT 제공
•
한계점:
◦
RuleGPT의 성능은 특정 벤치마크에 대한 결과이며, 다른 데이터셋이나 응용 분야에서는 성능이 달라질 수 있음.