Schema Key Wording as an Instruction Channel in Structured Generation under Constrained Decoding

Wed, 29 Apr 2026 08:47:00 GMT

### 저자

Yifan Le

### 💡 개요

본 연구는 구조화된 생성을 위해 제약 디코딩 시 스키마 키워드를 암시적인 지시 채널로 활용하는 방안을 제시합니다. 저자들은 스키마 키를 프롬프트, 스키마 키, 또는 둘 다에 신호를 배치하는 다중 채널 지시 문제로 구조화된 생성을 공식화했습니다. 실험 결과, 스키마 키워드 변경만으로도 정확도에 상당한 영향을 미칠 수 있으며, 모델에 따라 스키마 수준 또는 프롬프트 수준 지시에 대한 의존도가 다르고 두 채널이 비가산적으로 상호작용함을 발견했습니다.

### 🔑 시사점 및 한계

- 스키마 키워드는 단순한 출력 형식 지정이 아니라, 구조화된 생성에서 지시 명세의 중요한 부분임을 시사합니다.

- 스키마 키의 의미론적 이득이 문법 제약 투영으로 인한 왜곡을 초과할 때만 CoT 스타일 키가 도움이 된다는 이론적 설명을 제공합니다.

- 특정 모델(Qwen, LLaMA)에 따른 스키마 및 프롬프트 지시 채널의 효과와 상호작용 방식을 규명했습니다.

- 제안된 분석 프레임워크를 다양한 구조화된 생성 작업 및 모델에 확장하여 검증하는 추가 연구가 필요합니다.

[PDF 보기](https://arxiv.org/pdf/2604.14862)