Daily Arxiv

世界中で発行される人工知能関連の論文をまとめるページです。
このページはGoogle Geminiを活用して要約し、非営利で運営しています。
論文の著作権は著者および関連機関にあり、共有する際は出典を明記してください。

Do Code Semantics Help? A Comprehensive Study on Execution Trace-Based Information for Code Large Language Models

Created by
  • Haebom

作者

Jian Wang, Xiaofei Xie, Qiang Hu, Shangqing Liu, Yi Li

概要

この論文は、コード大規模言語モデル(Code LLM)の実行時間動作の推論能力の欠如と、意味情報の不一致と断片的な表現の問題を指摘し、これらの制限を克服するための一般的なフレームワークを提示します。このフレームワークは、実行追跡などのセマンティック情報をコードタスクに関連するプロンプトに統合することで、マップ学習微調整(SFT)および推論段階でのセマンティック情報の活用効果を研究します。実験結果は,従来の研究とは異なり,セマンティック情報がSFTとCode LLMのテスト時間拡張に制限的な有用性を有することを示した。

Takeaways、Limitations

Takeaways: Code LLMの実行時間推論能力を向上させるための新しいアプローチを提示し、意味情報の実際の有効性の見直しを促します。既存の研究と相反する結果を通じ、コードLLM強化戦略の新たな方向性を提示します。
Limitations:この研究は特定のフレームワークと意味情報(実行追跡)に限定されており、他の種類の意味情報やアプローチの一般化の可能性が限られています。さらに、実験結果が既存の研究と相反する理由の詳細な分析が不足している。さまざまな Code LLM アーキテクチャとタスクの広範な実験が必要です。
👍