[공지사항]을 빙자한 안부와 근황 
Show more

Daily Arxiv

Esta página recopila y organiza artículos sobre inteligencia artificial publicados en todo el mundo.
La información aquí presentada se resume utilizando Google Gemini y el sitio se gestiona sin fines de lucro.
Los derechos de autor de los artículos pertenecen a sus autores y a las instituciones correspondientes; al compartir el contenido, basta con citar la fuente.

La síntesis de configuración basada en LLM requiere desambiguación

Created by
  • Haebom

Autor

Rajdeep Mondal, Nikolaj Bjorner, Todd Millstein, Alan Tang, George Varghese

Describir

En este artículo, abordamos el problema de la ambigüedad de la intención del usuario, además del problema de la alucinación en la síntesis de programas mediante modelos de lenguaje a gran escala (LLM). Demostramos este problema de ambigüedad en el contexto de redes de la síntesis compositiva incremental de mapas de rutas y listas de control de acceso (ACL). Estas estructuras suelen superponerse en el espacio de encabezado, lo que impide que los LLM infieran las prioridades relativas de las tareas sin la interacción del usuario. Las mediciones en un entorno de nube a gran escala revelan ACL complejas con cientos de superposiciones, lo que demuestra que la ambigüedad es un problema real. En este artículo, proponemos un sistema prototipo llamado Clarify que añade un nuevo módulo, Desambiguador, a los LLM para ayudar a inducir la intención del usuario. Clarify sintetiza y verifica incrementalmente las políticas de enrutamiento tras la desambiguación para pequeñas cargas de trabajo de síntesis. Nuestro enfoque para la ambigüedad también es útil en el caso más general, donde los LLM pueden sintetizar con precisión la intención de las actualizaciones, pero su integración es ambigua y puede generar diferentes comportamientos globales.

Takeaways, Limitations

Takeaways: Aclara el problema de la ambigüedad de la intención del usuario en la síntesis de programas basada en LLM y propone un nuevo enfoque (sistema Clarify) para resolverlo. La desambiguación de la intención del usuario mediante el módulo Desambiguador puede contribuir a mejorar la fiabilidad de LLM. Sugiere la posibilidad de aplicarlo para resolver el problema de la integración de la intención ambigua de LLM en otros campos, así como en la configuración de redes.
Limitations: El sistema Clarify se evaluó únicamente con una pequeña carga de trabajo sintética, por lo que es necesario verificar su rendimiento y escalabilidad en un entorno real a gran escala. La descripción detallada del diseño y la implementación del módulo Desambiguador es insuficiente. La fatiga del usuario y la complejidad de la interacción que pueden surgir durante el proceso de desambiguación no se tienen en cuenta adecuadamente.
👍