Daily Arxiv

Esta página recopila y organiza artículos sobre inteligencia artificial publicados en todo el mundo.
La información aquí presentada se resume utilizando Google Gemini y el sitio se gestiona sin fines de lucro.
Los derechos de autor de los artículos pertenecen a sus autores y a las instituciones correspondientes; al compartir el contenido, basta con citar la fuente.

Optimización de código industrial basada en LLM bajo regulación: un enfoque de mezcla de agentes

Created by
  • Haebom

Autor

Mari Ashiga, Vardan Voskanyan, Fateme Dinmohammadi, Jingzhi Gong, Paul Brookes, Matthew Truscott, Rafail Giavrimis, Mike Basios, Leslie Kanthan, Wei Jie

Describir

Este artículo presenta un enfoque de agente mixto (MoA) para la optimización de código en industrias reguladas. En entornos donde el uso de LLM comerciales es limitado debido al cumplimiento normativo y a preocupaciones sobre la privacidad de datos, proponemos MoA, que combina múltiples LLM especializados de código abierto para generar código. Lo comparamos con el sistema de conjunto basado en algoritmos genéticos (AG) de TurinTech AI y optimizadores de LLM individuales. Los resultados experimentales, utilizando bases de código industriales reales, demuestran que MoA logra ahorros de costos del 14,3% y el 22,2%, respectivamente, y reducciones del tiempo de optimización del 28,6% y el 32,2%, respectivamente, utilizando modelos de código abierto. Además, demostramos la superioridad del conjunto basado en AG sobre modelos comerciales, y ambos conjuntos superan a los LLM individuales. Validamos su aplicabilidad en entornos reales utilizando 50 fragmentos de código y siete combinaciones de LLM. Finalmente, proporcionamos una guía práctica para equilibrar el cumplimiento normativo y el rendimiento de la optimización.

Takeaways, Limitations

Takeaways:
Presentamos la posibilidad de una optimización de código efectiva utilizando MoA basado en LLM de código abierto en un entorno industrial regulado.
Demostrar empíricamente que MoA ofrece beneficios significativos en reducción de costos y reducción del tiempo de optimización.
Análisis comparativo de los pros y contras de los LLM comerciales y de código abierto para proporcionar pautas aplicables para entornos industriales.
Resultados altamente confiables basados en experimentos a gran escala utilizando bases de código de la industria real.
Limitations:
Los tipos y versiones de LLM de código abierto y comerciales utilizados en este estudio no se mencionaron explícitamente, lo que limita la generalización.
Dado que el rendimiento de MoA puede variar según el tipo y la configuración del LLM utilizado, se necesita más investigación sobre diversas combinaciones.
Debido a que las características del código base utilizado en el experimento no se presentan claramente, es necesario examinar la generalización a otros tipos de códigos base.
En el análisis comparativo con sistemas de conjuntos basados en AG, falta información sobre las configuraciones específicas del sistema AG.
👍