Este artículo presenta OnGoal, una interfaz que evalúa y gestiona eficazmente el logro de objetivos de los usuarios en conversaciones a largo plazo con modelos de lenguaje a gran escala (LLM). OnGoal facilita la navegación eficaz en conversaciones complejas al proporcionar retroalimentación en tiempo real sobre la congruencia de los objetivos mediante evaluaciones basadas en LLM, explicaciones con ejemplos de los resultados de la evaluación y resúmenes del progreso de los objetivos a lo largo del tiempo. En un estudio de tareas de escritura con 20 participantes, comparamos OnGoal con una interfaz de chat básica sin seguimiento de objetivos. Descubrimos que los participantes que usaron OnGoal redujeron el tiempo y el esfuerzo necesarios para alcanzar sus objetivos y exploraron nuevas estrategias de incitación para la resolución de errores. Esto sugiere que el seguimiento y la visualización de objetivos pueden mejorar la participación y la resiliencia en las conversaciones LLM. Nuestros hallazgos proporcionan una guía para futuros diseños de interfaces de chat LLM que permitan la retroalimentación para mejorar el rendimiento de LLM y optimizar la comunicación de objetivos, la reducción de la carga cognitiva y la interactividad.
