Daily Arxiv

Esta página recopila y organiza artículos sobre inteligencia artificial publicados en todo el mundo.
La información aquí presentada se resume utilizando Google Gemini y el sitio se gestiona sin fines de lucro.
Los derechos de autor de los artículos pertenecen a sus autores y a las instituciones correspondientes; al compartir el contenido, basta con citar la fuente.

LLM-D12: Una escala bidimensional de dependencias instrumentales y relacionales en grandes modelos lingüísticos

Created by
  • Haebom

Autor

Ala Yankouskaya, Areej B. Babiker, Syeda WF Rizvi, Sameha Alshakhsi, Magnus Liebherr, Raian Ali

Describir

Este artículo desarrolla y valida un nuevo cuestionario para evaluar la dependencia o la conducta adictiva en modelos de lenguaje a gran escala (LLMs). Con el fin de superar las limitaciones conceptuales de estudios previos que aplicaron los síntomas existentes de adicción conductual al entorno de uso de LLM, presentamos una nueva perspectiva que considera los aspectos sutiles de los LLM y la interacción humana. El cuestionario de 12 ítems (LLM-D12) desarrollado con 526 participantes en el Reino Unido se confirmó que consta de dos estructuras factoriales, 'dependencia instrumental' y 'dependencia relacional', a través del análisis factorial exploratorio y confirmatorio. La dependencia instrumental refleja el grado de dependencia de los LLM en la toma de decisiones y tareas cognitivas, y la dependencia relacional refleja la tendencia a percibir los LLM como seres socialmente significativos, perceptivos o similares a compañeros. LLM-D12 mostró excelente consistencia interna y clara validez discriminante, y la base conceptual y la distinción de las dos subescalas se confirmaron a través de validación externa. Las propiedades psicométricas y la estructura de la escala LLM-D12 se interpretaron considerando que si bien la dependencia de LLM no necesariamente indica disfunción, puede reflejar un nivel de dependencia que puede ser problemático en determinadas situaciones.

Takeaways, Limitations

Takeaways:
Desarrollamos y validamos una nueva escala (LLM-D12) para medir la dependencia a la LLM, contribuyendo al estudio de los fenómenos de adicción y dependencia relacionados con el uso de LLM.
Al dividir la dependencia de LLM en dos factores, “dependencia instrumental” y “dependencia relacional”, proporcionamos una comprensión más matizada de la interacción entre LLM y los humanos.
Esto sugiere que la dependencia de LLM puede no implicar necesariamente disfunción y plantea la necesidad de más investigaciones sobre el nivel de dependencia que puede ser problemático.
Limitations:
Dado que la muestra de participantes del estudio se limitó al Reino Unido, deben tenerse en cuenta las especificidades culturales.
Debido a las limitaciones del método de encuesta en línea, existe la posibilidad de sesgo de respuesta.
Se necesitan más estudios para determinar la estabilidad a largo plazo y la validez predictiva del LLM-D12.
Es necesario verificar la generalización entre diferentes tipos de LLM y entornos de uso.
👍