Este estudio piloto investigó el impacto de la IA generativa (IAG), una herramienta en rápida expansión en entornos educativos, en el desarrollo de habilidades de pensamiento crítico. A diferencia de estudios previos que han examinado la IA generativa como herramienta para la tutoría de asignaturas específicas o la realización de tareas, este estudio se centra en la capacidad de los estudiantes para evaluar críticamente la precisión y la pertinencia de las respuestas generadas por la IA. Dirigido a estudiantes de un curso introductorio de informática y ciencias de datos, diseñamos actividades de aprendizaje que les exigieron analizar, criticar y revisar las soluciones generadas por IA, dado que la IA genera a menudo errores contextuales o factuales. Los hallazgos proporcionan una perspectiva inicial sobre la capacidad de los estudiantes para interactuar críticamente con el contenido de la IA y sientan las bases para una investigación más exhaustiva en futuros semestres.