Para abordar la falta de datos de entrenamiento para la operación de trenes sin conductor, este artículo presenta el conjunto de datos RailGoerl24, un conjunto de imágenes de alta definición de 12 205 fotogramas capturado en el Centro de Pruebas Ferroviarias de TÜV SÜD Rail en Görlitz, Alemania. Este conjunto de datos se diseñó para respaldar el desarrollo de algoritmos de aprendizaje automático para la detección automática de personas en zonas de peligro de trenes y contiene 33 556 anotaciones en forma de caja para objetos "persona". Además de los datos de imagen RGB, también incluye datos de escaneo LiDAR terrestre que cubren un área limitada. La información facial se visualiza con nitidez y puede utilizarse para diversas tareas, además de la predicción de colisiones. El conjunto de datos está disponible en data.fid-move.de/dataset/railgoerl24.