Este artículo propone un novedoso marco de aprendizaje de pocos disparos en el dispositivo que mejora simultáneamente la generalización y el rendimiento personalizado al considerar las variaciones específicas del usuario en el reconocimiento de la actividad humana (HAR) mediante dispositivos portátiles. Para abordar la degradación de la generalización de los modelos HAR existentes debido a las variaciones específicas del usuario, primero aprendemos representaciones generalizadas para todos los usuarios y luego actualizamos directamente una capa de clasificador ligero en el dispositivo con recursos limitados que se adapta rápidamente a nuevos usuarios con solo un pequeño número de muestras etiquetadas. Implementamos y evaluamos el marco en un microcontrolador RISC-V GAP9 utilizando tres conjuntos de datos de referencia: RecGym, QVAR-Gesture y Ultrasound-Gesture. Demostramos que la adaptación posterior a la implementación mejora la precisión en un 3,73 %, 17,38 % y 3,70 %, respectivamente. Esto demuestra que el enfoque propuesto permite un HAR portátil escalable, consciente del usuario y energéticamente eficiente.