Evaluación y mejora del Sistema EPAI
EPAI se evaluó como un ecosistema integrado: el portal de gestión de PLE, PLE Active, el sistema de recomendación, APP Certify y los servicios de integración, administración, analítica y control. Cada ciclo de validación permitió comprobar el funcionamiento, escuchar a las personas usuarias y orientar mejoras.
Qué evidencias se utilizaron
- Evaluación independiente de la arquitectura, las funciones, la experiencia de usuario, el diseño didáctico, los indicadores y las historias de usuario, realizada por la Universidad Nacional de Ciencia y Tecnología POLITEHNICA de Bucarest.
- Pilotaje y telemetría anónima para comprobar el uso real de las funciones sin mostrar actividad individual.
- Encuestas y observaciones de estudiantes, docentes, personal técnico y responsables académicos sobre utilidad, accesibilidad, confianza, personalización y facilidad de uso.
Resultados de la evaluación
- 95 % de cumplimiento técnico, 100 % didáctico y 95 % de los indicadores clave operativos.
- Historias de usuario cubiertas en un 98 % para estudiantes, 100 % para empleadores y 90 % para docentes y responsables académicos.
- Experiencia de usuario del 80 %; el principal margen de mejora se situó en navegación, instrucciones y adaptación a perfiles diversos.
- 1.019 eventos en doce tipos de interacción: 68 PLE creados, 98 programas importados y 355 recomendaciones generadas, entre otras acciones.
- Satisfacción media de 8,06 sobre 10; el 81,3 % de las valoraciones del pilotaje final se situó entre 8 y 10.
Qué se mejoró a partir de la evaluación
Las evidencias se tradujeron en cambios concretos durante la fase final:
- registro, activación de cuentas y gestión de contraseñas más sencillos y seguros;
- mejor navegación, consistencia visual, adaptación móvil, legibilidad y accesibilidad;
- ampliación multilingüe y mejora de la gestión de programas y actividades;
- mayor integración entre componentes y perfeccionamiento de las recomendaciones;
- observatorios de calidad, analíticas, moderación institucional de URL y telemetría agregada y anónima.
Valor y continuidad
EPAI ofrece una base sólida para organizar el aprendizaje, recibir recomendaciones y reconocer competencias. Docentes y universidades disponen de instrumentos para observar la calidad, comprender patrones agregados de uso y mejorar sin convertir el seguimiento en vigilancia individual.
El sistema es operativo, integrado y altamente validado. Su evolución requiere ampliar el pilotaje, simplificar la experiencia inicial, profundizar en la accesibilidad, acompañar el uso de PLE Active y evaluar efectos educativos a largo plazo. La telemetría cubre un periodo breve y registra eventos, no personas únicas; por ello no demuestra todavía adopción longitudinal.
Disponibilidad
Esta ficha presenta resultados agregados de interés público. Las matrices, los informes técnicos, los registros de telemetría y las respuestas individuales son documentación interna y no se ofrecen para descarga pública.