La rehabilitación funcional y neurológica vive un punto de inflexión. Por un lado, crecen las necesidades de seguimiento continuo y personalización; por otro, los equipos clínicos trabajan con tiempos ajustados y con una carga de registro que no siempre deja margen para profundizar en lo importante: cómo está cada paciente en cada sesión y qué ajustes pueden mejorar su evolución.
En este escenario, la combinación de inteligencia artificial (IA), multimodalidad e Internet de las Cosas (IoT) abre una vía clara: interacciones más naturales, sesiones más adaptativas y datos objetivos que complementen la observación clínica.
¿Qué es mHRI y por qué importa en rehabilitación?
mHRI significa Interacción Multimodal Humano-Robot. En lugar de basarse en un único canal (solo pantalla, solo botones o solo voz), un sistema mHRI integra múltiples señales para comprender mejor lo que ocurre durante la sesión y responder de forma más ajustada.
En este proyecto, la multimodalidad se apoya especialmente en tres pilares:
-
Lenguaje natural (voz/texto): para interactuar de forma más intuitiva.
-
Señales visuales (imagen/vídeo): para captar información contextual y conductual.
-
IoT y datos fisiológicos: para incorporar métricas objetivas del estado del paciente.
El objetivo no es “tecnificar” la rehabilitación, sino hacerla más sensible al contexto real de cada persona.
El proyecto: un sistema mHRI que combina IA e IoT
El proyecto se centra en diseñar e integrar un sistema mHRI orientado a rehabilitación, uniendo:
-
IA aplicada al lenguaje (PLN) para interacción por voz o texto.
-
Visión por computador para extraer señales relevantes del contexto y del comportamiento.
-
Captura de datos fisiológicos mediante IoT, incluyendo wearables y sensores compatibles.
-
Un sistema de recomendación, capaz de convertir señales heterogéneas en apoyo útil para la personalización.
A nivel técnico, el reto clave es lograr que todo esto funcione como un conjunto: capturar, procesar, almacenar y explotar información multimodal con fiabilidad en entornos reales (centro y domicilio).
1) IA conversacional: cuando la tecnología se comunica “como una persona”
Una interacción natural marca la diferencia en rehabilitación: reduce fricción, mejora la comprensión de tareas y aumenta la adherencia.
Por eso, una parte esencial del sistema se basa en procesamiento de lenguaje natural (PLN) para permitir que el paciente pueda:
-
Recibir instrucciones claras y guiadas durante los ejercicios.
-
Pedir ayuda o repetir indicaciones sin interrumpir el flujo.
-
Mantener una comunicación sencilla que favorezca la motivación.
Además, el sistema busca adaptar la interacción al contexto clínico, evitando respuestas genéricas y orientando la conversación a objetivos terapéuticos concretos.
2) Visión por computador: señales que ayudan a entender cómo va la sesión
La visión por computador añade una capa valiosa: permite captar señales del entorno y del comportamiento que, sin reemplazar al criterio clínico, pueden enriquecer la interpretación de la sesión.
En rehabilitación, esto puede ayudar a:
-
Detectar si la persona está presente y en disposición de comenzar.
-
Identificar momentos de pausa, duda o desenganche.
-
Aportar contexto sobre la interacción (por ejemplo, atención, orientación o respuesta a estímulos).
El desafío es hacerlo de forma robusta: con iluminación variable, oclusiones y condiciones realistas propias de centros y hogares.
3) IoT y datos fisiológicos: objetividad para personalizar y seguir mejor
La captura de datos fisiológicos mediante IoT aporta algo decisivo: medición objetiva. Variables como frecuencia cardiaca, actividad o movimiento (según los sensores disponibles) permiten entender mejor la respuesta del paciente en tiempo real y a lo largo del tiempo.
Beneficios principales de incorporar datos fisiológicos
-
Mejor lectura del esfuerzo y la tolerancia: ayuda a interpretar fatiga, activación y respuesta durante la sesión.
-
Personalización dinámica: permite ajustar ritmo, intensidad o tipo de guía en función de señales observables.
-
Seguimiento longitudinal: facilita comparar sesiones, identificar tendencias y detectar cambios relevantes.
-
Apoyo al profesional: reduce dependencia del registro manual y mejora la consistencia de la información disponible.
La clave está en integrar estos datos con la interacción (lenguaje y visión) para que el sistema no solo “mida”, sino que comprenda el contexto.
De datos a decisiones: el valor del sistema de recomendación
La multimodalidad genera información rica, pero su verdadero impacto aparece cuando esa información se traduce en acciones útiles.
Por eso, el sistema incorpora un motor de recomendación orientado a:
-
Proponer ajustes en la sesión (por ejemplo, cambios de ritmo o nivel de guía).
-
Priorizar contenidos o ejercicios en función del perfil y respuesta del paciente.
-
Generar señales de seguimiento que ayuden a la toma de decisiones.
Este enfoque busca que la tecnología sea un soporte real, no un “extra”: recomendaciones concretas, interpretables y alineadas con objetivos terapéuticos.
Infraestructura: almacenamiento, integración y gobernanza del dato
La captura multimodal exige una arquitectura capaz de:
-
Gestionar datos heterogéneos (texto/voz, imagen/vídeo, sensores).
-
Almacenar información de forma segura y con permisos adecuados.
-
Facilitar consulta y explotación posterior (seguimiento, informes y recomendaciones).
-
Mantener rendimiento y estabilidad en escenarios reales de uso.
En rehabilitación, donde los datos son sensibles, este punto es tan importante como la propia IA.
Conclusión: una rehabilitación más humana… gracias a la multimodalidad
La “nueva era” de la rehabilitación no consiste en añadir tecnología por añadirla. Consiste en crear sistemas que:
-
Interaccionen mejor (lenguaje natural).
-
Entiendan más contexto (visión).
-
Incorporen mediciones objetivas (IoT fisiológico).
-
Ayuden a personalizar sin aumentar la carga del profesional (recomendación).
Eso es lo que propone este enfoque mHRI dentro del PERTE Salud: una rehabilitación más adaptativa, con mejor seguimiento y con una interacción que acompaña de manera natural el proceso terapéutico.
