El principal propósito de INSENSION consiste en la creación de una plataforma TIC que mejore la calidad de vida de personas con dificultades de aprendizaje profundas y múltiples (PMLD de sus siglas en inglés Profound and Multiple Learning Disabilities), mediante el uso de aplicaciones y servicios digitales que aumenten su capacidad de autodeterminación y enriquezcan sus conocimientos.
Ilustración 1. Ejemplo del sistema de reconocimiento de expresiones faciales que está siendo desarrollado por CTIC para el proyecto INSENSION.
- La plataforma a desarrollar tiene como objetivo proporcionar los medios tecnológicos para el reconocimiento de señales de comportamiento no simbólicas de forma transparente y adaptada individualmente a cada persona con PMLD, para detectar patrones de comportamiento. Estos patrones se traducen en intenciones afectivas del usuario final (su aprobación o desaprobación a una situación dada) y permiten comunicarlas al servicio de ayuda.
- La arquitectura principal del sistema cuenta con cuatro módulos principales de reconocimiento del comportamiento: gestos, expresiones faciales, vocalización y parámetros fisiológicos. Para desarrollar estos sistemas se requiere el uso de avanzadas técnicas de Inteligencia Artificial y modelos de última generación de Internet de las Cosas para integrar todos los componentes de manera óptima.
- El trabajo de CTIC en el proyecto INSENSION engloba el desarrollo de dos de los módulos principales de la plataforma: el reconocimiento de gestos corporales y el reconocimiento de expresiones faciales. Para ello se están empleando técnicas de aprendizaje automático para el reconocimiento de patrones y modelos Deep Learning para la detección de los puntos característicos faciales y corporales.