‘Tu casa en tus manos’ es el juego de palabras con el que el Grupo de Investigación Supercomputación – Algoritmos de la Universidad de Almería ha presentado su nuevo sistema innovador con el que personas sordas pueden comunicarse con los dispositivos inteligentes del hogar mediante lengua de signos.
Se llama ‘Smart-LSE-UAL’ y con él ha convertido el entorno de la Universidad de Almería en la primera ‘casa inteligente’, pionera en ser controlada en tiempo real mediante la Lengua de Signos Española (LSE). Los investigadores que lo han hecho posible, desde el Departamento de Informática de la UAL, han sido Antonio De Toro, Marcos Lupión, Vicente González, Juan Francisco Sanjuan y Pilar Martínez. Además de al grupo SAL, pertenecen al CEINSA, Centro de Investigación en Salud de la Universidad de Almería.
Control de un hogar inteligente con lengua de signos
Mediante una cámara y el uso de redes neuronales, el sistema capta los movimientos del usuario. Para garantizar su privacidad, las imágenes reales no se guardan, sino que en su lugar se transforman en representaciones simplificadas de la estructura del cuerpo y las manos.
De esta manera, la inteligencia artificial procesa los signos para entender qué se está pidiendo, permitiendo al usuario dar órdenes concretas como encender luces, bajar persianas o controlar el aire acondicionado dentro del entorno de casa inteligente de la Universidad de Almería. Además, como no existían bases de datos específicas de lengua de signos para el control del hogar, los investigadores han tenido que grabar y crear su propio conjunto de datos para entrenar al sistema.
El trabajo con el que el grupo de la UAL revoluciona el control del hogar inteligente con Lengua de Signos Española ha sido publicado como capítulo de libro en las actas del congreso ISAmI 2025).
Sistemas controlados por voz
Hasta esta aportación de la UAL, la forma más común de interactuar con las casas inteligentes ha venido siendo a través de asistentes controlados por voz, como por ejemplo Alexa de Amazon o Google Assistant. Sin embargo, y a pesar de esta clara necesidad de crear tecnología inclusiva, existen muy pocas soluciones tecnológicas adaptadas para los usuarios de lengua de signos.
Con la motivación de romper estas barreras y conseguir entornos verdaderamente accesibles, este proyecto dio sus primeros pasos a raíz del Trabajo de Fin de Grado (TFG) de Antonio de Toro Castro en su último curso del Grado en Ingeniería Informática.
Para hacer realidad esta iniciativa y solventar la falta de recursos técnicos previos, el equipo ha desarrollado también una plataforma web complementaria, que ha sido una pieza clave desde el principio al permitir grabar nuevos signos de forma sencilla y así crear una base de datos propia. Gracias a ello, los investigadores pueden entrenar, refinar y ampliar de forma continua el vocabulario que es capaz de reconocer la inteligencia artificial.
Un paso adelante en la inclusión de personas sordas
A corto y medio plazo, estos resultados prometen mejorar significativamente la inclusión de las personas con discapacidad auditiva, reduciendo su dependencia de otras personas u otro tipo de interfaces para tareas cotidianas. Al facilitarles así el control directo de dispositivos domésticos como climatización, ventanas o iluminación, mediante su propia lengua, se fomentan entornos más accesibles y autónomos Dado que el sistema protege la privacidad del usuario, al no procesar caras ni características personales, y es capaz de funcionar en tiempo real, tiene un gran potencial para implementarse de forma práctica en entornos reales.
Estos investigadores tienen previsto ampliar los signos que reconoce el sistema para permitir órdenes más complejas y optimizar de este modo la tecnología para que funcione en dispositivos más pequeños y eficientes. Además, el alcance del proyecto no se queda solo en domótica. De hecho, a raíz de esta investigación el equipo ha registrado la propiedad intelectual de la plataforma INSIGNIA. Lo verdaderamente interesante de esta herramienta es que reutiliza la misma inteligencia artificial creada para el control del hogar, pero adaptándola para enseñar lengua de signos de forma interactiva. Así, la investigación da un paso más hacia la inclusión, abriéndose camino también en el ámbito educativo.
