SISTEMA TRADUCTOR SIMULTÁNEO DE SEÑAS A VOZ MEDIANTE UNA INTERFAZ NATURAL DE USUARIO PARA PERSONAS CON DISCAPACIDAD

Abstract

El presente documento es el detalle del desarrollo del proyecto denominado Sistema Traductor de Gestos. El proyecto se viene realizando desde hace más de un año y tiene como finalidad la comunicación con personas con discapacidad de habla por medio de una interfaz NUI que permite el reconocimiento de gestos para luego traducirlos a voz. El proyecto en sí cuenta con varias etapas, de las cuales la primera etapa fue cumplida por los estudiantes de la Universidad Internacional SEK, Mario Mauricio Silva Granda y José Luis Amador Abedrabo quienes desarrollaron el prototipo del sistema. Para el desarrollo del presente trabajo se tomó como base dicho prototipo y se buscó mejorar el sistema en todos los aspectos además de cubrir las falencias presentadas en la primera etapa. El sistema se desarrolló con varias características que permitieron alcanzar este fin como por ejemplo con la implementación de detección de manos y dedos, el reconocimiento de movimiento, y la interpretación de varios puntos del cuerpo que antes no se detectaban. Esto se consiguió con la ayuda del sensor Kinect v2 junto con su respectivo SDK y programando un nuevo código y diseño del sistema en lenguaje C# por medio de la API Visual Studio 2012 de Microsoft. Las mejoras en el sistema representaron una significativa mejora en eficiencia y velocidad del sistema en relación con su prototipo.