Interfaz gráfica para traducción de Lengua de Señas Colombiano (LSC) usando Python

Abstract

El objetivo de este proyecto es crear una interfaz gráfica que realice la traducción del lenguaje de señas colombiano mediante el uso del lenguaje de programación Python aplicado al desarrollo de redes neuronales convolucionales. Este trabajo se realiza con el fin de mitigar las dificultades que se presentan en una comunicación entre personas con y sin dificultades auditivas. Para cumplir este propósito se crea un amplio conjunto de datos capturando alrededor de 5000 imágenes por seña. Con este conjunto se diseña una red neuronal convolucional de 13 capas que permite entrenar el modelo el cual realiza la predicción de la seña. La interfaz se ejecuta en tiempo real con un botón de encendido y apagado de la cámara para iniciar y finalizar la predicción y cuenta con diferentes botones interactivos que permiten al usuario conocer el uso y funcionamiento de la interfaz, además de permitir mediante botones conocer cuál es la representación de cada letra del alfabeto en lengua de señas, haciendo la aclaración que solo se trabaja con 21 de las 27 letras del alfabeto, debido a que su traducción es una seña estática. Este proyecto representa una contribución en la inclusión de personas con discapacidad auditiva, generando una reducción a la brecha social presente en esta minoría. Además, de su contribución al campo tecnológico, en especial en el proceso de innovación e inmersión a la inteligencia artificial en la región del Huila.