Reconocimiento de un lenguaje gestual para consultas en cubos de datos

Abstract

En esta tesis se desarrolla una forma alternativa de interacción humano con las manos representado operaciones de OLAP, Procesamiento Analítico en Línea «On-Line Analytical Processing». El reconocimiento de gestos dinámicos se logra utilizando un dispositivo de captura de imágenes 3D que permite obtener una matriz de profundidad por cada cuadro «frame» con lo que el posteriormente se realiza un proceso de segmentación de regiones de interés «ROI, Regions Of Interest» en un promedio de 5.2 centésimas de segundo. Los objetos de las ROI aislados se usan en dos procesos principales: aprendizaje de patrones y clasificación. El primero utiliza técnicas de agrupación «clustering» para obtener patrones que se usan en el segundo proceso para identificar en cada cuadro su patrón correspondiente. Durante la identificación se identifican secuencias de patrones para reconocer los gestos dinámicos de las operaciones OLAP. Las operaciones OLAP reconocidas se utilizan para hacer consultas en cubos de datos. En esta tesis se muestran pruebas con datos públicos de estadísticas agropecuarias y del rendimiento de estudiantes de una universidad. Las pruebas muestran que con esta propuesta el procesamiento de las señas permite que se realice en tiempo real por lo que representa una alternativa viable a los recursos de interacción humano-computadora actuales.