Resumen

Este artículo presenta un sistema de visión basado en Kinect para un robot de rescate minero que trabaja en un entorno subterráneo iluminado. El sistema somatosensorial de Kinect se utiliza para realizar el reconocimiento del gesto de la mano que implica el gesto estático de la mano y la acción. Se propone un método de detección convexa basado en la curvatura K para ajustar el contorno de la mano con un polígono. Además, la acción de la mano se completa mediante el uso de la biblioteca NiTE con el marco de reconocimiento de gestos de la mano. Además, el método propuesto se compara con la red neuronal BP y la coincidencia de plantillas. Además, aprovechando la información del mapa de profundidad, se establece la interfaz de reconocimiento de gestos de la mano para la interacción hombre-máquina del robot de rescate. Los resultados experimentales verifican la eficacia del sistema de visión basado en Kinect como tecnología viable y alternativa para la HMI del robot de rescate de minas.

• Materias:Biotecnología Nanotecnología Redes de sensores Sistema de sensores Tecnología de sensores
• Subjects:Biotechnology Nanotechnology Sensor networks Sensor system Sensor technology
• Palabras claves:reconocimiento del gesto de la mano, robot de rescate minero, kinect, sistema de visión, método de detección convexo, interacción hombre-máquina, entorno subterráneo iluminado, gesto estático de la mano, adición, resultados experimentales
• Keywords:hand gesture recognition, mine rescue robot, kinect, vision system, convex detection method, human machine interaction, illuminous underground environment, static hand gesture, addition, experimental results