HAND CONTROLLER V2: VISIÓN ARTIFICIAL PARA LA DETECCIÓN DE GESTOS DINÁMICOS CON LAS MANOS PARA LA INTERACCIÓN HUMANO COMPUTADORA
hand controller v2: dynamic hand gesture detection for human-computer interaction based computer vision

CIADE-IT / Ing. Informática /

Informática y Telecomunicaciones

Fortalecer el vínculo entre las universidades participantes, en pos de trabajar colaborativamente en la línea de investigación de visión artificial para el desarrollo de sistemas interactivos.

La visión artificial ha logrado automatizar la capacidad visual humana y sus implementaciones avanzan día a día. Se aplica diversos ámbito, entre los cuales se encuentran aplicaciones en la interacción humano-computadora sin requerir sistemas de mando como teclado, ratón o pantalla táctil. En este proyecto se presenta una solución que reconoce los gestos de las manos mediante la utilización de una cámara web estándar. La propuesta es la continuación de un proyecto consolidado como trabajo de tesis doctoral, con colaboraciones internacionales y publicaciones científicas de impacto. El estado actual del proyecto contiene el diseño de una red neuronal artificial que procesa la información extraída de las imágenes en donde un usuario puede mostrar sus manos haciendo distintos gestos y en base a ello controlar dispositivos y computadoras. Se dispone de un modelo de visión artificial entrenado e implementado en una aplicación que lleva como nombre Hand Controller. La evaluación del modelo muestra una tasa de aciertos del 99,87% en el reconocimiento de nueve gestos estáticos con las manos. En este proyecto de investigación se busca ampliar las capacidades del modelo para adquirir la identificación de gestos dinámicos. Los cuales permitirán dotar de una capacidad de identificar los gestos realizados en una ventana de tiempo.

Computer vision has managed to automate the human visual capacity and its implementations are advancing day by day. It is applied in various fields, among which are applications in human-computer interaction without the need for control systems such as keyboard, mouse or touch screen. This project presents a solution that recognizes hand gestures using a standard webcam. The proposal is the continuation of a consolidated project as a Ph.D. thesis, with international collaborations and scientific publications of impact. The current state of the project includes the design of an artificial neural network that processes the information extracted from images where a user can show his hands making different gestures and based on that control devices and computers. An artificial vision model trained and implemented in an application called Hand Controller is available. The evaluation of the model shows a 99.87% success rate in recognizing nine static hand gestures. This research project aims to extend the capabilities of the model to acquire the identification of dynamic gestures. This will provide the ability to identify gestures that are performed in a time window.

Visión Artificial; Redes neuronales artificiales; Interfaces Naturales de Usuario
Computer vision; Artificial neural networks; Natural User Interface

UBP

CESAR ALEJANDRO OSIMANI /

AGUSTÍN FERNANDEZ / DIEGO ALEJANDRO BARRAGÁN VARGAS /

LUCIANO HUGO PAULON / NELSON FABIAN GERONIMO /

Universidad Tecnológica Nacional FRC