Control gestual del vuelo de UAV con técnicas deep learning de video

Abstract

En este proyecto se detalla el desarrollo e implementación de un algoritmo de reconocimiento gestual en un UAV comercial, con el objetivo de que realice diferentes movimientos en función de gestos reconocidos como ‘DESPEGA’, ‘GIRA’, ‘ATERRIZA’ o ‘ROTA’. El sistema propuesto se compone de un entorno virtual para pruebas, un modelo preentrenado de visión artificial y un dron de bajo coste que permite una comunicación con el sistema a través de una API disponible en Python. El desarrollo del proyecto se ha seguido mediante una metodología incremental, comenzando por la definición y captura de datos, seguida de su implementación en un modelo pre-entrenado de visión artificial que funciona en modo off-board. Se realizaron pruebas de funcionalidad en tiempo real, comenzando con una implementación simple y escalando hasta conseguir el control gestual del UAV. El resultado ha sido una solución funcional, con cierta precisión y rendimiento empírico que cumple los objetivos establecidos en cuanto a reconocimiento gestual y control autónomo del dron