Detección de manos y reproduccion de sonidos con MediaPipe

En este video, te muestro cómo detectar las manos usando MediaPipe y reproducir sonidos según el movimiento de los dedos. Cada vez que bajes un dedo, se activará una nota musical, como si estuvieras tocando un teclado virtual.

El objetivo será tocar la intro de Final Countdown de Europe

00:00 Introducción
01:19 ¿Qué es el computer vision?
01:42 Proyecto a desarrollar con MediaPipe
03:00 Creación del ambiente virtual
04:27 Instalación de dependencias 'MediaPipe, OpenCV y Pygame'
06:18 Importaciones
06:34 Inicialización de módulos
08:21 Cargue de sonidos con Pygame
10:02 Deteccion de manos y dedo abajo
10:24 Hand Landmarker
13:29 Funcion para detectar si un dedo esta abajo
15:47 Captura de frames con OpenCV
16:44 Creación de context manager mp_hands
18:33 Logica de estados de dedo
19:44 Definicion de while para la constante captura de frames
21:26 Transformaciones al frame cv2.flip y BGR2RGB
23:41 Deteccion de manos con MediaPipe
24:46 Graficacion de Landmarks con draw_landmarks
29:02 Resultado de detaccion de manos con MediaPipe
31:50 Reproduciendo sonidos con Pygame
39:48 Resultado de reproduccion de sonido con los dedos
41:29 Agradecimientos

Link de notas: https://drive.google.com/drive/folders/1e_3vf0qJCbirc35zGmoCLFXyzebrj-k2?usp=sharing
Documentacion: https://ai.google.dev/edge/mediapipe/solutions/vision/hand_landmarker

Buy me a Coffee: https://www.buymeacoffee.com/pilprogramacion

Discord: https://discord.gg/jBVM2HEyuP
Instagram: pildoras_de_programacion
Tiktok: pil_programacion
Facebook: facebook.com/pildorasprogramacion
Youtube: pildorasdeprogramacion

Видео Detección de manos y reproduccion de sonidos con MediaPipe канала Pildoras de programación