robot markovito4
TRANSCRIPT
![Page 1: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/1.jpg)
Ven
Atención
Derecha
Izquierda
Alto
![Page 2: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/2.jpg)
Reconocomiento de ademanes
• Extracción de características
• Modelado
• Reconocimiento
Imagenes EC Carateríst. R
M
Ademanes
![Page 3: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/3.jpg)
Seguimiento y Ejecución de Comandos
Localiza cara y mano Seguimiento de la mano
![Page 4: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/4.jpg)
Características de postura y movimiento
(0,0)x
y
Image t
..
y'
x'
a = 0
x = +
y = –
form = +
Image t+1 Above
Right
Torso
![Page 5: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/5.jpg)
Reconocimiento Ademanes
Seguimiento de la mano Control por gestos
![Page 6: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/6.jpg)
Síntesis y reconocimiento de voz
• Usamos herramientas estándar: Festival para síntesis y Sphinx para reconocimiento con el corpus para Español desarrollado en el proyecto Dimex
• Para mejorar el reconocimiento, incorporamos modelos probabilistas de lenguaje obtenidos de ejemplos de interacciones en las diferentes aplicaciones (Mago de Oz)
• Para mejorar la señal incorporamos un micrófono direccional y un filtro
![Page 7: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/7.jpg)
Interfaz Amigable
A través de su cara animada, Markovito puede expresar diversas emociones, lo que facilita la comunicación
![Page 8: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/8.jpg)
Reconocimiento de Objetos• Se enseña un nuevo objeto al
robot quien obtienen sus características SIFT y guarda un nombre dado con voz
• El robot después busca el objeto que se pide por voz empatando características SIFT de los objetos que ve
![Page 9: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/9.jpg)
Identificación de personas
• Basada en el reconocimiento de siluetas
• Segmentación con base en distancia usando la cámara estéreo
• Identifica personas paradas, sentadas, de frente y de perfil
![Page 10: Robot Markovito4](https://reader035.vdocuments.co/reader035/viewer/2022062514/5589c382d8b42a5c7f8b4615/html5/thumbnails/10.jpg)
Detección de rostros