Sordo --> MoCap --> Avatar

Buenas a tod@s!

Estoy intentando que un avatar pueda mover a partir de las personas sordas físicamente a traves de la cámara directa (o también desde el video), con cualquier software, de pago si es necesario, o de gratuito también va bien.

Por ejemplo, desde Blender, he hecho la captura de movimiento (mocap) con el complemento “PosePipe”, se salen bien los puntos de cara, de cuerpo y de las manos. Pero no puedo asociar al avatar o RIG, no sé qué le falta para conseguirlo bien. Ver la siguiente foto:

No sé si lo he hecho bien.

Me gustaría saber todos los pasos para conseguir un avatar con el mismo movimiento de cuerpo, de cara y de las manos a la vez de las personas sordas con lengua de signos española, con los labios vocalizados y también formas de expresión de aspecto, igual con la comunicación corporal, en el video al final.

Por ejemplo,

Paso 1 “Entrada”: A través del archivo de video, y también desde la cámara directa

Paso 2 “Generar”: MoCap y Avatar (o otra cosa)

Paso 3 “Salida”: Video con el avatar donde pueda mover como la captura de movimiento (mocap)

“Sistema operativo”: Windows (Opción: macOS)

No sé si me explico bien, siento mucho mi expresión escrita. Reconozco perfectamente que tengo limitaciones y no puedo expresarme totalmente claro porque soy una persona sorda. Si tienes alguna duda, me lo dices para aclarar poco a poco.

Espero vuestra ayuda.

De todos modos, podéis añadir algunos enlaces relacionados también.

Muchísimas gracias, LuisFer