martes, 11 de enero de 2011

Aventuras con el Mocap

Que tal!

Hoy quiero postear unas pruebas que hice hace algun tiempo, en este caso hablamos de mocap facial.

Para los nuevos en todo esto, Mocap es una técnica que consiste en la captura de movimientos para aplicarlos a una geometría 3D, pudiendo ser un personaje o un objeto.

Hay distintas técnicas para realizarlo pero en este caso hablamos de Mocap facial. Usando puntos pegados en el rostro, unas cámaras especiales y un software específico logramos pasar la animación del rostro a la malla de hombre fortachón.

Como toda investigación, pasé por distintos programas y técnicas para lograr lo necesario, en resumen:

1) Captura de movimientos con el sistema de Mocap Optitrack. Para eso usamos un software llamado Arena expression.

2) Exportamos la información Mocap en un formato que reconozca la aplicación Face Robot, que viene en Softimage desde la versión 2010 si no me equivoco.

3) En Facerobot utilizo un rostro predeterminado, lo preparo para mocap (con un procedimiento propio del software) y le aplico la animación. En este caso, luego de eso hay que hacer algunos ajustes como los parpadeos (por eso a veces no coincide) y algunas cosas más.

4) He aquí una bifurcación. En mi caso, exporté la malla a max, luego exporté la animacion de Face Robot en mdd, lo converti a pc2 (el formato del Point caché de Max) y a hacer render. El otro método era exportar el rig animado a Maya, pero como en esa época no usaba Maya, no lo hice. Espero probar eso pronto.

También aprendí que la única manera de obtener fidelidad en el mocap es no capturar lapsos mayores a 30 segundos. En los video que logré, capturé canciones completas, cantándolas para referencia de lo que quería decir en el momento. Y al ser estas de 4 minutos en muchos tramos se desincroniza ya que al ajustar el mocap para una determinada expresión, se desajustaba para las demás.

A mi parecer el mejor logrado es el Test 4, no es perfecto, pero para el tiempo que pude investigar y descubrir todo por mi cuenta creo que es un gran avance. (El tamaño de la boca del personaje nunca me permitió hacer la "o"... creo que con eso se hubiese visto mejor).

Mocap Proyect - Test 3 from Marco Bossio on Vimeo.



Mocap Proyect - Test 4 from Marco Bossio on Vimeo.



Hay otros 2 videos en mi web de Vimeo. Son los primeros que hice, sin cantar nada y se ven peor, pero ese es el proceso.

Entonces me despido pidiendo disculpas por alguna falla ortográfica pero el teclado y los ojos ya no dan para más.

No hay comentarios:

Publicar un comentario