Mocap por donde empiezo

[Sparky]

Hola niños y niñas. Me encuentro en la necesidad de hacer un motion capture. Y sinceramente no tengo ni zorra. Me han dado un video muy bonito con un tipejo que está haciendo sus cosas enfundado en un traje lleno de bolitas, y me han dado la orden de eso, bueno, que haga el motion capture y demás.

Tengo el muñeco muy bonito modelado, y tengo el rigging con su bonito CS que odio.

Ahora bien, no tengo ni idea ni de por dónde comenzar. No lo he hecho en mi vida una cosa así, me han dicho, es muy fácil (a lo que añado, claro, si sabes hacerlo es muy fácil, si no tienes ni idea como yo en este mismo momento, es una putada).
¿Sugerenciasí ¿tutoriales? ¿indicaciones de por dónde empezaré y no vale la de empezar por encender el 3dsMax, que ya está. Gracias por anticipado.

[Sumatra]

Vaya, yo flipo. Es como si tu jefe ve Titanic y te pide que le hagas uno. No me extraña que no sepas por dónde empezar.

Ten, estudia esta página, pídeles presupuesto y dile a tu jefe que cuando vaya al banco a pedir el préstamo, que lleve el cinturón desabrochado para ahorrar tiempo. http://www.vicon.com/.

[Caronte]

Eso, dile a tu jefe que hay una cosa que se llama pre-producción, que hay que tener en cuenta al equipo (o persona) que se va a encargar de un FX antes de lanzarse a la piscina sin tener ni idea y luego pretender que el tresdesero se encargue de hacer magia.

El Mocap calidad no solo necesita de las bolitas, sino que varias cámaras ir se deben encargar de recoger sus movimientos a alta velocidad para evitar el Motion Blur.

Con un solo video, o la secuencia es extremadamente sencilla y sin apenas oclusión, o ese Mocap será un infierno hasta para alguien experimentado.

[Sparky]

Lo mejor de todo es que en 3d, yo soy un enteradillo, vamos, que yo de experto en 3d no tengo nada. Animar, si, todo lo demás, dame un tutorial y veremos lo que se puede hacer.

Así que de infiernos creo que ya me los he recorrido todos los que decía dante. Y empiezo a sospechar que se olvidó alguno.

Ante todo hay que tomar las cosas con humor.

Bueno, veremos lo que se puede hacer, gracias por la web que ahora toca estudiar.

Por cierto, el video no es precisamente un buen ejemplo de grabación, tengo mis sospechas de que una cámara en mano con el síndrome de no tengo pulso, tampoco me resultara de gran ayuda. Así que igua toca trackear primero, sospechoso.

Pero bueno, ya veremos.

[ivanlobon]

Dile a tu jefe, que como mucho con ese material le puedes hacer una rotoscopia.

[ikerCLoN]

Hey, compañero. He trabajado más bien poco con captura de movimiento, pero como te dicen por aquí un vídeo con un tío vestido con un traje de bolitas de poco te sirve. Podrías trackear, sí, pero de nada te sirve si no tienes varios vídeos con varios puntos de vista para sacar algo tridimensional. No quieres que tú personaje 3d se mueva como un maldito recortable ahora mismo, en área, Autodesk, com hay en portada una serie de vídeos sobre cómo hacer Mocap facial con Maya. El resultado que muestran es algo chapucero, pero el procedimiento es lo que cuenta. Con una cara, como más o menos todo se mueve en el mismo plano, se podría tirar con una cámara. Con un cuerpo entero, como que no. Es como lo del CSI de oye, cambia el punto de vista de esa cámara de seguridad, uf, es difícil, pero lo voy a intentar. (tecleo, tecleo), ahí lo tienes. Tu jefe habrá visto demasiadas series policíacas chungas.

Así que lo que dice Iván: el material que tienes es insuficiente como para poder garantizar un mínimo de calidad. La próxima vez que filmen varios puntos de vista, o que se compren un kinect. Saludos.

[Caronte]

Sí, una cara es más fácil, yo lo he hecho hace poco con un solo video y se puede hacer, porque primero se trackea la cabeza como un objeto indeformable y después se proyectan sobre la malla los puntos de track conformaran las expresiones faciales. El problema como comenta IkerClon es que el tracker trata los movimientos de cada punto como planos y, aunque después los proyecte sobre una malla 3d (lo cual mejora el resultado) nunca se consigue un posicionamiento 100% correcto, porque la proyección se hace sobre una malla fija y por eso los gestos extremos cantan un poco.

[ikerCLoN]

Otra cosa que se puede hacer es usar la información 2d del trackeo facial para conducir unos cuantos joystick que disparan Morphs. Es una manera un tanto indirecta, pero hay varias bobinas disponibles por ahí donde se ve esta técnica.

[Caronte]

La putada es que ese sistema requiere de un Rig en toda regla con posibilidad de poder calibrarse para cada Mocap (casi necesariamente a mano) y, bueno, el tema no es solo que sea más costos o, sino que hay que ser un buen rigger.

En plan barato, lo mejor es filmar con dos cámaras, el resultado es perfecto y además se calcula fácil y rápido.

[sickman]

No sé si es la solución, pero para hacer tracking uso el Syntheyes. Aquí un video que hice, http://www.youtube.com/watch?v=sierbix9su, bastante feo y básico, pero es lo que hay.

Lo que se hizo fue rastrear puntos en la cara con el programa que le dije, para hacer un Mesh básico, y llevarlo al 3ds Max.

Ahí pones lo que quieras y eso tendrá como referencia el movimiento del Mesh.

De esta manera, y con una buena cámara y buena iluminación, debería seguir el principio de movimiento.

De los puntos en la cara y llevarla al movimiento del rig, quizás teniendo puntos claves de movimiento y ellos linkearlos a los dummies.

Que tengas para movimiento del rigg.

Cualquier duda o sugerencia escribela, para ver si era eso que te dije lo que pedías. Que la VDD no entiendo.

Mucho lo que quieres. Saludos.

[Caronte]

Sickman, yo uso synteyes profesionalmente y no se pueden extraer los puntos de trackeo que se mueven independientemente entre ellos, porque es precisamente esa relación entre ellos la que usa el programa para calcular su posición en el espacio.

Lo único que se puede hacer es lo que he explicado más arriba, o sea trackear la cabeza como un objeto solido (indeformable) y después trabajo los tracks de las expresiones sobre una malla para aproximar lo mejor posible el movimiento, pero eso es todo.

Posdata: ese trackeo que has puesto no sirve como ejemplo, porque (aparte de que no está correctamente trackeado) no tiene expresiones faciales salvo el movimiento de la mandíbula y el parpadeo que son cosas triviales.

[Sparky]

Mola. De la pregunta inicial, ha derivado la cosa a captura facial y cosas así. No me voy a quejar. En fin, muy interesantes los enlaces por la parte que me toca, pero al final me compliqué poco la vida, hice una rotoscopia si es que, a eso se le podía llamar así (por que acabé animando como toda la vida y odiando el 3dsMax al mismo tiempo que echaba de menos al Maya, las cosas como son,) y me quedó una cosa mu apañaita y bonita, eso sí, varios días sin dormir, pero no creo que nadie lo note. Que ya se sabe, los milagros a Lourdes, o bueno, yo también los hago, pero espero que ese maletín negro con esposas esta a rebosar de binlandens, que entonces, y solo entonces yo también hago milagros si hace falta.

Por lo demás, pues bueno, a estudiar todos esos enlaces que son interesantes.

Y en lo que era a mí pregunta, gracias por las respuestas. Ahora a seguir discutiendo de captura facial.

Posdata: Iker, caballero, revise usted su correo que hace seis meses le escribí y jamás obtuve respuesta, deduzco que si estas en el foro estas vivo, así que, aprovecho y te mando un abrazo, perdido, que eres un perdido.

[sergio230887]

Una pregunta, tracking lo he hecho dos veces máximo con el Boujou, o sea que no sé nada sobre ese tema, pero no sería más barato pintar la cara del personaje trackeado de blanco y negro en los puntos de interés para darle menos trabajo al software de tracking y así ahorrarte unos cuantos pesos por una cámara que no sea como las de avatar? Así consigues buenos puntos de tracking y de paso tienes un payaso de quien burlarte, sé que las bolitas blancas del Mocap son exactamente para eso, pero podrías evitar los movimientos bruscos y obtendrías un buen resultado.seguramente cambiaré de opinión cuando lo intente, pero quisiera saber que opinan, gracias y saludos a todos.