Animación
Retargeting de mocap en Unreal Engine 5: lo que hay que arreglar después
El retargeting tiene fama de paso mágico: eliges la captura, eliges el esqueleto de destino y el personaje se mueve. Se mueve, sí. Pero entre que se mueve y que está listo para entregarse hay un trabajo que no sale en los tutoriales y que, si el esqueleto no está bien preparado, se lleva la mayor parte del tiempo.
En resumen
En Unreal Engine 5, el retargeting pasa la animación de un esqueleto a otro y la ajusta a su tamaño y sus proporciones, pero eso no garantiza que funcione bien en el personaje que la recibe. Con Tadeo Jones, el mocap llegó sobre el esqueleto de Mocaptury y, tras retargetearlo a un rig propio montado sobre el mannequin, hubo que corregir timing, poses y acciones enteras con additive layers en Control Rig.
Una captura que no se grabó para tu personaje
En las grandes producciones, la captura suele planificarse y ajustarse a cada personaje. Pero en muchos proyectos, sean videojuegos, series, publicidad o televisión, el mocap llega grabado para otro cuerpo, no para el personaje que lo va a llevar. Con Tadeo Jones, la captura venía sobre el esqueleto de Mocaptury, y el personaje lo había montado yo desde cero sobre el esqueleto mannequin de Unreal Engine 5, con Control Rig. Dos esqueletos distintos y dos semanas para tenerlo en antena.
Montar el rig sobre el mannequin ayudó, porque el sistema de retargeting del motor ya está pensado para ese esqueleto. Pero el mapeo no fue directo. Los ejes del esqueleto que usamos para la captura eran distintos a los de Unreal, y eso dio bastantes problemas: tuve que ajustar muchas cosas hasta que la animación pasó bien al personaje. Si un mocap llega de otro sistema, es lo primero que conviene revisar.
Lo que el retargeting no arregla
El retargeting ajusta el movimiento al tamaño y las proporciones del personaje, pero no sabe nada de cómo se mueve. Lo que funciona en el cuerpo del actor de captura no siempre funciona en un personaje con otras proporciones y otra forma de moverse, y eso hay que resolverlo a mano.
Mucho de ese trabajo se puede ahorrar antes, en la captura. La actuación para mocap es un oficio en sí mismo, y una interpretación pensada para el personaje evita muchas horas de corregir animación después.
En este caso tocó:
- ajustar el timing de varias acciones;
- mejorar poses que en la captura se quedaban a medias;
- modificar alguna acción entera;
- exagerar unos movimientos y reducir otros;
- añadir detalles que la captura no traía.
Y partíamos con desventaja: la calidad del mocap no era muy buena y el tiempo era muy limitado, así que llegar a un resultado emitible costó bastante. Lo más complicado fue unificar los distintos ciclos de animación para que funcionaran juntos, y limpiar los pies para que los contactos con el suelo quedaran lo mejor posible.
Corregir encima, no debajo
Todo ese trabajo lo hice con un control rig por layers: additive layers encima de la animación retargeteada, sin tocar la base. Si una corrección no funciona, se quita la capa y la captura sigue intacta. Si el cliente pide otro ajuste, se añade otra.
Es la diferencia entre limpiar un mocap y rehacerlo. Así puedo cambiar posturas, peso o timing sin volver a animar nada desde cero cada vez que algo no funciona.
Mocap en bruto, recién retargeteado al personaje.
Otro fragmento, ya corregido con additive layers en Control Rig.
Dos versiones del motor
El rig y la animación los trabajé en Unreal Engine 5.7, por las mejoras que trae en rigging y en Control Rig, pero la pieza se integró en el formato de realidad aumentada del informativo, que funcionaba sobre Unreal Engine 5.3. Un proyecto no se puede migrar directamente a una versión anterior del motor, pero eso no fue un problema: con el mismo rig en las dos versiones, basta con exportar la animación en FBX e importarla en la otra.
El retargeting es el principio
Lo que decide si un mocap funciona en tu personaje no es el retargeting, es todo lo que pasa después: cuánto hay que corregir, cuánto se tarda y si se puede hacer sin romper lo que ya funciona. El resultado completo lo cuento en cómo llevé a Tadeo Jones a la realidad aumentada.
¿Tienes mocap que no termina de funcionar en tu personaje? Es parte del trabajo que hago como Technical Artist en Unreal Engine, y estoy disponible para proyectos freelance. Escríbeme y cuéntame qué tienes.
¿Necesitas Unreal Engine funcionando en un directo, o un animador que también resuelva la parte técnica? Estoy disponible para proyectos freelance.
HablemosServicio relacionado: Animación 3D para cine y series →