Empresa de tecnología creativa Giantstep proporcionó una serie de VFX y tomas de animación para el nuevo video musical del grupo K-Pop aespa para salvaje, su primer mini álbum, que superó los 100 millones de visitas en 17 días. Continuando con la tradición ficticia del grupo de chicas y su llamado para derrotar al villano, Black Mamba, el video cuenta la historia de cómo aespa conoció a nævis, un personaje de IA, que ayuda a los avatares de aespa a aparecer en el mundo real.
Al llevar el K-Pop al metaverso, SM Entertainment concibió al grupo para trascender los mundos real y virtual a través de una variedad de experiencias en vivo y digitales. El video musical combina estos mundos mientras aespa actúa en entornos CG dinámicos y coloridos.
Giantstep creó los personajes animados de aespa en 3D con su tecnología patentada que combina fotogrametría, renderizado en tiempo real y captura de movimiento. Si bien los datos de mocap proporcionaron una base para animar los movimientos generales de aespa, el equipo de animación de la compañía tuvo la tarea de hacer que sus movimientos fueran más realistas y sincronizados con los miembros reales del grupo, e igualmente con estilo.
Para crear los avatares de baile animados que actúan junto a los miembros de aespa de acción en vivo, Giantstep combinó la captura de movimiento y la captura facial. Aquí, el equipo implementó un efecto similar a un vóxel cúbico, haciendo referencia a Glitch de Rompe Ralph. Para nævis, que fue animado a mano en el video musical, se utilizó la plataforma facial Metahuman de Unreal Engine, lo que le permitió al equipo mostrar una variedad de expresiones faciales como la de un humano.
Adéntrate en el Metaverso … ¡estilo K-Pop!
Trabajando con SM Entertainment en la franquicia aespa desde sus inicios, Giantstep ha proporcionado tomas de efectos visuales para todo, desde teasers hasta videos musicales y una actuación virtual en El show de Kelly Clarkson, además de colaborar en lo que se anunció como la primera experiencia de concierto virtual de pago del mundo. Producido durante el inicio de la pandemia, el concierto virtual aceleró el desarrollo de la tecnología XR Concert, que combina técnicas de producción virtual con renderizado y animación en tiempo real. Estas colaboraciones ayudaron a crear las bases para que SM Entertainment construyera un universo completo de personajes y contenido de aespa con Giantstep proporcionando todo, desde el desarrollo de personajes y entornos hasta un lenguaje de movimiento auténtico que refleja los rasgos fundamentales, movimientos y expresiones emocionales de cada personaje.
Los fanáticos probaron el mundo fantástico y multidimensional de aespa cuando SM Entertainment estrenó el episodio uno de su serie web. Black Mamba – SM Culture Universe protagonizada por aespa la pasada primavera. El primer episodio ha obtenido más de 10 millones de visitas hasta la fecha.
Giantstep ha construido una biblioteca de materiales y una canalización semiautomática que permite que los personajes existentes se actualicen automáticamente para cada toma sin tener que especificar un nuevo material para cada escena. El equipo también ha desarrollado una serie de mapas de textura, sombreadores de materiales y simulaciones para todo, desde diseños de vestuario hasta detalles del cabello. El trabajo sobre el personaje nævis sigue en curso.
“SM Entertainment está redefiniendo el entretenimiento tal como lo conocemos al extender el alcance de su audiencia a través de la convergencia del mundo real y virtual”, comentó el director creativo de Giantstep, Heebok Lee. “Es increíblemente emocionante ayudar a hacer realidad sus ideas al tiempo que incorporamos nuestros propios avances en la producción virtual. Esperamos continuar nuestra colaboración con SM en torno a la franquicia aespa y romper nuevos límites donde el entretenimiento y la tecnología se cruzan “.
Fuente: Giantstep