AJA lleva las señales 12G-SDI de WePlay a Unreal Engine 5 para unir el mundo real y el virtual

WePlay Studios, especializada en la producción de contenidos de eSports, ha consolidado un flujo de trabajo de retransmisión de eventos en directo en el que se difuminan las barreras de lo digital con el procesamiento de imágenes procedentes de canales 12G-SDI a través del motor gráfico Unreal Engine 5 con soluciones AJA.

Con sedes en Kiev (Ucrania) y Los Ángeles (California), WePlay fusiona contenidos de videojuegos y la narrativa para crear retransmisiones de torneos de eSports de títulos de primer nivel (Dota 2, CS:GO, Valorant y Rocket League), así como producciones de eventos en directo como los premios VTuber, para los que su equipo realizó una producción virtual completa el año pasado. Organizado por el personaje virtual Filian en colaboración con la agencia de gestión de talentos Mythic Talent, el evento, de cinco horas de duración, rindió homenaje a los mejores creadores virtuales en línea.

WePlay Studios ayudó a llevar el evento a audiencias de todo el mundo con una emisión virtual, combinando instalaciones y equipos de producción físicos con una amplia ingeniería y diseño de producción virtual. En palabras de Aleksii Gutiantov, responsable de producción virtual: “Si bien ya habíamos incorporado anteriormente la RA en producciones de esports en vivo, este espectáculo marcó nuestra primera incursión en un evento completamente virtual gestionado con señales virtuales; es el esfuerzo tecnológico más desafiante que hemos asumido”.

Para llevar a buen puerto el evento, Gutiantov dirigió y coordinó la producción en Los Ángeles a distance desde su ordenador portátil en Europa, utilizando la comunicación por intercomunicador con más de 16 miembros del equipo y orquestando ocho días de preproducción ininterrumpida para realizar la emisión. Su equipo creó primero un renderizado en tiempo real de un Filian totalmente virtual para incorporarlo a la producción en directo mediante tecnología de captura de movimiento (mocap). Posteriormente, emplearon 20 cámaras testigo para captar la actuación de todo el cuerpo, incluidos los movimientos precisos de los dedos, y la combinaron con tecnología adicional para transmitir datos de captura de movimiento facial.

La retransmisión en directo del evento incluía un vasto escenario virtual, pero el personaje de Filian estaba situado en un escenario más pequeño, rodeado por una versión reconstruida digitalmente del escenario físico de WePlay en Los Ángeles. Para garantizar que todos los movimientos físicos de giro, inclinación y enfoque se trasladaran directamente al entorno virtual, los operadores de cámara de WePlay Studios manejaron tres cámaras sincronizadas con cámaras virtuales. Los operadores de cámara en el plató físico podían cambiar entre varios ángulos dentro del estadio virtual utilizando iPads conectados a cámaras virtuales, creando la ilusión de utilizar una docena de cámaras en lugar de tres.

AJA en el mundo virtual de WePlay

Para que la producción pareciera más auténtica, WePlay Studios conectó las luces físicas del escenario a las luces virtuales correspondientes, lo que permitió al equipo manipular el entorno de iluminación del estadio virtual mediante la activación de un entorno real a través de una consola de control de iluminación. La reproducción de vídeo también se integró en el mundo virtual, con software para visuales de eventos en directo conectado al recinto virtual utilizado para lanzar y controlar los gráficos mostrados en las pantallas del escenario virtual. Las tarjetas de E/S de vídeo AJA Kona 5 desempeñaron un papel crucial en la cadena de señal 12G-SDI, y la alimentación SDI final se reenvió a un enrutador de vídeo AJA Kumo 3232-12G para su disponibilidad en todo el canal de emisión.

“Nuestras tarjetas Kona 5 fueron fundamentales para permitirnos recibir señales 12G-SDI, integrarlas en un entorno Unreal Engine 5 y componer el final en SDI. Es el mejor producto del mercado”, explica Gutiantov”. “Además, nuestros routers Kumo nos permiten crear infraestructuras para grandes producciones remotas e in situ como ésta y gestionarlo todo desde una única y cómoda interfaz web a miles de kilómetros de distancia. También nos encanta que podemos guardar configuraciones de enrutamiento de salvas preprogramadas para señales SDI, y nunca tenemos que preocuparnos de que se caigan; he estado trabajando con ellos desde 2017 en varios proyectos, y nunca me han fallado”, añade.

Uniendo Kona y Unreal Engine 5

Coin 5 permitió al equipo de WePlay Studios aprovechar la potencia de Unreal Engine para crear un completo centro de producción virtual capaz de gestionar flujos de trabajo 12G-SDI. Esto les permitió aprovechar al máximo el potencial de la tecnología de realidad aumentada: desde el seguimiento de la cámara, hasta la captura de movimientos y los gráficos basados en datos, garantizando al mismo tiempo emisiones de producción virtual en directo sin ningún percance técnico en la composición. También les permitió producir señales de relleno y key UltraHD desde una tarjeta en todos los formatos conocidos, utilizando Pixotope como keyer para 4K con las funciones de failover conocidas de los flujos de trabajo FHD.

“Kona 5 ayuda realmente a acelerar las operaciones en proyectos como éste, que requieren mucha potencia de cálculo para el desentrelazado adaptado al movimiento. Además, el procesamiento de hardware multicanal de la tarjeta aceleró las operaciones de cálculo intensivo para que pudiéramos combinar varias fuentes de vídeo en una sola salida en Unreal Engine 5, subir/bajar/cruzar la escala y mezclar/componer para todas las resoluciones. Estos procesos son esenciales para manejar contenidos de vídeo de cualquier resolución, garantizando que la salida final cumpla los estándares de calidad de emisión”, explica Gutiantov.

Otras soluciones AJA en los eventos virtuales de WePlay

Además de Coin 5 oui Kumo, WePlay también utilizó grabadores Ki Pro Ultra 12G de AJA para cumplir los estándares de grabación de alta calidad que exigía el proyecto: “La flexibilidad y fiabilidad de nuestros grabadores Ki Pro Ultra 12G eran esenciales. Los dispositivos son indispensables; nos permiten grabar en HD multicanal o en UltraHD monocanal, y podemos cambiar los soportes de grabación sobre la marcha, lo que resulta cómodo y fiable, especialmente para las emisiones en directo de largo formato y cuando los clientes necesitan materiales UltraHD de alta velocidad de bits para la postproducción. Además, siguen funcionando sin problemas durante más de 12 horas consecutivas”, traslada el responsable de producción virtual de WePlay.

El equipo de WePlay también desarrolló una infraestructura de previsualización que comprendía una serie de miniconvertidores para facilitar la conversión descendente de la señal 12G-SDI y reenviar las señales 3G-SDI a su router de vídeo AJA Kumo. Utilizando amplificadores de distribución SDI AJA HD5DA, el equipo pudo distribuir las señales de previsualización por todos los monitores del estadio para una gestión más sencilla de todas las señales de previsualización. La configuración, que también utilizó configuraciones de enrutamiento salvo para señales SDI independientemente de la naturaleza de la fuente de datos, permitió un control preciso sobre la vista de la producción que WePlay Studio proporcionó a sus socios, talentos, operadores de cámara, equipo de captura de movimiento y todo el equipo de producción en cualquier momento. Los miniconvertidores DisplayPort a SDI ROI-DP de AJA resultaron ser una parte clave de este diseño de infraestructura de previsualización, permitiendo al equipo duplicar monitores de ordenador en la canalización de emisión para gestionar la conversión con escalado de región de interés.

El intrincado montaje de la producción de los premios VTuber de WePlay Studios es sólo uno de los muchos ejemplos de cómo la tecnología de producción virtual está transformando las experiencias del entretenimiento moderno. Según Aleksii Gutiantov, el nivel de interactividad que aporta abre nuevas posibilidades para los géneros del entretenimiento en directo, difuminando los límites entre los espectadores y los mundos virtuales que creamos. “WePlay no se limita al sector del videojuego, sino que se abre a la música y al entretenimiento en general. Actualmente estamos en las primeras fases de planificación y discusión de proyectos que abarcan estas nuevas fronteras”, concluye.

D'autres articles sur AJA, Moteur irréel, WePlay