Realidades más profundas: vídeo volumétrico en cine y broadcast

In this tribune, Juan Molina, Art Director of Mixonreality, analyzes different ways in which volumetric video could offer interesting possibilities for all types of audiovisual productions, especially in the process of consolidation of AR, XR and VR technologies.

The Volumetric Video offers new Techniques and opportunities to develop audiovisual projects both in broadcast and in cinema. Volumetric captures bring us closer to the performance of a immersive way for the spectators, and a flexible way for artists and technicians when it comes to integrating this technology into their projects.

One of the most complex logistics points in film projects is the coordination of the Actors and recording times. Volumetric video gives creatives the Flexibility to use the performance from the point of view that is most convenient for the script, without the need to make new takes, since the performance is captured from every possible angle.

A 3D object that can be integrated into all types of productions

This capability is also very useful for the use of volumetric video in visual effects (VFX) as a 3D object that integrates into any post-production tool. Traditionally it is necessary coordinate the participation of secondary characters, but with this technology it is not necessary to move all the actors to the sets since it is possible to capture in a volumetric video studio and play back in the scene in post-production.

By having volumetric capture, it can be Integrate into the scene in any way that the vision of the work requires. For example, changing the Day or night lighting, of natural or artificial light, integrate it into the background of the scene as extra or in the Close-up as the protagonist. The limit is in the Hand of the Creator And therein lies the true potential of this tool.

The possibilities of volumetric video in VR and AR environments

The Volumetric Video Not only does it change how directors create content, but also how the Spectators can appreciate the works. The boundaries of the 2D screen can be jumped and the viewer can enter the scene to enjoy the performances from any point of view. The world of narrative is transformed because the scenes come to life and the viewer is able to Change the context and see what was previously hidden by the camera.

Traditionally, it is necessary to coordinate the Participation of secondary characters, but with the video volumetric no need the displacement of all actors to the Sets.

The narratives present in VR are shocking by their nature, but continue to be limited by their Unrealistic characters due to the reduced hardware capacity. Thanks to the Volumetric Production Tools, the captures can be replayed in Different levels of compute points depending on the scope and final platform. This allows us to compress a Realistic Capture for Hardware that is not capable of reproducing realistic characters with traditional 3D tools.

Volumetric captures can be considered not only for production use, but also as a Immersive and Emerging Marketing Tool. The audience on the street can be connected to the content using their own mobile devices, inviting them to learn more about the creative proposals in an unexpected way. A "hologram” reproducido con la cámara del móvil gracias a los avances de la tecnología AR nos permite traer estas capturas realistas a las palmas de las manos del espectador.

Superando retos día a día

Actualmente, la tecnología de video volumétrico continúa evolucionando y mejorando los desafíos que previamente limitaban su uso. La duración de captura de actuación está aumentando, y los tiempos de procesamiento de los archivos inmensos disminuyen gracias a las soluciones de cloud computing. De igual forma, los costes de producción son cada vez más económicos y sostenibles porque todo el proceso es más ágil.

A medida que esta technology continúa evolucionando, nuevas oportunidades de storytelling se presentarán tanto en el cine tradicional as in broadcast y en otros proyectos audiovisuales presentados en nuevos medios como XR/VR.

A medida que esta tecnología continúa evolucionando, nuevas oportunidades de storytelling se presentarán tanto en el cine tradicional as in broadcast y en otros proyectos audiovisuales presentados en nuevos medios como XR/VR. Los pioneros que se adelanten en este nuevo horizonte desarrollarán una gran potencia creativa en España y en el mundo entero. Las potenciales aplicaciones son infinitas, abarcando desde la educación y la medicina, hasta el entretenimiento y las artes.

Otro caso de uso para capturas volumétricas es la aplicación para personajes realistas de Video games, ayudando en la creación de mundos virtuales inmersivos. Cada vez estos escenarios son más grandes, con sistemas complejos y detalles de alta definición. El uso de video volumétrico resuelve la complejidad de los tiempos requeridos para el diseño de estos mundos resultando un proceso más ágil y menos costoso que el uso de herramientas tradicionales 3D.

El video volumétrico está aumentando las capacidades de producción creativas y cambiando como determinadas audiencias pueden interactuar con contenido audiovisual. Los límites previamente vistos para proyectos cinematográficos de todos niveles serán superados y esta tecnología destaca como una herramienta importante para las obras audiovisuales del futuro.

Mixonreality es una de las 58 empresas que están acelerándose actualmente en el ‘Start IN Up Program’, el programa de emprendimiento especializado en el sector del videojuego y la gamificación de ‘Madrid in Game’ que acoge el Development Center del Campus del Videojuego.