Experiencia 360 VR 3D (estereoscópica), ¿Por qué no es igual que las experiencias 360 VR 2D (monoscópicas)?

Este artículo fue la experiencia del año 2017, hoy hay otro artículo actualizado al 2022 que puedes leerlo aquí. Recomiendo lo leas para que puedas comparar la evolución a lo largo de los años respecto al mismo tema.
———————————————————

Hoy quiero tratar dos temas de interés en torno a la realización de este tipo de producciones. El producto final y su desarrollo. El comprenderlos permitirá conocer mejor el flujo de trabajo y lo que se puede obtener al realizar este tipo de producciones o contratar su realización.

Del producto Final

Hace poco en el estudio me he dedicado a desarrollar experiencias en 360 VR 3D o también llamadas grabaciones estereoscópicas en 360 grados. A la fecha he realizado 3 demos para instituciones del estado y cuando he tenido la oportunidad de mostrarlas a otros prospectos siempre sale la consulta. ¿Porqué no se ve tan nítido como los otros videos que haz realizado? (es decir los videos monoscópicos). Sí, tienen profundidad, se nota la sensación en 3D, pero no tienen la misma «nitidez».

La respuesta es la siguiente.

A comparación de las grabaciones monoscópicas, que tienen una resolución final de 4096 x 2048 pixeles (4K), al realizar cualquier producción en estéreo 3D la resolución se ve “reducida” por tres razones principales.

La primera y principal, limitaciones en los equipos en donde se reproducen que aunque puedan ser de gama alta como un Samsung S8, aún a la fecha tienen topes de reproducción para videos en 360 3D (Lo recomendable para reproducir en un S8 es un archivo 360 3D over/under de 4096 x 2304 pixeles). Este tope obedece a la capacidad de reproducción actual de los smartphones de gama alta, sólo algunos tienen capacidad de grabación en 4K y por ende de reproducción, además de tener más de cuatro procesadores con aceleración de gráficos.

La segunda, superposición de ambos ojos, izquierdo y derecho uno sobre otro, en una sola proyección 16:9. Esto hace que cada uno de los ojos tenga una resolución de 4096 x 1152, inferior a un video monoscópico(2D) de 4096 x 2048. El aspecto de imagen de una proyección estereoscópica antes de exportación final es de 1:1 con resolución 4096 x 4096 (es decir un cuadrado) que luego de todo el proceso de edición es exportado al aspecto de imagen que pueda ser leído en la mayoría de reproductores móviles modernos 16:9, con la resolución que mencioné anteriormente donde cada mitad es la proyección de un ojo.

Diferentes tipos de aspecto de imagen usados comúnmente en la producción de videos en 360 grados.
Diferentes tipos de aspecto de imagen usados comúnmente en la producción de videos en 360 grados

Y la última, téngase en cuenta el ratio de bits por minuto lo cual también influye en el desarrollo de este tipo de videos y su reproducción. Un ratio superior a 60 bpm y a la resolución 4K para vídeos en 360 3D ya hace difícil la reproducción en la mayoría de visores de realidad virtual o equipos smartphone. Por ejemplo en la aplicación VR Player para Android no se pueden reproducir archivos en 4K puro ni a 35 bpm.

Diferentes tipos de aspecto de imagen usados comúnmente en la producción de videos en 360 grados.

Respecto a la realización estéreo 360

En relación al proceso de desarrollo, la realización de este tipo de experiencias sigue un proceso de producción más complejo que cuando se realiza una producción monoscópica. Esto significa, que la postproducción estéreo se multiplica en toda etapa cuando se realiza cualquier cambio a cada ojo. Si algo se hace en la proyección izquierda, se tiene que hacer lo mismo en la proyección derecha, lo cual implica cambios en el video original, animaciones, VFX y demás complementos que se le den a la edición. Esto es ir de un ojo a otro continuamente para realizar ajustes. Téngase en cuenta que cuando se realiza una producción 360 VR 3D se hace uso de un arreglo de cámaras con 3 o más pares de cámaras ojo de pez por lo que los cambios tienen que pasar por cada par de cámaras dependiendo hacia donde estén apuntando.

Finalmente, téngase en cuenta que el roundtripping1 que se tiene que recorrer con la finalidad de obtener una experiencia en 3D hace que todo el proceso sea destructivo, a pesar de hacer uso de una secuencia de imágenes PNG en el flujo de post producción. ¿Destructivo en qué sentido? En cada paso que se sigue en post producción los archivos digitales pasan por una serie de transformaciones que generan pérdida de datos, estos datos que se pierden influyen mucho en la exportación final, recuérdese que ya de por sí el archivo que se obtiene en mp4, formato común que da la mayoría de arreglos de cámaras en 360, ya está comprimido y en esa compresión ya se dio la primera gran pérdida de información que en muchos casos si no se perdiese permitiría un mejor manejo de color, nitidez, contraste, exposición y demás antes de la exportación final.

Todo lo mencionado anteriormente responde la pregunta inicial luego de observar este tipo de experiencias inmersivas. Mientras los equipos actuales en el mercado no tengan más capacidades que lo que existe hoy y el proceso de desarrollo no sea tan destructivo debido al roundtripping, las experiencias estereoscópicas tendrán limitaciones, las cuales por supuesto no hacen que no se pueda disfrutar notablemente la profundidad o la perspectiva de los objetos o situaciones que se registran. Ya existen ejemplos de grandes estudios de Hollywood y estudios especializados en este tipo de desarrollo que demuestran lo viable de este tipo de experiencias y ahora también lo que la empresa que dirijo ha logrado producir.

Si desean ver una muestra, hemos colgado en Youtube un vídeo en 180 VR 3D donde se puede ver el rostro de la Dama de Cao, exposición que se hizo en el Museo de la nación en el mes de julio 2017. La Dama de Cao fue la primera gobernante de la cultura Mochica encontrada en el Perú, lo cual demuestra la importancia de la mujer en el desarrollo de la sociedad de las culturas pre Incas. Espero les guste.

———————————————————

Este artículo fue la experiencia del año 2017, hoy hay otro artículo actualizado al 2022 que puedes leerlo aquí. Recomiendo lo leas para que puedas comparar la evolución a lo largo de los años respecto al mismo tema.

  1. roundtripping: Proceso en producción audiovisual que indica que en post-producción se hace uso de diferentes herramientas de software de diferentes desarrolladores con la finalidad de tener un resultado. En post-producción no solo una herramienta de software te permite hacer todo.

¿Qué son los vídeos en 360º y para qué nos sirven?

Proyección miniplaneta de una imagen equirectangular.

En el siglo XV se descubrió, o se liberó el conocimiento, que el mundo no era plano. Que el mundo giraba en torno al sol y que los límites en el horizonte no llevaban a un abismo sin final, lleno de monstruos y espíritus. Los libros de historia nos enseñaron que Cristobal Colón lo descubrió así, aunque hoy con la información libre en la internet podemos descubrir que desde Pitágoras o más atrás, con los Sumérios, se sabía o por lo menos sospechaba que el mundo no era plano.

Hoy en el siglo XXI, aunque sabiendo que el mundo no es plano, seguimos encerrandolo en una caja plana, en una que tradicionalmente nos sirvió como vitrina de la realidad que muchos no podemos llegar a ver. Tenemos televisores, computadoras, teléfonos inteligentes, tabletas y demás periféricos con pantallas que nos muestran lo que presencialmente está lejos de nuestro alcance. Ellos son nuestras fuentes de información cotidiana.

En este mismo siglo, todos los avances tecnológicos propuestos y desarrollados por grandes empresas, nos han permitido extender esa pantalla, romper el plano y hacerlo redondo, circular, esférico, como quieras verlo. Hagamos un ejercicio. ¡Párate y mira todo lo que te rodea! ¿cierto? ¡el mundo no es plano! el mundo tiene mucha información que ofrecer y viene de todos los ángulos, en 360º.

Lo que observas a través de tus ojos es únicamente un encuadre, el cual es el que la naturaleza te dio. Según la distancia, el te permite enfocarte en la información que consideras relevante, la cual para otros puede tener otro nivel de importancia y además, te permite experimentar de formas diferentes todo lo que gira en torno tuyo, aprendiendo algo nuevo que puedas aplicar a tu vida o sólo memorizandolo. La realidad es diferente desde el mismo punto de vista de acuerdo a la perspectiva tomada.

La tecnología que tenemos a la mano hoy nos permite sumergirte lejos de ese plano, permitirte elegir el ángulo visual y hacia dónde observar(perspectiva). Eso es lo que llamamos vídeos en 360º. Hoy podemos grabar con una serie de cámaras, sincronizadas para tal acción, equipos especializados de 2 a más lentes ojos de pez circular empaquetados en un solo cuerpo, todos los ángulos que rodean un punto de vista, procesarlo y obtener una imagen esférica completa. Este punto de vista puede ser el centro de un safari, dentro de la jaula de un zoológico, el edificio más alto de la ciudad o el abismo más profundo si podemos llegar ahí o también el lugar de los recuerdos que alguna vez quisiste mantener para no olvidar y volver a observarlos con esas características que te enamoraron.

Por ejemplo el bautizo de un(a) hijo(a), su cumpleaños, tu boda, o aquella fiesta de aniversario que merecía recordarse. Ahora sólo requieres un visor del estilo Google Cardboard, Samsung VR, Oculus Quest 2 o HTC Vive Pro, cargar la producción en tu teléfono inteligente alguno de ellos y con el software adecuado sumergirte en la experiencia(burbuja) una vez más. Hasta los visores ahora son inalambricos y 6 DOF(6 grados de libertad).

Los vídeos en 360º han llegado se han estandarizado y su producción se ha simplificado para darle un nuevo enfoque a la producción audiovisual, son una herramienta de empatía poderosa que te permiten vivir sentir la vida de otros y muchos quieren llamarlos un estilo de realidad virtual. Su desarrollo está siendo llevado a un apogeo y muchas empresa gigantes están siguen apostando por el. Ellos han aparecido están para quedarse y convertirse en una experiencia más que un medio de observación necesidad más que una opción.

Y vale la pena agregar algo, todo lo mencionado en lineas anteriores se publicó en el año 2016, hoy se actualiza pues como se esperaba, la tecnología sigue avanzando y aquello que en algún momento fue visión y complicado realizar, hoy es una realidad y posible ejecutar. Meta(antes Facebook) tiene una visión en la que un sector de la población tenga acceso a un medio menos físico, es el de la realidad virtual con el famoso Metaverso de Meta. Ese mundo donde todos los que puedan tendrán la oportunidad de hacer aquello, legalmente hablando, que el mundo real no les permite.

Por ahora pocos lo comprenden, como en el 2016, o antes. Esto indica que el sector será exclusivo. El Metaverso no es un mundo en el que estaremos sumergidos en visores de realidad virtual cuales topos ajenos a la realidad, sino otro sector económico como cualquier otro en el que vivimos. Paramos encerrados en oficinas frente a pantallas o de computadoras o smartphones para hacer negocios y para los empresarios todo bien, entonces, la realidad virtual en el metaverso es por lo menos más creativo con las herramientas correctas y de infinito potencial.

Con los años se vuelve a comprobar que el ser humano rechaza todo aquello que no conoce, pues su miedo a salir de la zona de confort, de lo conocido, lo espanta de lo nuevo o lo potencialmente beneficioso para el. Hacer negocios en realidad virtual una hora al día para aquellos responsables y que te de los resultados de horas invertidas en otro sector es algo más que seductor, y si es global y entretenido, mucho mejor.

El mundo entró en pandemia en el 2020 y muchas cosas cambiaron… y es necesario escribir otro artículo respecto a ello, es 2022 y ya pensamos que la pandemia termina y nuestra sociedad camino al gran reset debe estar preparada.

Espero este artículo, que fue actualizado, les haya servido para conocer un poco más acerca de los vídeos en 360º. otra visión y sus posibles aplicaciones.

Me despido.

Nilo Canales