Una guía para principiantes sobre la realización de películas en realidad virtual con el objetivo Canon RF 5,2 mm f/2,8 L Dual Fisheye 3D VR y el Canon R5 C

Jul 01, 2023

¿Alguna vez te has preguntado sobre la realización de películas en realidad virtual, pero no estás seguro de cómo empezar? Aquí hay una mini introducción usando la lente Canon RF 5.2mm f/2.8 L Dual Fisheye 3D VR y la cámara R5 C.

Comencemos con un descargo de responsabilidad. No soy una persona tecnológica. Mi interés por todo lo relacionado con el arte proviene puramente de un enfoque narrativo. Soy director/DP y guionista. Mi carrera fotográfica, ya sea fija o en movimiento, está completamente impulsada por los personajes que pongo en la pantalla. La parte tecnológica del acuerdo es en gran medida un medio para lograr un fin. Entonces, cuando aparecen en el horizonte nuevas formas tecnológicas de contar historias, rara vez soy yo quien puede explicar los detalles prácticos.

Pero las nuevas tecnologías a menudo generan nuevas oportunidades, tanto a nivel profesional como creativo. Nuevas formas de abordar las tareas. Nuevas formas de producir trabajo. En el mundo de la publicidad en el que trabajo, ha habido un crecimiento constante en lo que se llama el mercado “experiencial”. A diferencia de los comerciales tradicionales en los que, al igual que las películas narrativas, un director lleva al público a través de una historia y un producto a través de cortes y encuadres inteligentes, el mercado experiencial se trata de brindar a los clientes experiencias únicas. Estas experiencias tienen menos que ver con dictar una línea específica de eventos. Más bien, permiten que un comprador potencial experimente el producto o la marca a través de medios fuera de los medios tradicionales. Piense, por ejemplo, en una marca de calzado que crea una competencia atlética a la que los clientes pueden postularse para ser parte y luego filma esa experiencia al estilo documental para compartirla en las redes sociales o reducirla a un anuncio de 30 segundos. El objetivo final es el mismo, llegar a los clientes y transmitir el mensaje de su marca. Pero el método de entrega puede ser más atractivo si se involucra al cliente en el proceso.

Hay pocas formas de realización cinematográfica más atractivas que la realización de películas en realidad virtual. Con la realización de películas en realidad virtual, estás creando un mundo de 180 o 360 grados en el que la persona que ve la película literalmente entra en él. Pueden mirar hacia arriba, hacia la derecha, hacia la izquierda y hacia abajo a su propio ritmo. Menos sobre presentar un mundo de una manera muy prescriptiva. Más información sobre cómo permitir que el espectador busque en el mundo lo que quiere ver.

Si esto le parece una forma complicada de hacer una película, estaría en lo cierto. Muchas de las reglas que habrá aprendido como cineasta tradicional ya no se aplicarán. El proceso de filmación y el proceso de edición requieren diferentes herramientas y trucos. Pero, afortunadamente, Canon se ha mudado al espacio con el objetivo de hacer que la experiencia de filmación en realidad virtual sea más accesible con la lente Canon RF 5.2mm f/2.8 L Dual Fisheye 3D VR. Puede parecer extraño al principio, con sus dos ojos saltones que hacen que tu cámara parezca de repente una criatura espacial futurista, pero la configuración de doble lente proporciona un amplio campo de visión de 180 grados que es la clave para poner la realidad virtual a tu alcance.

Sé lo que estás pensando. Todo eso es genial, pero ¿cómo funciona realmente? Yo también tenía la misma pregunta. Y afortunadamente, después de usar la lente VR en combinación con la Canon R5 C durante los últimos meses, puedo darte algunos consejos para que comiences. Piense en esto como una introducción. De ninguna manera es una guía completa para la realización de películas en realidad virtual. Yo también soy nuevo en esto, así que también estoy aprendiendo. Pero estos puntos de partida básicos me han ayudado a pasar del concepto a la creación de un mundo de realidad virtual completo y espero que les brinden un punto de entrada a la nueva forma. A dónde vayas desde allí depende de ti.

El primer paso, incluso antes de levantar la cámara, es hacer un cambio mental. En el cine de realidad virtual, el espectador es el autor. No el director. Como cineasta tradicional, me gano la vida sabiendo cuándo pasar de una cosa a otra, sabiendo siempre el momento adecuado para un primer plano y prestando tanta atención a lo que no quiero que el público vea como a lo que quiero. quiero que lo hagan. En gran medida, la realización de películas en realidad virtual te priva de este poder.

En un mundo de realidad virtual, al utilizar la lente de realidad virtual, la audiencia tiene el control. Tienen una vista de 180 grados de la escena. Pueden mirar hacia donde quieran mirar en cualquier momento dado. Piense en las implicaciones prácticas de eso. Ya no puedes pasar a un primer plano para llamar su atención sobre algo específico. Por lo tanto, necesitarás lograrlo a través de otros medios como el diálogo, los gestos de tus actores o señales sonoras. Si quieres que miren hacia la izquierda, debes darles una razón para mirar hacia la izquierda. Pero, si los tienes mirando hacia la izquierda, probablemente no sea el mejor momento para darles información narrativa vital hacia la derecha.

Esto también significa que tu diseñador de producción se ha vuelto mucho más importante. En el cine tradicional, puedes simplemente recortar las cosas que no quieres que vea el público. Pero, en un mundo donde el público puede ver 180 grados, es mucho más difícil recortar las cosas. Por lo tanto, debes prestar mucha atención a todo lo que está frente a la cámara. Nunca se sabe cuándo la atención del público puede desviarse hacia algún lugar no deseado. Y no querrás que su atención se fije en algo equivocado. Como por ejemplo un soporte de luz en el marco.

Eso nos lleva a un par de consideraciones simples sobre el equipo. El hecho de que la cámara pueda ver 180 grados exige varias decisiones. Por un lado, debido a que puede ver completamente hacia arriba y hacia abajo, las patas del trípode, los micrófonos tipo escopeta u otros accesorios se pueden ver fácilmente en el encuadre si no se tiene cuidado. La mejor manera de evitar esto es montar la cámara en un brazo extensible que la separe de las patas del trípode. Esto impide que el espectador pueda mirar hacia abajo y ver el equipo de filmación que lo sacará de la escena.

También deberá tener cuidado de colocar las luces de tal manera que no queden enmarcadas. Esto puede ser un desafío si está acostumbrado a acercar las luces al sujeto. Una técnica que he visto es permitir que las luces permanezcan en el encuadre, pero luego realizar una toma en plano, de modo que puedas pintar fácilmente el equipo de producción en la posproducción. Teniendo en cuenta que la realización de películas en realidad virtual se beneficia de que las tomas estén bloqueadas, el proceso de combinar tomas en la posproducción no debería ser demasiado complicado. Pero hace falta planificación.

Vivimos en un mundo de cardanes y cámaras portátiles. Cuando grabas en realidad virtual, lo que realmente quieres es ceñirte a los palos. Claro, es posible que puedas salirte con la tuya presionando súper lentamente un control deslizante muy bien equilibrado (aunque ten cuidado con el control deslizante en sí mismo entrando en la toma) o utilizar movimientos lentos de cámara muy finamente afinados con un brazo robótico. Pero, en su mayor parte, querrás evitar el mayor movimiento posible de la cámara.

¿Por qué? Bueno, las películas de realidad virtual están destinadas a verse dentro de un visor de realidad virtual, algo así como Meta Quest o el recientemente anunciado Apple Vision Pro. Esto es genial porque permite al espectador mover sus ojos alrededor de una escena de una manera muy natural, mirando alrededor del encuadre como lo haría en el mundo real. Disparar con un trípode les proporciona un punto de partida estable para mirar a su alrededor. Si el mundo que ven dentro de los auriculares se mueve constantemente y es inestable, es probable que se sientan menos cautivados y con muchas más náuseas. El trabajo tembloroso con la cámara en mano puede verse genial en la pantalla grande cuando se ve una de las películas de Bourne, pero un primer plano dentro de unos auriculares sería una experiencia bastante diferente.

También deberá asegurarse de capturar a sus sujetos desde la mejor perspectiva. A diferencia del cine tradicional, donde tienes la libertad de colocar a los sujetos en casi cualquier lugar, los sujetos dentro de un mundo de realidad virtual tienden a verse mejor cuando se colocan dentro de un rango más limitado. Colóquelos demasiado cerca de la cámara y la naturaleza de ojo de pez de la lente no se verá bien. Los primeros planos en pantallas de cine lejanas se ven fantásticos. Pero un primer plano de una persona dentro de unos auriculares puede darles la impresión de que el sujeto está invadiendo seriamente su espacio personal. Sin embargo, si los coloca demasiado lejos de la cámara, se volverán demasiado pequeños en el marco para que el espectador pueda interactuar con ellos.

No existen reglas estrictas, pero, por lo que he aprendido, la mayoría de los sujetos parecen verse mejor entre 3 y 15 pies de la cámara. Esto los coloca lo suficientemente lejos como para que parezcan agradables a la vista, pero no tan lejos como para que no podamos distinguir a quién estamos mirando.

Lo mismo ocurre con la línea del horizonte. Lo admito, nunca he sido el mejor en mantener siempre rectas las líneas de mi horizonte cuando estoy detrás de la cámara. No es que no lo intente. Creo que debo ver el mundo desde una perspectiva ligeramente inclinada, porque he pasado horas de mi vida enderezando tomas que podría jurar que eran rectas cuando estaba en el set.

Al igual que el problema de la computadora de mano, las imágenes de realidad virtual son mejores cuando la línea del horizonte inicial está nivelada. Esto le da al espectador una base firme desde la cual comenzar su viaje. Comenzar de manera desigual puede desorientar al espectador. Afortunadamente, las cámaras como la Canon R5 C tienen excelentes herramientas de nivelación integradas que simplifican el control del equilibrio. Esta es una de las primeras visualizaciones en pantalla que debes activar cuando comiences a grabar en realidad virtual.

El enfoque es fundamental en cualquier película, pero en una película de realidad virtual, lo es aún más. Esta es una de esas áreas a las que será necesario un poco de tiempo para acostumbrarse. La lente Canon RF 5,2 mm f/2,8 L Dual Fisheye 3D VR tiene un enfoque totalmente manual. Tiene un anillo de enfoque tradicional como cualquier otro objetivo. Pero el sistema de lentes funciona esencialmente combinando dos ojos de la misma manera que lo harían los ojos humanos. Por lo tanto, debe asegurarse de tener un enfoque crítico en ambos ojos. Para complicar un poco más las cosas, los planos de enfoque son exactamente los mismos. Los dos "ojos" trabajan juntos para mostrar profundidad. Pero esto sí significa que es fundamental hacerlo bien. Es una buena práctica asegurarse de pinchar cualquier área de enfoque crítico antes de disparar y utilizar las herramientas de asistencia de enfoque, como el enfoque máximo o el exclusivo sistema de guía de enfoque de Canon, que le permite asegurar el enfoque simplemente alineando un par de flechas. . Si necesita ajustar aún más su enfoque, el ojo de pez dual RF de 5,2 mm tiene un pequeño perno en el lado superior derecho que le permite realizar microajustes con una pequeña herramienta hexagonal para asegurarse de que todo esté perfecto. Como la mayoría de las cosas de realidad virtual, querrás tomarte tu tiempo para brindarle al espectador la mejor experiencia.

Si todo esto empieza a parecer un proceso increíblemente lento, una vez más, tienes razón. La realidad virtual no es una especie de correr y disparar. Está cuidadosamente elaborado. Así que no esperes sacar este sistema nada más sacarlo de la caja y simplemente empezar a ejecutarlo y disparar con la computadora de mano. Como muchos aspectos de la vida, funciona mejor si planifica con anticipación. Pero, si tienes tiempo, puedes crear una experiencia inmersiva.

Por supuesto, nuestra visión no es la única forma en que experimentamos el mundo. Para crear un mundo verdaderamente inmersivo, lo que escuchamos es tan importante como lo que vemos. Si puedes ver 180 grados, pero todo el sonido proviene de una dirección, eso también puede desorientarte.

Para solucionar este problema, además del vídeo de realidad virtual, debería considerar grabar sonido ambisónico. Exactamente lo contrario de usar un micrófono de cañón para enfocar la grabación de sonido en una dirección, usar un micrófono ambisónico le permite esencialmente capturar audio en todas las direcciones a la vez. Hay varias variaciones disponibles. Cogí una práctica grabadora Zoom H3-VR. Con sólo unas pocas configuraciones, puedo colocarlo en el entorno y grabará sonidos de adelante hacia atrás, de atrás hacia adelante, de arriba hacia abajo, de abajo hacia arriba, de lado a lado. Usted lo consigue. Luego, la grabadora coloca convenientemente todo ese audio en diferentes pistas en la línea de tiempo cuando lo llevo al editor. El resultado final es un sonido que parece venir de todas direcciones. Cuando se combina con un vídeo que el espectador puede experimentar en realidad virtual, le ayuda a conectarse con el mundo que ha creado.

Tenga en cuenta que cuando graba con la lente ojo de pez dual, básicamente está dividiendo la resolución entre los ojos. Entonces, si comienzas con 8K, por ejemplo, aproximadamente 4K irá a cada lado. Por lo tanto, comenzar con 8K en una cámara como la R5c, o incluso 4K, obtendrá muchos más detalles en el resultado final. Al crear un entorno virtual en el que un espectador querrá entrar, cuanto más detalle, más realista será el efecto.

Hablando de detalles, es posible que también desees capturar una mayor cantidad de fotogramas por segundo. Disparar a fps más altos le brindará imágenes más detalladas ya que la cámara literalmente graba más datos cada segundo.

Así que has filmado cuidadosamente tu metraje. Has perfeccionado tu línea del horizonte. Bloqueé la cámara para mantenerla estable. Sonido ambisónico grabado. Colocó al sujeto a la distancia perfecta. Y has alcanzado el récord. Ahora te gustaría ver todas esas increíbles imágenes que acabas de filmar. Pero abres el metraje en tu herramienta de edición favorita y te encuentras con estos extraños círculos uno al lado del otro. ¿Lo que da?

Bueno, no temas, esto es normal. Cuando la cámara graba con la lente VR, crea dos círculos de imagen paralelos. Luego, esas imágenes se colocarán una encima de otra para crear la profundidad del mundo de realidad virtual. Pero es necesario seguir algunos pasos adicionales para crear el producto final.

Tienes dos opciones para los primeros pasos. Puede utilizar la utilidad Canon. El software en sí es gratuito, aunque querrás comprar una de las suscripciones pagas que desbloquea muchas de las funciones. O puede utilizar Adobe Premiere con el complemento Canon Utility. Ambas soluciones requieren una suscripción para aprovecharlas al máximo. Si dispara en 60p, Canon Utility es la mejor opción.

Lo que hace el software es convertir esos dos círculos en imágenes planas una al lado de la otra. También cambia las imágenes entre los ojos en un proceso que ni siquiera intentaré explicar. Pero, para resumir, el software esencialmente corrige la imagen para que pueda verse en formato VR. Una vez que se haya corregido la imagen, puede llevarla a un editor como Premiere para realizar la edición. La imagen seguirá pareciendo un poco loca al principio, ya que seguirás viendo los cuadrados corregidos uno al lado del otro. Los diferentes editores variarán, pero debe haber una configuración dentro del sistema que le permita decirle al editor que el metraje es una imagen estereoscópica de realidad virtual. Eso debería convertir la imagen en un cuadrado con la capacidad de moverse alrededor del marco como eventualmente podrá hacerlo el espectador.

Luego, cortarías el proyecto como lo harías con cualquier otro proyecto y luego exportarías el resultado final en el formato que elijas. Pero debe asegurarse de indicar que el metraje exportado es de realidad virtual. Y, en el caso de este metraje, es estereoscópico uno al lado del otro a 180 por 180. Estas instrucciones se graban en los metadatos del archivo, de modo que cuando la película se ve dentro de unos auriculares o se sube a YouTube u otro plataforma, el jugador entiende que el metraje es de realidad virtual y se comportará en consecuencia, dándole al espectador la capacidad de desplazarse e inclinarse a través del cuadro.

Esperamos que este artículo haya ayudado a desmitificar el proceso de hacer una película de realidad virtual y te haya inspirado a intentarlo. La lente Canon RF 5.2mm f/2.8 L Dual Fisheye 3D VR en combinación con una cámara como la R5c simplifica el proceso al crear videos de realidad virtual para aquellos que ya están en el mundo de la realidad virtual y proporciona un punto de entrada para aquellos que recién comienzan en el espacio. El proceso requiere un enfoque diferente al del cine tradicional. Pero el resultado final es una experiencia completamente diferente para el espectador. No estás simplemente contando una historia. Estás creando un mundo para que ellos vivan.

Para los especialistas en marketing experiencial, esta es una gran oportunidad. Pero también tiene muchas otras aplicaciones. Imagine un mundo de realidad virtual donde pueda hacer videos explicativos en un espacio con sensaciones reales, o recorrer una propiedad dentro de un auricular, experimentar unas vacaciones sin salir de su sala de estar. Las posibilidades son infinitas. El único límite es hasta dónde puede llevarte tu imaginación.

Esta ha sido sólo una breve introducción a la tecnología. Intentaré continuar este artículo con un estudio de caso más práctico paso a paso. Pero, mientras tanto, para aquellos de ustedes que usan la lente a diario, me encantaría conocer sus experiencias en la sección de comentarios y cualquier consejo para principiantes que me haya perdido.

Christopher Malcolm es un fotógrafo, director y director de fotografía de estilo de vida, fitness y publicidad con sede en Los Ángeles que trabaja para clientes como Nike, lululemon, ASICS y Verizon.

¡Gracias por la cartilla! Este es el único objetivo/flujo de trabajo que me hace considerar seriamente cambiarme a Canon...