Netflix dice que su magenta supera a la pantalla verde

La tecnología de pantalla verde existe desde hace casi un siglo. Unos 45 millones de cinéfilos quedaron fascinados con los efectos especiales de El mago de Oz cuando llegó a los cines en 1939. Las escenas mágicas en Emerald City fueron las primeras en las que los actores filmaron frente a una pantalla verde, que luego fue reemplazada por imágenes de escenas fantásticas grabadas en otro tiempo y lugar.

Esta técnica se ha perfeccionado a lo largo de los años en películas tan fantásticas, impresionantes y llenas de acción como Avatar, The Matrix, Iron Man y Titanic.

Pero la técnica no es perfecta. Se requiere una iluminación adecuada y cuidadosamente equilibrada para obtener los resultados más realistas. Sangrar el verde del fondo a otros objetos afecta la consistencia del color. Las sombras de la pantalla verde también afectan la precisión del color y deben controlarse de cerca. Y el movimiento de objetos diminutos como mechones de cabello puede causar artefactos que distraen la vista.

Y la sombra del verde importa. Buscar en YouTube las caras rojas de los meteorólogos que, sin darse cuenta, usaron el tono de verde incorrecto, uno que hizo que ciertas partes de su cuerpo fueran invisibles, arrojará muchos ejemplos de los peligros de la falta de coincidencia de colores.

La intervención manual puede solucionar estos problemas, pero puede llevar mucho tiempo y los resultados no siempre son perfectos.

Netflix ahora afirma haber desarrollado una técnica que mejora la técnica de clave de croma verde existente desde hace mucho tiempo.

En un artículo publicado en el servidor de preimpresión arXivLos investigadores de Netflix han desarrollado un nuevo enfoque llamado Magenta Green Screen (MGS) que brinda mayor precisión y resultados más rápidos.

El nombre proviene de su enfoque de la iluminación: los actores están iluminados de frente con LED rojos y azules contra un fondo iluminado por LED verdes brillantes. La iluminación roja y azul crea un brillo púrpura en los actores.

Dado que las cámaras digitales capturan valores de color a lo largo de las rutas roja, verde y azul, una ruta captura el fondo (canal de pantalla verde) con un primer plano negro, mientras que los canales rojo y azul (magenta) capturan el primer plano, mostrando el fondo. todo negro.

Netflix utiliza herramientas de inteligencia artificial para eliminar los tonos magenta al comparar fotos de actores con luz natural con escenas de acción con sombras.

“Nuestra técnica produce resultados de composición de alta calidad cuando se implementa en una etapa moderna de producción de LED virtual”, dijo el investigador principal de Netflix, Dmitriy Smirnov, en el informe “Magenta Green Screen: Spectrally Multiplexed Alpha Matting with Deep Colorization”.

El proceso puede grabar acciones con fondos virtuales completos en tiempo real, dice Smirnov. No se requiere equipo fotográfico especial ni ajustes de color manuales.

Uno de los problemas que han abordado es el problema de los píxeles a lo largo de la periferia de los objetos que pueden ser parte del objeto o del fondo.

“La cobertura parcial en los bordes, las estructuras finas y transparentes, las áreas borrosas y borrosas muestran una transparencia parcial”, dijo Smirnov. “Determinar el color RGB de un elemento de primer plano en un píxel, así como la transparencia de un píxel, es… difícil”.

Los investigadores han perfeccionado un método llamado triangulación, donde los objetos estacionarios se filman contra diferentes fondos para obtener definiciones de objeto muy precisas.

“Nuestra técnica parece ser superior al mate que se puede lograr con la pantalla verde Chromakey tradicional o las técnicas de multiplexación en el tiempo”, dijo Smirnov.

“Las computadoras ya han proporcionado herramientas tan poderosas que facilitan muchas cosas”, dijo Paul Debevec, otro miembro del equipo de investigación. Como resultado, “los artistas talentosos que tenemos pueden enfocarse en la artesanía, realzando la apariencia”.

© 2023 Ciencia X Red