👼🏿 🍛 🚻 Sol Levante: como hicieron anime en 4K y HDR para Netflix 💞 👨‍🍳 😶

El anime, a menudo rechazado solo como dibujos animados, es una variedad de cuentos de hadas, estilo animado y gráficos elegantes. Esta es una forma de arte que en los últimos cincuenta años se ha desarrollado y crecido en popularidad, diversidad y complejidad. Probablemente comenzó con lámparas pintadas a principios del siglo XX, luego, en la década de 1970, ganó una gran popularidad en Japón. Hoy, los televidentes tienen la opción de elegir entre cientos de programas de televisión y películas de estilo anime de todo el mundo.

Nuestro equipo de Creative Technologies quería mejorar la calidad técnica de la imagen del anime, descubrir las nuevas posibilidades creativas que esto puede brindar a las personas y lo que se necesitará para aumentar la resolución del anime de HD a 4K e ingresar una paleta de colores más amplia en HDR en el conjunto de herramientas de los artistas.(alto rango dinámico). Cuando se trataba de 4K, la mayoría de los animadores japoneses pidieron lo mismo: ¡papel más grande! Sin embargo, los artistas de Production IG creen que el futuro está en la tecnología digital. Así es como nació una colaboración grande y colorida, ¡y el cortometraje resultante de Sol Levante está disponible para su visualización en Netflix en 4K Dolby Vision y Atmos!

El equipo de Tecnologías creativas de Netflix está tratando de descubrir cómo mejorar la creación de contenido a prueba de futuro y está trabajando con varios socios de investigación y desarrollo para que estas mejoras estén disponibles para los artistas en flujos de trabajo reales. Nuestras tareas centrales son combinar alta calidad y durabilidad con confiabilidad de presentación, y crear un espacio para la creatividad. Dada la rápida proliferación de dispositivos de consumo con capacidades de visualización 4K HDR, es fácil imaginar que en cinco años esta calidad se convertirá en el estándar.

En los últimos años, hemos remasterizado con éxito obras como Caballeros de Sidonia, Flavors of Youth y Godzilla, elevando la calidad de SDR a HDR. Pero, ¿qué pasa si aumenta inmediatamente la resolución de trabajo y crea un anime inicialmente con un ojo en HDR? ¿Cómo afectará esto a las decisiones creativas? ¿Qué problemas surgirán, de naturaleza creativa y técnica? ¿Cómo cambiarán el presupuesto y los términos? ¿Qué nuevas posibilidades creativas puede dar esto?

Production IG, con sede en Tokio, que se ha establecido como proyectos y animación de nivel Ghost In the Shell en Kill Bill, ha reunido un equipo experimentado que ha dominado el trabajo completamente "en digital" y también quería responder a estas preguntas. Nuestra curiosidad común llevó a la creación de un anime experimental de corta duración en 4K HDR Immersive Audio llamado Sol Levante. Y para ayudar a la industria a lidiar con el 4K HDR y las tecnologías de audio inmersivas en el anime, lanzamos todos los materiales para acceso gratuito , descarga y experimentación.

El director Akira Saito trabaja en After Effects

Akira y Haruka trabajan juntas

Estado actual del anime: negocios

Aunque las increíbles historias del anime moderno nunca pasan de moda, el flujo de trabajo en sí, nacido en Japón, no ha cambiado en muchos años. Para comprender la necesidad de nuestro experimento, es importante comprender cómo se crea realmente el anime en Japón.

Desde principios de siglo, la industria del anime se ha alejado del sistema tradicional, cuando el estudio de anime posee la mayor parte de la propiedad intelectual, y ha llegado al modelo comercial moderno del "comité de producción". Aunque se ha vuelto más fácil para los estudios crear contenido gracias al apoyo financiero, aumentar el número de participantes complica el proceso.

Parcial o completamente, la producción se subcontrata a varias empresas o autónomos, y esto puede suceder en varios niveles. Con un número tan grande de subcontratistas, es bastante difícil presentar a todos los cambios en la tecnología y las nuevas oportunidades creativas. En diferentes proyectos, el número de trabajadores independientes es diferente, sin embargo, la mayoría de ellos trabajan en casa y su equipo es de calidad inferior a lo que el estudio puede pagar.

Estado actual del anime: producción

Además de las complejidades del sistema de estudio, surgen dificultades adicionales al intentar innovar el flujo de trabajo de la creación de anime. Y aunque 3D CG está ganando popularidad (los espectáculos como Saint Seiya y Ultraman son generados por computadora en su totalidad por artistas 3D), la mayor parte del anime todavía está dibujado a mano. Algunos artistas prefieren la sensación de papel, o no tienen el tiempo y el dinero para invertir en equipos que les permitan probar suerte en el arte digital. El flujo de trabajo después del dibujo ya es digital, sin embargo, para admitir una resolución más grande, el equipo debe actualizarse seriamente. También hay una escasez de maestros con experiencia y herramientas que les permitan educar a una nueva generación de animadores digitales. De ahí la falta de personalcapaz y dispuesto a trabajar con un número que ya está en la etapa de dibujar.

Para salir al aire, el anime generalmente se realiza en la resolución de 1280x720, o "Half HD". Solo los programas más importantes se muestran en 1080 HD. Para cambiar a 4K, es necesario cambiar a un número, porque las imágenes deben escanearse. Pero si una hoja de papel de tamaño normal se escanea simplemente aumentando el DPI, entonces saldrán detalles innecesarios con trazos de lápiz. Por lo tanto, el anime dibujado a mano requiere un papel más grande.

También en el proceso de renderizado de anime, rara vez se usa la gestión del color, un proceso que ayuda a obtener un color predecible y consistente de los dibujos en cada paso de producción y postproducción.. Con algunas excepciones, todo se crea en el espacio de color sRGB, el espectro más popular utilizado en gráficos por computadora. En los largometrajes, los animadores suelen pintar en sRGB, y en la postproducción agregan 3D LUT para convertirlo en P3, lo que preserva la apariencia de sRGB en el espacio de color P3.

También te sorprenderá el hecho de que las emisoras japonesas establecen la temperatura de color en 9300 K, mucho más azul que la temperatura de 6500 K, que domina el resto del mundo. Muchos de los animes con licencia para Netflix se convirtieron a D65 BT.1886 al final de la postproducción para cumplir con nuestras especificaciones y mirar directamente a nuestro servicio de transmisión, según lo previsto por sus creadores.

Al comprender todas las dificultades involucradas en la transferencia de anime de hojas de papel a un flujo de trabajo totalmente digital, Creative Technologies trabajó en estrecha colaboración con Production IG para tratar de predecir algunos de los problemas. Sin embargo, solo cuando el equipo comenzó a usar realmente lápices digitales y tabletas, estos descubrimientos comenzaron a tomar una forma clara.

Sol Levante: descubrimientos durante la postproducción

En el proceso actual de hacer anime, generalmente lleva de un año y medio a dos años desde que escribe el guión hasta completar el trabajo en la temporada de 12 episodios de la serie. En el caso de nuestro corto de tres minutos Sol Levante, el director Akira Saito estuvo involucrado en un guión gráfico durante dos semanas. Ella trató de incorporar muchas opciones de iluminación diferentes en la película, variando de una escena a otra. La historia comienza al amanecer, se desarrolla durante un día sombrío, luego continúa por la noche y termina con el amanecer. Akira dijo que estaba muy interesada en trabajar y que estaba entusiasmada con la animación, sin sospechar qué problemas aparecerían en su producción.

Un ejemplo de un guión gráfico

Cuando Akira pensó en cambiar a 4K y aumentar la resolución, logró un buen equilibrio entre cuadros con dibujos simples y cuadros con muchos detalles. En muchos cuadros, creó un mundo cuya densidad es lo suficientemente alta como para impresionar a la audiencia, y al mismo tiempo tiene pequeños detalles que se pueden ver después de agrandar la imagen.

Durante la fase de desarrollo del personaje, el animador Hisashi Ezura dedicó mucho tiempo a ajustar el grosor de las líneas debido a la expansión del rango dinámico. Contornos de los personajes: un fenómeno exclusivo del anime, pero si usas el grosor habitual de las líneas, se verán demasiado nítidos en el SDR y demasiado poco naturales en el HDR. Puso el lápiz en un toque "más suave" en el lienzo para cambiar la apariencia de las líneas.

Prueba para seleccionar el grosor de los contornos

En la fase de desarrollo del color, el equipo inicialmente decidió que un brillo de 300 nits sería suficiente para la preproducción. Sin embargo, al ver la impresión que causan 1000 nits en el monitor Eizo CG3145, sintieron que el espacio era demasiado grande y que 300 nits no permitirían al diseñador usar toda la paleta. Como en el anime las decisiones de color se toman en la etapa de preproducción, fue muy importante para Miho Tanaka, el diseñador de color de Production IG, ver cómo se comporta el brillo de 1000 nits en el monitor maestro.

También fue bastante difícil elegir un tono de piel. Un ajuste especial y completo requiere el color de la sombra, ya que puede afectar en gran medida la percepción general de la cara y el personaje en su conjunto. Miho pasó mucho tiempo haciendo que los personajes se vean hermosos en cualquier momento del día. HDR facilitó la elección de colores para escenas oscuras, porque en este modo la imagen no comienza a verse "sucia" y las líneas permanecen claras. Sin un rango dinámico decente, es difícil mantener la claridad de líneas tan delgadas, como las pestañas. HDR le permite separar claramente los colores entre sí, para que no se mezclen de manera indeseable.

Durante el estudio de la apariencia, aparecieron otros problemas, así como oportunidades. Gracias a HDR, el efecto visual típico del brillo de los ojos se puede reemplazar por otro método de uso de colores. Si agrega líneas brillantes a los labios, se ven brillantes. Como resultado, el director procesó todos los comentarios y, en consecuencia, ajustó su diseño y colores.

A la izquierda - la versión de prueba, a la derecha - la final

Uno de los problemas más difíciles con HDR durante la preproducción fueron las limitaciones asociadas con las herramientas de diseño y dibujo. La interfaz de los programas gráficos era demasiado brillante para mirarla constantemente con un brillo de 1000 nits, y el fondo tuvo que cambiarse a gris (180) de blanco (255) durante la vista previa en un monitor HDR. Muchas herramientas gráficas todavía no admiten la salida completa de 16 bits crítica para HDR. Y el selector de color se ve diferente en los monitores SDR y HDR, lo que dificulta la selección precisa de los colores.

También en esta etapa, se encontraron problemas con una resolución de 4K. Al dibujar líneas, los artistas constantemente pasaban por el proceso de agrandar el dibujo y verificar el resultado de su trabajo debido a restricciones en la resolución de su pantalla o tableta. Al ver la imagen completa, las líneas se volvieron demasiado delgadas para considerar todos los detalles de la imagen.

Sol Levante: descubrimientos en la fase de producción

En la etapa de preproducción en nuestra colaboración con Production IG, las dificultades reales comenzaron a aparecer en la fase de producción.

Para empezar, el equipo tuvo que realizar muchos experimentos para configurar correctamente el sistema de transferencia de información y seleccionar los perfiles de color adecuados, además de mostrar correctamente los colores en cada monitor, además, dependiendo del programa específico. Cada uno de los equipos de artistas necesitaba varios monitores para mirar la imagen en los modos SDR y HDR, y continuar apoyando los proyectos en los que ya estaban trabajando en el modo SDR. El problema de la gestión del color en la animación afecta a muchas etapas de producción. Este proyecto fue especialmente complejo, pero Junichiro Aki y Katsushi Eda, junto con el especialista en gestión del color Masakazu Morinaka, crearon un sistema de trabajo.

Para Sol Levante, absolutamente todo se hizo en digital. Además de usar la aplicación Procreate para iPad en la preproducción y generación de ideas, Production IG también usó ClipStudio para crear imágenes intermedias, Vue para dibujar fondos y elementos seleccionados, Retas Stylus para trabajar con color, Photoshop y After Effects. Los animadores experimentaron con Toon Boom Harmony, que es compatible con la tecnología extremadamente popular de "animación de recortes" fuera de Japón.

Diagrama de flujo de trabajo de Sol Levante

El equipo se dio cuenta de inmediato de que algunas de las técnicas de anime en las que habían confiado durante años no funcionarían con el aumento del brillo y la expansión del espectro. Por ejemplo, un efecto típico en el anime es una transición suave al 100% blanco, que se utiliza como uno de los métodos de narración. Sin embargo, el blanco en el HDR resultó ser demasiado brillante, por lo que los artistas decidieron superponer una capa blanca en la parte superior. Y cada vez que algo no funcionaba como se esperaba, encontraban una nueva forma de lograr el mismo resultado.

La resolución 4K tuvo el mayor impacto en el flujo de trabajo al generar los fotogramas finales con composiciones que constaban de imágenes mucho más grandes que 4K; eran necesarias para la panorámica. Y esto resultó ser un obstáculo tan serio que todo el proyecto se ralentizó durante varios meses. Algunos de los problemas que lo causaron aparecieron debido al hecho de que el equipo necesitaba ser configurado para funcionar con 4K; otros explican cómo funciona el software y cómo utiliza los recursos del sistema. Para los fabricantes de software, el principal problema sigue siendo la necesidad de mejorar el trabajo con recursos.

Al crear patrones en números, puede guardar líneas finas, ya que no necesita escanear papel para digitalizar. En comparación con el dibujo en papel, el animador ya no estaba tan preocupado por el tamaño del lienzo. También creó una "tabla de configuración" que limita el nivel de detalle de los personajes y sus accesorios bajo ciertas condiciones. La cantidad de detalles depende del tamaño del personaje en la pantalla. Aquí debe decidir qué detalles agregar para la resolución en 4K y cuáles no deben desperdiciarse porque no serán visibles.

Tabla de configuración de IG de producción

Continuando trabajando en Sol Levante, el equipo de producción de IG decidió externalizar parte del renderizado intermedio (creando marcos intermedios entre las dos imágenes principales). Subcontratar trabajo similar a otras compañías es una práctica común en la producción de anime. Esto fue bastante difícil de hacer, ya que los subcontratistas generalmente rechazan ideas nuevas como el flujo de trabajo digital; para adaptarse a estas nuevas herramientas, se necesitan inversiones en equipos y capacitación del personal. Además, Production IG decidió que para la elección correcta de colores, líneas de dibujo y composiciones de construcción, era absolutamente necesario trabajar constantemente en un monitor HDR con un brillo de 1000 nits. Pero en el mercado de posproducción hay una constante escasez de monitores HDR, especialmente a precios asequibles.lo que desde el principio afecta enormemente la decisión de trabajar con dichos monitores.

Como resultado, Production IG, sin embargo, logró encontrar un número suficiente de subcontratistas con un proceso tecnológico totalmente digital, con una excepción: un desglose de cuadros por tiempo o tiempo, utilizado para organizar dibujos en una línea de tiempo y marcar lugares para renderizado intermedio, movimientos de cámara y otra información técnica. Timeshield fue el único documento en papel en todo el proceso de fabricación de Sol Levante.

Por lo general, el anime no usa gradación de color en las últimas etapas de producción, pero mientras trabajaba en Sol Levante, los animadores trabajaron con un contenedor de imágenes (PQ) con un brillo de 10,000 nits, y se mostró en un monitor con 1000 nits, por lo que fue necesario hacer un pase general para alinear lo visible espectro de colores y apariencia general de la imagen. Durante la calibración, el colorista con el director descubrió varias posibilidades para mejorar la imagen final; para esto era necesario cambiar algunos de los colores seleccionados inicialmente y permitir que ciertas partes de la imagen se destaquen en el fondo. Por ejemplo, un colorista modificó el color del rayo en uno de los cuadros para que se destaque más y agregó granularidad durante la erupción del volcán para resaltar la textura de la imagen.

Dado que se utilizó todo el espectro PQ en la producción, el colorista tenía más libertad creativa y la capacidad de ajustar los colores durante la graduación, y además, el proyecto terminado será más fácil de remasterizar en el futuro. Por lo general, se acostumbra confiar en el color original, pero esta experiencia ha demostrado al equipo de Production IG que se pueden tomar decisiones más creativas en el proceso técnico digital.

De toda la producción, una de las lecciones más valiosas para el director fue que el proceso de gestión del estudio realmente debería gestionar todo lo que sucede, y en lugar de una infinita variedad de posibilidades, obligar a los subcontratistas a utilizar un proceso técnico específico y ciertas herramientas. Sin embargo, poco puede cambiar hasta que grandes estudios se unan con fabricantes de equipos y hagan una transición a gran escala a lo digital.

Sonido de anime: sonido inmersivo

El panorama sonoro del anime es diferente de todos los demás tipos de medios. La música y el sonido son aspectos críticos de la narración de historias, y Sol Levante fue la oportunidad perfecta para mostrar cómo el sonido inmersivo y las imágenes experimentales funcionan juntas en 4K y HDR. Nuestro equipo cree que el sonido envolvente es el siguiente paso natural en la evolución del audio, ya que mejora tanto la calidad como las posibilidades creativas de contar historias. La combinación de 4K, HDR y sonido envolvente permitió dar vida al mundo de Akira. Y todo esto es posible con las mismas herramientas que los mezcladores ya están acostumbrados a usar.

El mezclador Will Files y el diseñador de sonido Matt Yokum, junto con Akira, expresaron su mundo en el estándar Dolby Atmos. Haruka estuvo involucrada en este proceso en una etapa temprana, cuando el dibujo todavía estaba en marcha, y ayudó a transferir las ideas de Akira del japonés al inglés, al tiempo que conservaba los matices y el significado creativo.

En un caso, Matt agregó un cuervo que croaba en una escena donde cientos de pájaros vuelan, y como resultado, Akira le pidió que encontrara el sonido de un pájaro que se encontraría en Japón. Matt creó un sonido completamente nuevo basado en el grito de un pájaro local, y de esta forma se obtuvo un efecto que no habría existido sin la colaboración universal.

Utilizando Atmos dentro de Pro Tools, Will logró una imagen de sonido contrastante y logró tejer una grabación orquestal de música de la compositora Emily Rice, grabada en un micrófono 3D Schoeps ORTF durante el doblaje. Mientras mira un video, el sonido se mueve por la habitación, vuela hacia el techo, cae al piso y despega nuevamente, y así cuenta la dramática historia de Sol Levante sin diálogo.

Mezclar sonido envolvente es un concepto nuevo para muchos mezcladores, incluido Japón, donde todavía no hay muchos cines que puedan reproducir ese sonido. Sin embargo, mezclar en Dolby Atmos permite al equipo creativo crear una mezcla única, que luego se puede usar para obtener todas las otras opciones, desde 7.1 y 5.1 a estéreo. Este formato es ideal para el archivo y puede aportar una nueva dimensión al anime.

Supervisor de sonido y mezclador de grabación Wil Files funciona con Dolby Atmos

El futuro de la producción de anime: ¿qué sigue?

El mundo encantador de Sol Levante es la culminación del arte, la tecnología y la curiosidad. Teniendo en cuenta todo lo que aprendimos durante estos dos años de trabajo con Production IG, queremos ofrecer a los animadores y equipos creativos el desarrollo tecnológico, trabajar junto con los fabricantes de equipos para apoyar mejor a la industria del anime y trabajar con estudios de anime para aplicar nuestra experiencia a sus productos Para ayudar a la industria a comprender mejor 4K HDR y un sonido envolvente en el anime, cargamos todos los materiales de trabajo utilizados en Sol Levante para que pueda descargarlos y experimentar con ellos. Los suscriptores de hoy pueden ver Sol Levante en Netflix. La mejor película se percibirá en un dispositivo configurado para HDR con una suscripción premium.

De izquierda a derecha: Katsushi Ed, Miho Tanaka, Akira Saito, Hisashi Ezura, Masakazu Morinaka.

El director Akira Saito nos dijo que “4K HDR supuestamente nos dio alas y un motor para que podamos ver nuevos horizontes y el advenimiento de una nueva era. "Continuamos estableciendo objetivos desafiantes e innovando para el futuro". En este proyecto, encontramos muchas dificultades, pero Akira cree que para el estudio 4K HDR es la única forma de mantenerse a la vanguardia de la creación de contenido.

Sin embargo, la situación actual es tal que las dificultades técnicas en la transición de HD a 4K no desaparecen. Alentamos a las personas creativas a ir más allá de los límites del permiso al contar su historia. Queremos crear contenido en un formato en el que nuestros espectadores lo consuman, y queremos que mantenga una apariencia excelente durante el mayor tiempo posible. Sin embargo, no podemos ignorar el hecho de que en el caso del anime, las herramientas y los equipos aún no están diseñados para organizar fácilmente el proceso técnico de creación de imágenes en 4K. Queda mucho por hacer y estudiar, y el equipo de Creative Technologies está trabajando en estrecha colaboración con los fabricantes de software y hardware para compartir sus conocimientos y tratar de acelerar las mejoras en la industria.

El ajuste para HDR es mucho más simple, porque aquí los problemas son menos complicados. Ya hay fabricantes de software que realizan cambios en sus programas debido a los problemas que encontramos en la producción de Sol Levante, como la visualización diferente del selector de color en diferentes monitores y una interfaz deslumbrante. El mayor obstáculo para toda la industria sigue siendo la falta de monitores HDR asequibles. Al final, incluso con una herramienta que funcione correctamente, para seleccionar un color en HDR necesitará un monitor en el que pueda ver qué color elige. Tan pronto como haya más de ellos, el uso generalizado de HDR en el anime será solo cuestión de tiempo.

"¿Quién no querría vivir en una casa más grande?" - Entonces el animador Hisashi Ezura nos contó sobre trabajar con HDR, y esta analogía hizo reír a Haruka porque todos saben en qué pequeños apartamentos se esconden los japoneses, soñando constantemente con una casa más grande. Pero este sueño sigue siendo un sueño. Y su sueño se ha hecho realidad. Y ahora que el HDR le ha dado acceso a todas estas nuevas funciones, nunca volverá.

En italiano, Sol Levante significa "el sol naciente en el este", que metafóricamente significa Japón. Akira eligió este nombre porque para ella todo el proyecto estaba dedicado al comienzo: el comienzo de algo nuevo para los animadores japoneses. ¡Y el último fotograma de la película es el amanecer, porque la película en sí es el amanecer de una nueva era tecnológica para el anime!