Sol Levante: comment ils ont fait l'anime en 4K et HDR pour Netflix



L'anime, souvent rejeté comme de simples dessins animés, est une variété de contes de fées, d'un style vivant et de graphismes élégants. Il s'agit d'une forme d'art qui, au cours des cinquante dernières années, s'est développée et a gagné en popularité, en diversité et en complexité. Il a probablement commencé avec des lampes peintes au début du XXe siècle, puis dans les années 1970, il a gagné en popularité au Japon. Aujourd'hui, les téléspectateurs ont le choix entre des centaines d'émissions de télévision et de longs métrages de style anime du monde entier.

Notre équipe des technologies créatives voulait améliorer la qualité technique de l'image d'anime, découvrir quelles nouvelles possibilités créatives cela pouvait offrir aux gens et ce qu'il faudrait pour augmenter la résolution de l'anime de HD à 4K et entrer une palette de couleurs plus large en HDR dans la boîte à outils des artistes.(plage dynamique élevée). En ce qui concerne la 4K, la plupart des animateurs japonais ont demandé la même chose: du papier plus gros! Cependant, les artistes de Production IG pensent que l'avenir réside dans la technologie numérique. C'est ainsi qu'est née une collaboration large et colorée - et le court métrage Sol Levante qui en résulte est disponible pour visualisation sur Netflix en 4K Dolby Vision et Atmos!

L'équipe des technologies créatives de Netflix essaie de comprendre comment améliorer la création de contenu à l'épreuve du temps et travaille avec divers partenaires de recherche et développement pour mettre ces améliorations à la disposition des artistes dans des flux de travail réels. Nos tâches centrales combinent à la fois qualité et durabilité avec fiabilité de présentation et création d'un espace de créativité. Étant donné la prolifération rapide des appareils grand public dotés de capacités d'affichage 4K HDR, il est facile d'imaginer que dans cinq ans, cette qualité deviendra la norme.

Au cours des dernières années, nous avons réussi à remasteriser des œuvres telles que Knights of Sidonia, Flavours of Youth et Godzilla, élevant la qualité du SDR au HDR. Mais que se passe-t-il si vous augmentez immédiatement la résolution de travail et créez un anime initialement avec un œil sur le HDR? Comment cela affectera-t-il les décisions créatives? Quels problèmes surgiront, de nature créative et technique? Comment le budget et les conditions vont-ils changer? Quelles nouvelles possibilités créatives cela peut-il offrir?



Production IG, basée à Tokyo, qui s'est imposé en tant que projets et animations de niveau Ghost In the Shell dans Kill Bill, a réuni une équipe expérimentée qui maîtrise parfaitement le travail «en numérique» et souhaite également répondre à ces questions. Notre curiosité commune a conduit à la création d'un anime expérimental de courte durée en 4K HDR Immersive Audio appelé Sol Levante. Et pour aider l'industrie à gérer le 4K HDR et les technologies audio immersives dans l'anime, nous avons publié tous les matériaux en accès libre , pour téléchargement et expérimentation.


La réalisatrice Akira Saito travaille chez After Effects


Akira et Haruka travaillent ensemble

Statut Anime actuel: Affaires


Bien que les histoires incroyables de l'anime moderne ne vieillissent jamais, le flux de travail lui-même, né au Japon, n'a pas changé depuis de nombreuses années. Pour comprendre la nécessité de notre expérience, il est important de comprendre comment l'anime est réellement créé au Japon.

Depuis le début du siècle, l'industrie de l'anime s'est éloignée du système traditionnel, lorsque le studio d'anime détient la majeure partie de la propriété intellectuelle, et est arrivée au modèle commercial moderne du «comité de production». Bien qu'il soit devenu plus facile pour les studios de créer du contenu grâce à un soutien financier, l'augmentation du nombre de participants complique le processus.



En partie ou en totalité, la production est sous-traitée à plusieurs entreprises ou indépendants, ce qui peut se produire à plusieurs niveaux. Avec un si grand nombre de sous-traitants, il est assez difficile d'initier tout le monde aux évolutions technologiques et aux nouvelles opportunités créatives. Dans différents projets, le nombre d'indépendants est différent, cependant, la plupart d'entre eux travaillent à domicile et leur équipement est de qualité inférieure à ce que le studio peut se permettre.



Statut d'anime actuel: Production


En plus des complexités du système de studio, des difficultés supplémentaires surviennent lorsque vous essayez d'innover le flux de travail de création d'anime. Et tandis que la 3D CG gagne en popularité - des émissions telles que Saint Seiya et Ultraman sont entièrement générées par ordinateur par des artistes 3D - la plupart de l'anime est toujours dessiné à la main. Certains artistes préfèrent la sensation du papier, ou ils n’ont pas le temps et l’argent pour investir dans des équipements qui leur permettent de s’essayer à l’art numérique. Le flux de travail après le dessin est déjà numérique, cependant, pour prendre en charge une résolution plus grande, l'équipement doit être sérieusement mis à jour. Il y a également une pénurie d'enseignants possédant l'expérience et les outils qui leur permettraient de former une nouvelle génération d'animateurs numériques. D'où le manque de personnelcapable et désireux de travailler avec un nombre déjà au stade du dessin.

Pour passer à l'antenne, l'anime se fait généralement dans la résolution de 1280x720, ou «Half HD». Seuls les spectacles les plus significatifs sont montrés en 1080 HD. Pour passer en 4K, le passage à un numéro devient nécessaire, car les images doivent être numérisées. Mais si une feuille de papier de format normal est simplement numérisée en augmentant le DPI, des détails inutiles apparaîtront en traits de crayon. Par conséquent, un anime dessiné à la main nécessite un papier plus grand.

Toujours dans le processus de rendu d'anime, la gestion des couleurs est rarement utilisée - un processus qui aide à obtenir une couleur prévisible et cohérente des dessins à chaque étape de la production et de la post-production.. À quelques exceptions près, tout est créé dans l'espace colorimétrique sRGB - le spectre le plus populaire utilisé en infographie. Dans les longs métrages, les animateurs peignent généralement en sRGB, et en post-production, ils ajoutent 3D LUT pour le transformer en P3, ce qui préserve l'apparence de sRGB dans l'espace colorimétrique P3.

Vous serez peut-être également surpris du fait que les diffuseurs japonais aient réglé la température de couleur à 9300 K, beaucoup plus bleue que la température de 6500 K, qui domine le reste du monde. Beaucoup d'animes sous licence pour Netflix ont été convertis en D65 BT.1886 à la toute fin de la post-production pour répondre à nos spécifications et regarder à droite sur notre service de streaming - comme prévu par leurs créateurs.

Comprenant toutes les difficultés liées au transfert d'anime des feuilles de papier vers un flux de travail entièrement numérique, Creative Technologies a travaillé en étroite collaboration avec Production IG pour essayer de prédire certains des problèmes. Cependant, ce n'est que lorsque l'équipe a commencé à vraiment utiliser des stylets et des tablettes numériques que ces découvertes ont commencé à prendre une forme claire.



Sol Levante: découvertes en post-production


Dans le processus actuel de création d'anime, il faut généralement un an et demi à deux ans pour écrire le script et terminer le travail sur la saison de 12 épisodes de la série. Dans le cas de notre court métrage de Sol Levante de trois minutes, le réalisateur Akira Saito a été engagé dans un storyboard pendant deux semaines. Elle a essayé d'incorporer de nombreuses options d'éclairage différentes dans le film, variant d'une scène à l'autre. L'histoire commence à l'aube, se développe pendant une journée sombre, puis se poursuit la nuit et se termine avec le lever du soleil. Akira a déclaré qu'elle était très intéressée par le travail et qu'elle était engagée avec enthousiasme dans l'animation, ne se doutant pas des problèmes qui pourraient apparaître dans sa production.


Un exemple de storyboard

Quand Akira a pensé à passer à la 4K et à augmenter la résolution, elle a trouvé un bon équilibre entre les cadres avec des dessins simples et les cadres avec de nombreux détails. Dans de nombreux cadres, elle a créé un monde dont la densité est suffisamment élevée pour impressionner le public, et en même temps, il a de petits détails qui peuvent être vus après l'agrandissement de l'image.



image

Pendant la phase de développement du personnage, l'animateur Hisashi Ezura a passé beaucoup de temps à affiner l'épaisseur des lignes en raison de l'expansion de la gamme dynamique. Les contours des personnages - un phénomène unique à l'anime, mais si vous utilisez l'épaisseur habituelle des lignes, elles seront trop nettes dans le SDR et trop artificielles dans le HDR. Il a réglé le stylet sur un tapotement «plus doux» sur la toile pour changer l'apparence des lignes.


Test de sélection de l'épaisseur des contours

Dans la phase de développement des couleurs, l'équipe a initialement décidé qu'une luminosité de 300 nits serait suffisante pour la pré-production. Cependant, voyant l'impression que 1000 nits font sur le moniteur Eizo CG3145, ils ont estimé que l'écart était trop grand et 300 nits ne permettraient pas au concepteur d'utiliser toute la palette. Étant donné que dans l'anime, les décisions concernant les couleurs sont prises au stade de la pré-production, il était très important pour Miho Tanaka, le concepteur des couleurs de Production IG, de voir comment la luminosité de 1000 nits se comportait sur le moniteur de mastering.

Il était également assez difficile de choisir un teint. Un ajustement spécial et approfondi nécessite la couleur de l'ombre, car elle peut grandement affecter la perception globale du visage et du personnage dans son ensemble. Miho a passé beaucoup de temps à rendre les personnages beaux à tout moment de la journée. Le HDR a facilité le choix des couleurs pour les scènes sombres, car dans ce mode, l'image ne commence pas à paraître «sale» et les lignes restent nettes. Sans une plage dynamique décente, il est difficile de maintenir la clarté de ces lignes fines, telles que les cils. HDR vous permet de séparer clairement les couleurs les unes des autres, afin qu'elles ne se mélangent pas de manière indésirable.



Lors de l'étude de l'apparence, d'autres problèmes sont apparus, ainsi que des opportunités. Grâce au HDR, l'effet visuel typique du brillant des yeux peut être remplacé par une autre méthode d'utilisation des couleurs. Si vous ajoutez des lignes brillantes aux lèvres, elles ont l'air brillantes. En conséquence, la réalisatrice a traité tous les commentaires et a ajusté en conséquence son design et ses couleurs.


A gauche - la version test, à droite - la finale

L'un des problèmes les plus difficiles avec HDR pendant la pré-production était les limitations associées aux outils de conception et de dessin. L'interface des programmes graphiques était trop lumineuse pour la regarder en permanence à une luminosité de 1000 nits, et l'arrière-plan devait être changé en gris (180) du blanc (255) lors de l'aperçu sur un moniteur HDR. De nombreux outils graphiques ne prennent toujours pas en charge la sortie 16 bits critique pour le HDR. Et le sélecteur de couleurs est différent sur les moniteurs SDR et HDR, ce qui rend difficile la sélection précise des couleurs.

Toujours à ce stade, des problèmes ont été trouvés avec une résolution de 4K. Lors du dessin de lignes, les artistes passaient constamment par le processus d'agrandissement du dessin et de vérification du résultat de leur travail en raison de restrictions sur la résolution de leur écran ou tablette. Lors de la visualisation de l'image entière, les lignes sont devenues trop fines pour prendre en compte tous les détails de l'image.

Sol Levante: découvertes en phase de production


Au stade de la pré-production de notre collaboration avec Production IG, les vraies difficultés ont commencé à apparaître en phase de production.

Pour commencer, l'équipe a dû mener de nombreuses expériences afin de configurer correctement le système de transfert d'informations et de sélectionner les profils de couleurs appropriés, ainsi que d'afficher correctement les couleurs sur chaque moniteur, en outre, en fonction du programme spécifique. Chacune de l'équipe d'artistes avait besoin de plusieurs moniteurs pour regarder l'image en modes SDR et HDR, et continuer à soutenir les projets sur lesquels ils travaillaient déjà en mode SDR. Le problème de la gestion des couleurs dans l'animation affecte de nombreuses étapes de production. Ce projet était particulièrement complexe, mais Junichiro Aki et Katsushi Eda, en collaboration avec le spécialiste de la gestion des couleurs Masakazu Morinaka, ont créé un système de travail.

Pour Sol Levante, absolument tout a été fait en numérique. En plus d'utiliser l'application Procreate pour iPad dans la pré-production et la génération d'idées, Production IG a également utilisé ClipStudio pour créer des images intermédiaires, Vue pour dessiner des arrière-plans et des éléments sélectionnés, Retas Stylus pour travailler avec la couleur, Photoshop et After Effects. Les animateurs ont expérimenté Toon Boom Harmony, qui prend en charge la technologie extrêmement populaire "d'animation des coupures de presse" en dehors du Japon.


Diagramme de flux de travail Sol Levante

L'équipe a immédiatement réalisé que certaines des techniques d'anime sur lesquelles elles s'appuyaient depuis des années ne fonctionneraient pas avec une luminosité et un spectre accrus. Par exemple, un effet typique dans l'anime est une transition en douceur vers 100% de blanc, qui est utilisé comme l'une des méthodes de narration. Cependant, le blanc dans le HDR s'est avéré trop lumineux, les artistes ont donc décidé de superposer une couche blanche sur le dessus. Et chaque fois que quelque chose ne fonctionnait pas comme prévu, ils ont trouvé une nouvelle façon d'obtenir le même résultat.

La résolution 4K a eu le plus grand impact sur le flux de travail lors de la génération des images finales avec des compositions composées d'images beaucoup plus grandes que la taille 4K - elles étaient nécessaires pour le panoramique. Et cela s'est avéré être un obstacle si sérieux que l'ensemble du projet a été ralenti pendant plusieurs mois. Certains des problèmes qui l'ont causé sont apparus en raison du fait que l'équipement devait être configuré pour fonctionner avec 4K; d'autres résidaient dans le fonctionnement du logiciel et la façon dont il utilise les ressources système. Pour les fabricants de logiciels, le principal problème reste la nécessité d'améliorer le travail avec les ressources.

Lorsque vous créez des motifs en nombre, vous pouvez enregistrer des lignes fines, car vous n'avez pas besoin de numériser du papier pour numériser. Comparé au dessin sur papier, l'animateur n'était plus aussi préoccupé par la taille de la toile. Il a également créé une «table des paramètres» qui limite le niveau de détail des personnages et de leurs accessoires sous certaines conditions. La quantité de détails dépend de la taille du caractère à l'écran. Ici, vous devez décider quels détails ajouter pour la résolution en 4K et lesquels ne doivent pas être gaspillés car ils ne seront pas visibles.


Tableau des paramètres IG de production

Poursuivant son travail sur Sol Levante, l'équipe Production IG a décidé d'externaliser une partie du rendu intermédiaire (création de cadres intermédiaires entre les deux images principales). L'externalisation de travaux similaires à d'autres sociétés est une pratique courante dans la production d'animes. Cela a été assez difficile à faire, car les sous-traitants rejettent généralement de nouvelles idées telles que le flux de travail numérique - pour s'adapter à ces nouveaux outils, des investissements en équipement et en recyclage du personnel sont nécessaires. De plus, Production IG a décidé que pour le bon choix de couleurs, de lignes de dessin et de compositions de construction, il était absolument nécessaire de travailler en permanence sur un moniteur HDR avec une luminosité de 1000 nits. Mais sur le marché de la post-production, il y a une pénurie constante de moniteurs HDR, en particulier à des prix abordables.ce qui, dès le début, affecte grandement la décision de travailler avec de tels moniteurs.

En conséquence, Production IG a néanmoins réussi à trouver un nombre suffisant de sous-traitants avec un processus technologique entièrement numérique, à une exception près: la répartition des images par temps, ou timehit, qui est utilisée pour organiser les dessins sur une chronologie et marquer les lieux de rendu intermédiaire, les mouvements de caméra et d'autres informations techniques. Timeshield était le seul document papier de tout le processus de fabrication de Sol Levante.



Habituellement, l'anime n'utilise pas d'étalonnage des couleurs aux dernières étapes de la production, mais tout en travaillant sur Sol Levante, les animateurs ont travaillé avec un conteneur d'image (PQ) avec une luminosité de 10000 nits, et il a été affiché sur un moniteur avec 1000 nits, il a donc été nécessaire de faire une passe générale pour aligner le visible spectre de couleurs et aspect général de l'image. Pendant le calibrage, le coloriste avec le réalisateur a découvert plusieurs possibilités pour améliorer l'image finale - pour cela, il a fallu changer certaines des couleurs initialement sélectionnées et permettre à certaines parties de l'image de ressortir par rapport à l'arrière-plan. Par exemple, un coloriste a modifié la couleur de la foudre dans l'un des cadres afin qu'elle se démarque davantage et ajoute de la granularité lors de l'éruption du volcan pour mettre en évidence la texture de l'image.

Étant donné que l'ensemble du spectre PQ a été utilisé en production, le coloriste a eu plus de liberté créative et la possibilité d'ajuster les couleurs pendant la remise des diplômes, et en outre, le projet fini sera plus facile à remasteriser à l'avenir. Il est généralement habituel de s'appuyer sur la couleur d'origine, mais cette expérience a montré à l'équipe Production IG que des décisions plus créatives peuvent être prises dans le processus technique numérique.

De toute la production, l'une des leçons les plus précieuses pour le réalisateur est que le processus de gestion du studio devrait vraiment gérer tout ce qui se passe, et au lieu d'une infinité de possibilités, forcer les sous-traitants à utiliser un processus technique spécifique et certains outils. Cependant, peu de choses peuvent changer jusqu'à ce que les grands studios s'unissent aux fabricants d'équipements et effectuent une transition à grande échelle vers le numérique.

Son Anime: son immersif


Le paysage sonore de l'anime est différent de tous les autres types de médias. La musique et le son sont des aspects essentiels de la narration, et Sol Levante a été l'occasion idéale de montrer comment le son immersif et les images expérimentales fonctionnent ensemble en 4K et HDR. Notre équipe estime que le son immersif est la prochaine étape naturelle dans l'évolution de l'audio, car il améliore à la fois la qualité et les possibilités créatives de la narration. La combinaison de 4K, HDR et son immersif a permis de donner vie à l'univers d'Akira. Et tout cela est possible avec les mêmes outils que les mixeurs sont déjà habitués à utiliser.



Le mixeur Will Files et le concepteur sonore Matt Yokum, avec Akira, ont exprimé leur monde dans le standard Dolby Atmos. Haruka a été impliqué dans ce processus à un stade précoce, alors que le dessin était encore en cours, et a aidé à transférer les idées d'Akira du japonais vers l'anglais, tout en préservant les nuances créatives et le sens.

Dans un cas, Matt a ajouté un corbeau coassant dans une scène où des centaines d'oiseaux volent, et en conséquence, Akira lui a demandé de trouver le son d'un oiseau qui se trouverait au Japon. Matt a créé un son complètement nouveau basé sur le cri d'un oiseau local, et de cette manière un effet a été obtenu qui n'aurait pas existé sans collaboration universelle.



En utilisant Atmos dans Pro Tools, Will a réalisé une image sonore contrastée et a réussi à y tisser un enregistrement orchestral de musique du compositeur Emily Rice, enregistré sur un microphone Schoeps ORTF 3D pendant le doublage. Tout en regardant une vidéo, le son se déplace dans la pièce, vole jusqu'au plafond, tombe au sol et repart, et raconte ainsi l'histoire dramatique de Sol Levante sans dialogue.

Le mixage de son immersif est un nouveau concept pour de nombreux mixeurs, y compris le Japon, où il n'y a toujours pas beaucoup de cinémas qui peuvent jouer un tel son. Cependant, le mixage dans Dolby Atmos permet à l'équipe créative de créer un seul mixage, qui peut ensuite être utilisé pour obtenir toutes les autres options, de 7.1 et 5.1 à stéréo. Ce format est idéal pour l'archive et peut apporter une nouvelle dimension à l'anime.


Superviseur du son et mixeur d'enregistrement Wil Files fonctionne avec Dolby Atmos

L'avenir de la production d'anime: quelle est la prochaine étape?


Le monde enchanteur de Sol Levante est l'aboutissement de l'art, de la technologie et de la curiosité. Compte tenu de tout ce que nous avons appris au cours de ces deux années de travail avec Production IG, nous voulons offrir aux animateurs et aux équipes créatives le développement technologique, travailler avec les fabricants d'équipements pour mieux soutenir l'industrie de l'anime et travailler avec les studios d'anime pour appliquer notre expérience à leur des produits. Pour aider l'industrie à mieux comprendre 4K HDR et son immersif dans l'anime, nous avons téléchargé tous les documents de travail utilisés dans Sol Levante afin que vous puissiez les télécharger et les expérimenter. Aujourd'hui, les abonnés peuvent regarder Sol Levante sur Netflix. Le meilleur film sera perçu sur un appareil configuré pour HDR avec un abonnement premium.


De gauche à droite: Katsushi Ed, Miho Tanaka, Akira Saito, Hisashi Ezura, Masakazu Morinaka.

Le directeur Akira Saito nous a dit que «4K HDR nous aurait donné des ailes et un moteur pour que nous puissions voir de nouveaux horizons et l'avènement d'une nouvelle ère. «Nous continuons à nous fixer des objectifs ambitieux et à innover pour l'avenir.» Dans ce projet, nous avons rencontré de nombreuses difficultés, mais Akira estime que pour le studio 4K HDR est le seul moyen de rester à la pointe de la création de contenu.

Cependant, la situation actuelle est telle que les difficultés techniques lors du passage de la HD à la 4K ne disparaissent pas. Nous encourageons les créatifs à dépasser les limites de la permission en racontant leur histoire. Nous voulons créer du contenu dans un format dans lequel nos téléspectateurs le consommeront, et nous voulons qu'il conserve une excellente apparence aussi longtemps que possible. Cependant, nous ne pouvons ignorer le fait que dans le cas des anime, les outils et équipements ne sont toujours pas conçus pour organiser facilement le processus technique de création d'images en 4K. Il reste beaucoup à faire et à étudier, et l'équipe de Creative Technologies travaille en étroite collaboration avec les fabricants de logiciels et de matériel pour partager leurs connaissances et essayer d'accélérer les améliorations dans l'industrie.

L'ajustement pour HDR est beaucoup plus simple, car ici les problèmes sont moins compliqués. Il existe déjà des fabricants de logiciels qui modifient leurs programmes en raison des problèmes que nous avons rencontrés dans la production de Sol Levante - tels que l'affichage différent du sélecteur de couleurs sur différents moniteurs et une interface éblouissante. Le plus grand obstacle pour l'ensemble de l'industrie reste le manque de moniteurs HDR abordables. En fin de compte, même avec un outil fonctionnant correctement, pour sélectionner une couleur en HDR, vous aurez besoin d'un moniteur sur lequel vous pouvez voir la couleur que vous choisissez. Dès qu'il y en aura plus, l'utilisation généralisée du HDR dans les anime ne deviendra qu'une question de temps.



"Qui ne voudrait pas vivre dans une maison plus grande?" - donc l'animateur Hisashi Ezura nous a parlé de travailler avec HDR, et cette analogie a fait rire Haruka parce que tout le monde sait dans quels petits appartements se cachent les Japonais, rêvant constamment d'une plus grande maison. Mais ce rêve reste un rêve. Et son rêve est devenu réalité. Et maintenant que le HDR lui a donné accès à toutes ces nouvelles fonctionnalités, il ne reviendra jamais.

En italien, Sol Levante signifie «le soleil se levant à l'est», ce qui signifie métaphoriquement le Japon. Akira a choisi ce nom parce que pour elle tout le projet était dédié au début - le début de quelque chose de nouveau pour les animateurs japonais. Et la dernière image du film est l'aube, car le film lui-même est l'aube d'une nouvelle ère technologique pour l'anime!

All Articles