Par Giancarlo Elia Valori
On peut dire qu’il est difficile pour les humains de prédire avec précision le potentiel de croissance de l’IA à l’ère du cinéma contemporain, mais les avantages de la technologie de l’intelligence artificielle dans le processus de production cinématographique industrielle nous font peu à peu réfléchir.
En juin 2024 a été publié le premier ouvrage monographique au monde consacré à la peinture créée à l’aide de l’intelligence artificielle, intitulé “Peinture IA : l’événement positif de l’art contemporain à l’encre”, écrit par Sun Lijun.
Il s’agit de la première approche pionnière et expérimentale visant à montrer de manière créative et intuitive la « confrontation » et le « jeu » entre l’intelligence artificielle et l’art humain, en juxtaposant des peintures à l’encre génératives créées à l’aide de l’intelligence artificielle et des peintures à l’encre originales, et en installant deux écrans.
Le court métrage de science-fiction The Earth Cannon, le film d’animation The Foolish Old Man Removes the Mountains et le film de marionnettes Jingyang Gang, entièrement produits par l’Académie du cinéma de Pékin à l’aide de l’intelligence artificielle, ont tous atteint une plus grande efficacité de production et de meilleurs effets visuels grâce à l’application de la technologie de l’intelligence artificielle.
Iron Sky est un autre film de science-fiction très réussi produit par Sun Lijun. À l’exception de la calligraphie sur l’affiche, toutes les images, les plans animés du film et les autres processus ont été réalisés à l’aide de l’IA, ce qui a considérablement réduit les coûts de production.
Le coût de production de l’affiche du film n’était que d’environ 50 yuans (7,50 dollars américains), ce qui est bien inférieur aux coûts de conception et de production de 20 000 à 30 000 yuans (3 000 à 4 500 dollars américains) requis par le processus de conception traditionnel actuel dans l’industrie.
Le court métrage d’animation Space Ranch a été réalisé de manière indépendante par un étudiant de l’Académie en seulement deux semaines. Selon les exigences traditionnelles de l’Académie en matière de planification pédagogique, la production du contenu correspondant aurait pu être réalisée en un an. Cela montre que la création d’images à l’ère de l’intelligence artificielle peut atteindre un degré remarquable d’optimisation en termes d’investissement, tant au niveau des coûts que de la taille de l’équipe.
Depuis l’avènement de l’intelligence artificielle, les frontières entre les films d’animation et les films en prise de vues réelles se sont progressivement estompées (la prise de vues réelles désigne les films ou les programmes télévisés dans lesquels les événements et les personnages sont interprétés par de vrais acteurs, plutôt que par des personnages animés ou générés par ordinateur).
Le modèle « luxueux » caractérisé par des investissements élevés et des acteurs célèbres dans les rôles principaux, tel que représenté par Hollywood, pourrait être éclipsé à l’ère de l’intelligence artificielle dans le cinéma. Comment tirer les leçons de l’intelligence artificielle et comment « se lier d’amitié » avec l’intelligence artificielle sont des questions qui méritent réflexion à l’heure actuelle.
L’avènement de l’ère des « films » intelligents a sans aucun doute posé des défis aux scénaristes, acteurs, réalisateurs, experts techniques et professionnels du cinéma dans tous les pays du monde, mais le plus important est que cela a également créé des opportunités, encourageant la production à maximiser l’originalité, ce qui a une importance considérable pour bien raconter des histoires et les transformer en films.
Parmi les exemples les plus récents de l’utilisation de la technologie de l’intelligence artificielle dans la production cinématographique, le processus de création de films de science-fiction est extrêmement représentatif. Au cours du processus de production, l’animation cinématographique réelle est combinée à une technologie de transfert de style basée sur l’IA, ce qui permet d’obtenir des avancées technologiques et spectaculaires significatives.
Alors que l’animation en direct classique implique deux flux de travail : le tournage en direct et la copie manuelle, dans la nouvelle technique, les performances des acteurs réels sont d’abord filmées, puis ces clips filmés sont convertis en 24 images par seconde, puis les images sont transformées en un style de bande dessinée image par image et enfin converties en animation.
Une fois le tournage terminé, les techniciens explorent de nouvelles façons de produire des animations de flashbacks, c’est-à-dire la structure narrative dans laquelle l’ordre chronologique des événements est interrompu pour faire place au souvenir d’événements antérieurs, par exemple en introduisant de nouvelles expressions stylistiques afin que le spectateur puisse comprendre que les parties concernées sont un souvenir.
Avant de passer à la technologie de l’intelligence artificielle, l’équipe de production fait une petite pause pour essayer d’utiliser des méthodes traditionnelles d’animation cinématographique afin de terminer le segment de flash-back susmentionné, avant de décider d’utiliser la génération par intelligence artificielle pour produire les scènes de « mémoire », en combinant des images réelles avec des images en deux dimensions et en régénérant l’ensemble de la partie animation à l’aide de la technologie de l’intelligence artificielle, sur la base de copies ou de dessins manuels traditionnels. À partir de là, ils passent à la finalisation de la génération et à une nouvelle version.
La combinaison de la technologie d’animation en direct et de l’intelligence artificielle permet de présenter les scènes de mémoire du film dans un style différent de celui des autres lignes temporelles, obtenant ainsi un effet visuel unifié dans l’expression du « moment », médiatisé par le spectateur/observateur du film.
On estime que, bien que l’exploration technique du film soit encore insuffisante, avec les progrès rapides de la technologie à l’avenir, les problèmes pratiques rencontrés par la production cinématographique industrielle seront progressivement résolus. Par exemple, de nombreuses vidéos actuelles de type « texte-vidéo » (T2V) ou « image-vidéo » (I2V) présentent des images raffinées et riches en détails, mais les expressions des personnages ne sont pas assez vivantes.
L’expérience exploratoire montre que pour résoudre ce problème, il est non seulement nécessaire de combiner les performances réelles des acteurs, mais aussi d’appliquer activement l’intelligence artificielle aux paramètres artistiques et visuels afin de créer de nouvelles expressions.
L’application de la technologie de l’IA devrait permettre aux créateurs de ne plus être limités par des conditions telles que le financement, les ressources et le temps, et d’élargir leur imagination, ce qui facilitera la réalisation de leur créativité et la présentation de leurs œuvres au public de manière plus complète et plus efficace.
Giancarlo Elia Valori – Honorable de l’Académie des Sciences de l’Institut de France, Professeur honoraire à l’Université de Pékin.
(Les opinions exprimées dans cet article sont celles de l’auteur et ne reflètent pas nécessairement celles de World Geostrategic Insights).
Source de l’image : China Daily.