"Pioneers of the Metaverse" est une colonne que nous avons créée pour le développement du Metaverse. Elle s'adresse principalement aux praticiens qui creusent profondément dans l'industrie du Metaverse ou qui mènent des "orpaillages" dans le Metaverse. D'un point de vue unique, nous peut voir les entreprises ou les individus qui dirigent le développement du métaverse mondial. Nous croyons fermement que le rideau du métavers a été ouvert et que l'Internet technologique qui conduira les 20 prochaines années est entré dans la vague de l'époque. Voici notre numéro 38. Les outils d'IA générative sont devenus la tendance actuelle et les produits de Runway sont uniques.
Récemment, Runway, une plate-forme d'IA générative, a levé environ 100 millions de dollars en financement de série D dirigé par Google. Runway n'est pas seulement une étoile montante dans le monde de l'investissement, mais son produit RunwayML a participé à la production de "The Universe", qui a également remporté l'Oscar de la meilleure actrice il n'y a pas si longtemps.
"C'est un monde magique, et ce qui reste aux êtres humains, ce sont des moments en constante évolution." Comme l'expliquent les lignes du film, **l'outil de montage vidéo Gen-2 de Runway montre la magie et l'émerveillement de l'IA transformant du texte en vidéo world **, il vous suffit de saisir quelques mots ou une description d'une phrase pour générer l'image vidéo souhaitée pour nous.
La vidéo est une partie importante des médias de contenu social contemporains, et les applications vidéo telles que TikTok, Instagram, Snapchat et YouTube ont également été parmi les applications les plus téléchargées au cours des dernières années. La courte vidéo correspond davantage aux besoins de divertissement des personnes modernes utilisant un temps fragmenté dans le cadre d'un rythme rapide et d'une forte densité d'informations. La segmentation verticale est également la tendance de développement de la vidéo courte. La piste rencontre les deux.
Ci-dessous, nous allons explorer l'historique du développement de Runway, présenter ses produits de base et ses technologies uniques, et analyser l'AIGC et son impact sur l'industrie du divertissement au pays et à l'étranger.
Route montante de la piste
Runway est l'une des entreprises les plus remarquables de la liste 2023 AI 50 publiée par Forbes, mais son ascension ne s'est pas produite du jour au lendemain, mais a connu une coïncidence et une nécessité.
◉ Phase d'étude
Runway a été fondée en 2018 par Cristóbal Valenzuela (PDG), Anastailities Germanidis (CTO) et Alejandro Matamala Ortiz (CDO).
(Fondateurs de la piste : Anastailities Germanidis (ci-dessus), Alejandro Matamala Ortiz (à gauche) et Cristóbal Valenzuela (à droite) à Manhattan)
Avant de créer son entreprise, Valenzuela a passé beaucoup de temps à comprendre comment les ordinateurs étaient appliqués aux arts visuels. Bien qu'il n'ait qu'une formation en économie, il est fasciné par la créativité artistique des ordinateurs et se demande ce que les technologies de l'information peuvent permettre aux artistes de faire avec des images et des vidéos.
Ainsi, après avoir déménagé à New York, il s'est inscrit à la majeure ITP (Interactive Electronic Media) de l'Université de New York. Il s'agit d'un programme de maîtrise de deux ans bien connu qui forme les étudiants à explorer de nouvelles technologies et à interagir avec d'autres disciplines pour améliorer la vie humaine.
Valenzuela a rencontré les deux autres fondateurs alors qu'il recherchait des modèles ML pour les applications de segmentation d'images et de vidéos dans les domaines créatifs à NYU.
Après avoir appris ImageNet et AlexNet, ils se rendent compte que quelque chose de grand est sur le point de se produire dans le monde, mais personne ne le fera, alors pourquoi ne pas choisir de le faire par eux-mêmes ?
◉ Le prototype fait son apparition
Au début, ils se concentraient uniquement sur le parcours académique, mais lors de la recherche de thèse, Valenzuela s'est rendu compte que l'hypothèse académique parfaite ne deviendrait qu'une bulle pour la pratique, alors il a commencé à communiquer davantage avec les gens de l'industrie de l'art, et a commencé le premier dans le school Une série de projets de recherche expérimentaux et intégrés ont été établis dans Photoshop et Premiere et inspirés par le monde extérieur.
L'équipe d'intelligence artificielle d'Adobe leur a également lancé une branche d'olivier, mais ce qu'ils veulent, c'est contrôler l'ensemble du processus de création, pas créer selon un itinéraire prédéterminé. Valenzuela pense que Premiere et Final Cut ne sont que des outils pour les professionnels de l'ancienne ère des médias pour créer de l'audio et de la vidéo, et non des outils vidéo pour les particuliers à l'ère de la vidéo courte. Alors, ils ont eu l'idée de créer une entreprise.
Bientôt, en 2018, Runway a été lancé pour la première fois en tant que magasin d'applications modèles, permettant aux utilisateurs de choisir des modèles d'apprentissage automatique pour divers cas d'utilisation.La caractéristique du produit est que l'interface visuelle de l'application résume le processus de raisonnement et de formation d'origine.
Alors que le catalogue de modèles et la base d'utilisateurs continuaient de croître, l'équipe a commencé à voir émerger un modèle d'utilisation particulier dans le montage vidéo. De nombreux éditeurs vidéo et cinéastes utilisent Runway car ils voient le potentiel de l'utilisation de modèles pour automatiser les flux de travail fastidieux.
Runway a donc commencé à essayer d'utiliser les connaissances de son catalogue de modèles pour approfondir le montage vidéo. Toute l'équipe a réalisé qu'elle réduisait le temps et le coût de production de la vidéo et rendait le montage vidéo ML accessible à tous. C'est alors qu'ils ont changé de tactique et décidé de se concentrer sur la création d'un outil de génération de vidéo instantanée.
◉ Grand succès
Runway est défini comme un nouvel outil pour la prochaine génération de créateurs de vidéos. Valenzuela a déclaré que dans la créativité artistique, les gens ne trouveront jamais un outil qui peut tout faire, ** mais Runway est un outil qui fournit une aide basée sur les questions et les idées des gens **, visant à réduire le travail fastidieux et compliqué de faire des vidéos. .
Runway a profité de l'engouement du marché pour l'intelligence artificielle générative.Après avoir levé plusieurs tours de capital-risque, la valorisation de Runway a atteint 1,5 milliard de dollars, ce qui en fait une nouvelle licorne de l'IA générative. Après avoir conclu un important accord sur le cloud avec Amazon en mars de cette année, Runway a signé il n'y a pas si longtemps un accord majeur sur le cloud computing avec Google.
Aujourd'hui, Runway est un éditeur vidéo à part entière qui permet une collaboration en temps réel dans le navigateur, avec de plus en plus de fonctionnalités d'édition et de création vidéo AI. Il est utilisé par des milliers d'utilisateurs, des amateurs aux professionnels.
Disposition des produits de la piste
Chez Runway, ils croient que tout le monde a une histoire. Sa mission : rendre la création de contenus accessible à tous. Ainsi, l'entreprise utilise les dernières avancées en matière d'infographie et d'apprentissage automatique pour repousser les limites de la créativité, en abaissant les barrières à la création de contenu et en permettant une nouvelle vague de narration.
Au cours des quatre dernières années, la société a levé des fonds auprès d'investisseurs de premier plan, avec des équipes allant d'assez petites pour tenir une table à une équipe diversifiée et créative qui travaille depuis des années sur l'intelligence artificielle pour le montage vidéo et le développement de logiciels.
Il existe de nombreux produits et technologies de Runway.La forme de produit de Runway au début de son activité était un magasin d'applications pour les modèles ML (machine learning), sur lequel les utilisateurs peuvent utiliser des centaines de modèles, tels que le modèle StyleGAN.
Par la suite, Runway a publié environ 30 outils de création d'IA basés sur le nouvel algorithme d'IA, y compris cinq catégories d'audio, d'image, de vidéo, de 3D et de génération, couvrant presque tous les outils de génération et de traitement de contenu audio et vidéo.
De plus, en tant que premier logiciel vidéo généré par l'IA au monde, RunwayML est un exemple de sa progression vers les plateformes de contenu traditionnelles et les terminaux mobiles. En plus de fournir un ensemble complet de bibliothèque d'outils d'intelligence artificielle multimodale, la bibliothèque d'outils présente également trois fonctions principales de réparation d'image, d'édition d'image sur écran vert et de suivi de mouvement, qui peuvent être décrites comme directement pleines de technologie noire et d'effets d'éclatement. .
Aujourd'hui, les produits phares de Runway sont les éditeurs vidéo Gen-1 et Gen-2. Le modèle Gen-1 peut modifier le style de la vidéo originale en saisissant du texte ou des images, par exemple en convertissant des séquences réelles en un monde découpé sur papier de dessin animé. Le modèle Gen-2 peut utiliser directement du texte pour générer des scènes vidéo, permettant aux utilisateurs d'utiliser des invites de texte pour générer un "contenu vidéo réaliste" et "couper automatiquement des vidéos".
Les produits et les technologies de Runway sont évidents. En plus de nombreuses marques et institutions bien connues, telles qu'Adobe, Facebook, Google, Netflix et le New York Times, ses clients comprennent également des utilisateurs de Douyin et de YouTube, ainsi que des films grand public et des Studios de fiction télévisée.Tous utilisent les créations de l'entreprise, qui sont largement utilisées dans le cinéma, la télévision et la publicité. Par exemple : la production d'effets spéciaux dans "Black Widow" ; "The Late Show" animé par Stephen Colbert ; les effets visuels fous et cool de "The Universe" et ainsi de suite.
Derrière l'expansion de son champ d'application se cache l'énorme changement auquel l'industrie est confrontée. En tant que "magie magique" dans le domaine de la vidéo, des outils tels que Runway ont été bien accueillis par l'industrie de la production cinématographique et télévisuelle, mais tout le monde n'accueille pas l'IA.
Résistée par les scénaristes, favori des effets spéciaux
Avec la popularité des outils d'IA dans le monde entier, la vie des gens est en effet devenue plus pratique, mais cela a également conduit au chômage des travailleurs du texte tels que les rédacteurs et les scénaristes. L'entreprise utilise l'IA pour écrire des scripts, ce qui non seulement prive les scénaristes de leur emploi, mais rabaisse également la "dignité et la valeur du travail humain".
Le réalisateur Guo Fan a déclaré: "Si la troisième saison de" The Wandering Earth "est filmée, au moins la moitié des personnes présentes sur la scène seront réduites. L'intelligence artificielle est à la fois un défi et une opportunité pour nous. Cela peut être une opportunité pour nous de dépasser Hollywood dans un corner."
À l'heure actuelle, à Hollywood, en raison de considérations de coût, les producteurs utilisent déjà largement l'IA pour la création. Selon les précédents rapports des médias, après avoir appris l'intrigue d'un drame américain populaire, la machine à intelligence artificielle peut déjà écrire les grandes lignes du scénario du premier épisode de la nouvelle saison.
Cette utilisation de l'IA pour la création a déclenché une forte résistance de la part de milliers de scénaristes de cinéma et de télévision de la Hollywood Screenwriters Guild (WGA), qui protestent contre les bas salaires et le phénomène selon lequel l'IA remplace de plus en plus les humains dans l'écriture de scénarios. Le créateur de "Black Mirror", Charlie Bullock, a déclaré dans une interview qu'il avait déjà utilisé ChatGPT pour écrire un épisode du script "Black Mirror", et que le résultat était "comme des ordures".
Bien que les deux appartiennent à l'industrie du cinéma et de la télévision, l'attitude des producteurs d'effets spéciaux envers l'IA est complètement opposée et ils adoptent activement la technologie de l'IA.
Avec le soutien de la technologie de l'IA, l'équipe d'effets spéciaux de "The Universe", lauréat d'un Oscar, a terminé la post-production avec seulement cinq personnes. La célèbre scène "main de hot-dog" a également remporté des éloges unanimes tant à l'intérieur qu'à l'extérieur du industrie.
Ce cas réussi montre que le potentiel de la technologie de l'IA dans la création cinématographique et télévisuelle est énorme et ne peut être ignoré. Afin de discuter de la façon dont la technologie de l'IA peut changer l'avenir de l'industrie du cinéma et de la télévision, l'organisation à but non lucratif AI LA a récemment organisé la conférence "AI on the Lot" à Los Angeles, et a finalement obtenu "L'ère de l'intelligence artificielle a arrivé" et "Tous les créatifs devraient apprendre à l'utiliser" ces deux conclusions.
La tendance est imparable, les roues de l'innovation technologique tournent et l'invasion de l'IA s'est discrètement mise en scène à Hollywood.
Les entreprises d'intelligence artificielle envahissent Hollywood
En effet, l'ère de l'intelligence artificielle est arrivée, et elle change les règles du jeu dans l'industrie cinématographique et télévisuelle.De plus en plus d'entreprises AIGC sont prêtes à apporter une nouvelle inspiration à la production cinématographique et télévisuelle.
◉ Vaudou profond
Fondée par Trey Parker et Matt Stone, les créateurs de la célèbre série animée "South Park", Deep Voodoo se concentre sur le développement de services d'effets visuels de la technologie Deepfake et de projets de technologie de médias synthétiques.
Deepfake est une technologie qui utilise des méthodes d'apprentissage automatique telles que l'apprentissage en profondeur pour créer ou synthétiser du contenu audiovisuel.Cette technologie peut remplacer le visage ou l'expression d'une image ou d'une vidéo existante par une personne cible, afin d'atteindre l'objectif de forger une identité ou une expression. . .
La technologie de changement de visage de la société a attiré une large attention depuis son lancement, comme le MV "The Heart Part 5" du chanteur Kendrick Lamar et la vidéo de changement de visage de la superstar du basket-ball Kobe Bryant.
◉ Métaphysique
Metaphysic utilise également la technologie Deepfake pour la création vidéo, qui a utilisé Deepfake pour faire monter Elvis Presley, mort depuis de nombreuses années, sur la scène de "America's Got Talent" en septembre de l'année dernière.
De plus, la société utilisera la technologie AI pour rajeunir les visages des protagonistes Tom Hanks et Robin White dans le nouveau film coproduit par l'équipe originale du film classique "Forrest Gump".
◉ MARS
En tant que studio d'effets visuels derrière la série Marvel "WandaVision" et la série Netflix "The Sun Calls", MARZ a développé l'outil d'effets visuels basé sur l'IA "Vanity AI".
Vanity AI peut automatiquement compléter des effets visuels 2D tels que le vieillissement, le rajeunissement, la beauté, les perruques et les prothèses, réduisant considérablement le temps et les coûts de production.
De plus, Matt Panousis, COO de MARZ, estime que le problème du doublage et de l'image désynchronisés est l'une des principales raisons pour lesquelles le contenu ne peut pas être mieux diffusé. La société développe donc un outil pour résoudre le problème de la désynchronisation. -d'audio et d'image de synchronisation, qui Outils aideront les entreprises de médias à mieux regarder à l'étranger pour un plus grand développement.
◉ Intervenant
Respeecher est une start-up ukrainienne fondée en 2018. Elle est douée pour utiliser la technologie de l'IA pour "cloner" les voix des acteurs dans d'anciennes archives vidéo, puis les utiliser dans de nouvelles productions de films ou de jeux. Dans l'épisode "Obi-Wan Kenobi" lancé par Disney+ l'année dernière, Respeecher a "cloné" avec succès le son de respiration emblématique du guerrier noir.
De même, Respeecher a également restauré la voix de Luke Skywalker dans "The Book of Boba Fett", une autre adaptation de Lucasfilm de "Star Wars".
En outre, dans le court métrage documentaire "Event of Moon Disaster", lauréat d'un Emmy 2021, Respeecher a également utilisé la technologie d'apprentissage automatique pour traiter les images et les sons du discours de Nixon en 1969 sur la mission Apollo 11.
Outre les sociétés susmentionnées, certaines sociétés AIGC modifient également les industries du cinéma, de la télévision et de l'animation. Par exemple, Deepdub, qui utilise la technologie d'IA générative pour redoubler des films et des drames en langue étrangère dans les langues locales ; la société chinoise DGene, qui se concentre sur la technologie de vision par ordinateur intelligente, la technologie de champ lumineux et la technologie d'apprentissage en profondeur ; X-Men et Ready Player L'étoile Tye Sheridan et l'expert en effets spéciaux d'animation Nikola Todorovic ont cofondé Wonder Dynamics, entre autres.
Rester affamé, rester idiot
Le succès entrepreneurial de Runway s'inscrit dans la tendance actuelle de l'IA générative et dans le contexte de l'ère des médias vidéo courts, il est difficile de dire qu'il ne fait pas partie du processus.
"Nous avons des possibilités infinies dans tous les mondes parallèles." L'exclamation d'Evelyn dans le film peut-elle également être confirmée dans la carrière du fondateur de Runway ? Il a refusé de rejoindre Google et dirige maintenant Runway pour travailler en étroite collaboration avec Google.
Valenzuela a dit un jour dans une interview que, qu'il s'agisse d'entrepreneuriat ou de travail, ce n'est qu'en maintenant une mentalité d'apprentissage continu et une vitesse d'apprentissage plus rapide que les gens ordinaires que de nouveaux produits peuvent être créés. En repensant à sa poursuite et à sa persévérance dans l'AIGC, même s'il a choisi Google à l'époque, nous pensons qu'il ne sera jamais perdu dans la foule.
L'explosion d'AIGC n'est pas un impact sur le développement du Metaverse, mais un coup de pouce. Le Métavers nous conduira à terme à intégrer le monde réel au monde virtuel, concept apparemment lointain et indissociable du support de la technologie de l'intelligence artificielle.
À mi-chemin de 2023, le métaverse a-t-il disparu ? Non, il nous est juste revenu avec un drapeau différent.
[Déclaration] : Cet article a été créé à l'origine par l'équipe d'exploitation du Cœur de l'Univers. La réimpression sans autorisation est strictement interdite. Si vous avez besoin de réimprimer, veuillez nous contacter. Les droits d'auteur et d'interprétation finale de l'article appartiennent à Cœur de l'Univers.
Voir l'original
Le contenu est fourni à titre de référence uniquement, il ne s'agit pas d'une sollicitation ou d'une offre. Aucun conseil en investissement, fiscalité ou juridique n'est fourni. Consultez l'Avertissement pour plus de détails sur les risques.
Sa valorisation a triplé, Runway, la société à l'origine de "The Instant Universe", mène une nouvelle ère du cinéma et de la télévision basés sur l'IA
"Pioneers of the Metaverse" est une colonne que nous avons créée pour le développement du Metaverse. Elle s'adresse principalement aux praticiens qui creusent profondément dans l'industrie du Metaverse ou qui mènent des "orpaillages" dans le Metaverse. D'un point de vue unique, nous peut voir les entreprises ou les individus qui dirigent le développement du métaverse mondial. Nous croyons fermement que le rideau du métavers a été ouvert et que l'Internet technologique qui conduira les 20 prochaines années est entré dans la vague de l'époque. Voici notre numéro 38. Les outils d'IA générative sont devenus la tendance actuelle et les produits de Runway sont uniques.
Récemment, Runway, une plate-forme d'IA générative, a levé environ 100 millions de dollars en financement de série D dirigé par Google. Runway n'est pas seulement une étoile montante dans le monde de l'investissement, mais son produit RunwayML a participé à la production de "The Universe", qui a également remporté l'Oscar de la meilleure actrice il n'y a pas si longtemps.
"C'est un monde magique, et ce qui reste aux êtres humains, ce sont des moments en constante évolution." Comme l'expliquent les lignes du film, **l'outil de montage vidéo Gen-2 de Runway montre la magie et l'émerveillement de l'IA transformant du texte en vidéo world **, il vous suffit de saisir quelques mots ou une description d'une phrase pour générer l'image vidéo souhaitée pour nous.
Ci-dessous, nous allons explorer l'historique du développement de Runway, présenter ses produits de base et ses technologies uniques, et analyser l'AIGC et son impact sur l'industrie du divertissement au pays et à l'étranger.
Route montante de la piste
Runway est l'une des entreprises les plus remarquables de la liste 2023 AI 50 publiée par Forbes, mais son ascension ne s'est pas produite du jour au lendemain, mais a connu une coïncidence et une nécessité.
◉ Phase d'étude
Runway a été fondée en 2018 par Cristóbal Valenzuela (PDG), Anastailities Germanidis (CTO) et Alejandro Matamala Ortiz (CDO).
Avant de créer son entreprise, Valenzuela a passé beaucoup de temps à comprendre comment les ordinateurs étaient appliqués aux arts visuels. Bien qu'il n'ait qu'une formation en économie, il est fasciné par la créativité artistique des ordinateurs et se demande ce que les technologies de l'information peuvent permettre aux artistes de faire avec des images et des vidéos.
Ainsi, après avoir déménagé à New York, il s'est inscrit à la majeure ITP (Interactive Electronic Media) de l'Université de New York. Il s'agit d'un programme de maîtrise de deux ans bien connu qui forme les étudiants à explorer de nouvelles technologies et à interagir avec d'autres disciplines pour améliorer la vie humaine.
Valenzuela a rencontré les deux autres fondateurs alors qu'il recherchait des modèles ML pour les applications de segmentation d'images et de vidéos dans les domaines créatifs à NYU.
Après avoir appris ImageNet et AlexNet, ils se rendent compte que quelque chose de grand est sur le point de se produire dans le monde, mais personne ne le fera, alors pourquoi ne pas choisir de le faire par eux-mêmes ?
◉ Le prototype fait son apparition
Au début, ils se concentraient uniquement sur le parcours académique, mais lors de la recherche de thèse, Valenzuela s'est rendu compte que l'hypothèse académique parfaite ne deviendrait qu'une bulle pour la pratique, alors il a commencé à communiquer davantage avec les gens de l'industrie de l'art, et a commencé le premier dans le school Une série de projets de recherche expérimentaux et intégrés ont été établis dans Photoshop et Premiere et inspirés par le monde extérieur.
L'équipe d'intelligence artificielle d'Adobe leur a également lancé une branche d'olivier, mais ce qu'ils veulent, c'est contrôler l'ensemble du processus de création, pas créer selon un itinéraire prédéterminé. Valenzuela pense que Premiere et Final Cut ne sont que des outils pour les professionnels de l'ancienne ère des médias pour créer de l'audio et de la vidéo, et non des outils vidéo pour les particuliers à l'ère de la vidéo courte. Alors, ils ont eu l'idée de créer une entreprise.
Alors que le catalogue de modèles et la base d'utilisateurs continuaient de croître, l'équipe a commencé à voir émerger un modèle d'utilisation particulier dans le montage vidéo. De nombreux éditeurs vidéo et cinéastes utilisent Runway car ils voient le potentiel de l'utilisation de modèles pour automatiser les flux de travail fastidieux.
Runway a donc commencé à essayer d'utiliser les connaissances de son catalogue de modèles pour approfondir le montage vidéo. Toute l'équipe a réalisé qu'elle réduisait le temps et le coût de production de la vidéo et rendait le montage vidéo ML accessible à tous. C'est alors qu'ils ont changé de tactique et décidé de se concentrer sur la création d'un outil de génération de vidéo instantanée.
◉ Grand succès
Runway est défini comme un nouvel outil pour la prochaine génération de créateurs de vidéos. Valenzuela a déclaré que dans la créativité artistique, les gens ne trouveront jamais un outil qui peut tout faire, ** mais Runway est un outil qui fournit une aide basée sur les questions et les idées des gens **, visant à réduire le travail fastidieux et compliqué de faire des vidéos. .
Aujourd'hui, Runway est un éditeur vidéo à part entière qui permet une collaboration en temps réel dans le navigateur, avec de plus en plus de fonctionnalités d'édition et de création vidéo AI. Il est utilisé par des milliers d'utilisateurs, des amateurs aux professionnels.
Disposition des produits de la piste
Chez Runway, ils croient que tout le monde a une histoire. Sa mission : rendre la création de contenus accessible à tous. Ainsi, l'entreprise utilise les dernières avancées en matière d'infographie et d'apprentissage automatique pour repousser les limites de la créativité, en abaissant les barrières à la création de contenu et en permettant une nouvelle vague de narration.
Au cours des quatre dernières années, la société a levé des fonds auprès d'investisseurs de premier plan, avec des équipes allant d'assez petites pour tenir une table à une équipe diversifiée et créative qui travaille depuis des années sur l'intelligence artificielle pour le montage vidéo et le développement de logiciels.
Par la suite, Runway a publié environ 30 outils de création d'IA basés sur le nouvel algorithme d'IA, y compris cinq catégories d'audio, d'image, de vidéo, de 3D et de génération, couvrant presque tous les outils de génération et de traitement de contenu audio et vidéo.
Aujourd'hui, les produits phares de Runway sont les éditeurs vidéo Gen-1 et Gen-2. Le modèle Gen-1 peut modifier le style de la vidéo originale en saisissant du texte ou des images, par exemple en convertissant des séquences réelles en un monde découpé sur papier de dessin animé. Le modèle Gen-2 peut utiliser directement du texte pour générer des scènes vidéo, permettant aux utilisateurs d'utiliser des invites de texte pour générer un "contenu vidéo réaliste" et "couper automatiquement des vidéos".
Derrière l'expansion de son champ d'application se cache l'énorme changement auquel l'industrie est confrontée. En tant que "magie magique" dans le domaine de la vidéo, des outils tels que Runway ont été bien accueillis par l'industrie de la production cinématographique et télévisuelle, mais tout le monde n'accueille pas l'IA.
Résistée par les scénaristes, favori des effets spéciaux
Avec la popularité des outils d'IA dans le monde entier, la vie des gens est en effet devenue plus pratique, mais cela a également conduit au chômage des travailleurs du texte tels que les rédacteurs et les scénaristes. L'entreprise utilise l'IA pour écrire des scripts, ce qui non seulement prive les scénaristes de leur emploi, mais rabaisse également la "dignité et la valeur du travail humain".
Le réalisateur Guo Fan a déclaré: "Si la troisième saison de" The Wandering Earth "est filmée, au moins la moitié des personnes présentes sur la scène seront réduites. L'intelligence artificielle est à la fois un défi et une opportunité pour nous. Cela peut être une opportunité pour nous de dépasser Hollywood dans un corner."
À l'heure actuelle, à Hollywood, en raison de considérations de coût, les producteurs utilisent déjà largement l'IA pour la création. Selon les précédents rapports des médias, après avoir appris l'intrigue d'un drame américain populaire, la machine à intelligence artificielle peut déjà écrire les grandes lignes du scénario du premier épisode de la nouvelle saison.
Cette utilisation de l'IA pour la création a déclenché une forte résistance de la part de milliers de scénaristes de cinéma et de télévision de la Hollywood Screenwriters Guild (WGA), qui protestent contre les bas salaires et le phénomène selon lequel l'IA remplace de plus en plus les humains dans l'écriture de scénarios. Le créateur de "Black Mirror", Charlie Bullock, a déclaré dans une interview qu'il avait déjà utilisé ChatGPT pour écrire un épisode du script "Black Mirror", et que le résultat était "comme des ordures".
Avec le soutien de la technologie de l'IA, l'équipe d'effets spéciaux de "The Universe", lauréat d'un Oscar, a terminé la post-production avec seulement cinq personnes. La célèbre scène "main de hot-dog" a également remporté des éloges unanimes tant à l'intérieur qu'à l'extérieur du industrie.
La tendance est imparable, les roues de l'innovation technologique tournent et l'invasion de l'IA s'est discrètement mise en scène à Hollywood.
Les entreprises d'intelligence artificielle envahissent Hollywood
En effet, l'ère de l'intelligence artificielle est arrivée, et elle change les règles du jeu dans l'industrie cinématographique et télévisuelle.De plus en plus d'entreprises AIGC sont prêtes à apporter une nouvelle inspiration à la production cinématographique et télévisuelle.
◉ Vaudou profond
Fondée par Trey Parker et Matt Stone, les créateurs de la célèbre série animée "South Park", Deep Voodoo se concentre sur le développement de services d'effets visuels de la technologie Deepfake et de projets de technologie de médias synthétiques.
Deepfake est une technologie qui utilise des méthodes d'apprentissage automatique telles que l'apprentissage en profondeur pour créer ou synthétiser du contenu audiovisuel.Cette technologie peut remplacer le visage ou l'expression d'une image ou d'une vidéo existante par une personne cible, afin d'atteindre l'objectif de forger une identité ou une expression. . .
La technologie de changement de visage de la société a attiré une large attention depuis son lancement, comme le MV "The Heart Part 5" du chanteur Kendrick Lamar et la vidéo de changement de visage de la superstar du basket-ball Kobe Bryant.
Metaphysic utilise également la technologie Deepfake pour la création vidéo, qui a utilisé Deepfake pour faire monter Elvis Presley, mort depuis de nombreuses années, sur la scène de "America's Got Talent" en septembre de l'année dernière.
◉ MARS
En tant que studio d'effets visuels derrière la série Marvel "WandaVision" et la série Netflix "The Sun Calls", MARZ a développé l'outil d'effets visuels basé sur l'IA "Vanity AI".
De plus, Matt Panousis, COO de MARZ, estime que le problème du doublage et de l'image désynchronisés est l'une des principales raisons pour lesquelles le contenu ne peut pas être mieux diffusé. La société développe donc un outil pour résoudre le problème de la désynchronisation. -d'audio et d'image de synchronisation, qui Outils aideront les entreprises de médias à mieux regarder à l'étranger pour un plus grand développement.
◉ Intervenant
Respeecher est une start-up ukrainienne fondée en 2018. Elle est douée pour utiliser la technologie de l'IA pour "cloner" les voix des acteurs dans d'anciennes archives vidéo, puis les utiliser dans de nouvelles productions de films ou de jeux. Dans l'épisode "Obi-Wan Kenobi" lancé par Disney+ l'année dernière, Respeecher a "cloné" avec succès le son de respiration emblématique du guerrier noir.
En outre, dans le court métrage documentaire "Event of Moon Disaster", lauréat d'un Emmy 2021, Respeecher a également utilisé la technologie d'apprentissage automatique pour traiter les images et les sons du discours de Nixon en 1969 sur la mission Apollo 11.
Outre les sociétés susmentionnées, certaines sociétés AIGC modifient également les industries du cinéma, de la télévision et de l'animation. Par exemple, Deepdub, qui utilise la technologie d'IA générative pour redoubler des films et des drames en langue étrangère dans les langues locales ; la société chinoise DGene, qui se concentre sur la technologie de vision par ordinateur intelligente, la technologie de champ lumineux et la technologie d'apprentissage en profondeur ; X-Men et Ready Player L'étoile Tye Sheridan et l'expert en effets spéciaux d'animation Nikola Todorovic ont cofondé Wonder Dynamics, entre autres.
Rester affamé, rester idiot
Le succès entrepreneurial de Runway s'inscrit dans la tendance actuelle de l'IA générative et dans le contexte de l'ère des médias vidéo courts, il est difficile de dire qu'il ne fait pas partie du processus.
"Nous avons des possibilités infinies dans tous les mondes parallèles." L'exclamation d'Evelyn dans le film peut-elle également être confirmée dans la carrière du fondateur de Runway ? Il a refusé de rejoindre Google et dirige maintenant Runway pour travailler en étroite collaboration avec Google.
L'explosion d'AIGC n'est pas un impact sur le développement du Metaverse, mais un coup de pouce. Le Métavers nous conduira à terme à intégrer le monde réel au monde virtuel, concept apparemment lointain et indissociable du support de la technologie de l'intelligence artificielle.
À mi-chemin de 2023, le métaverse a-t-il disparu ? Non, il nous est juste revenu avec un drapeau différent.