最近、生成 AI プラットフォームである Runway は、Google 主導のシリーズ D 資金調達で約 1 億ドルを調達しました。 Runway は投資界の新星であるだけでなく、その製品 RunwayML は「The Transient Universe」の制作に参加し、つい最近オスカー主演女優賞を受賞しました。
「これは魔法の世界です。人間に残されたものは、常に変化する瞬間です。」 映画のセリフが説明するように、**Runway のビデオ編集ツール Gen-2 は、テキストをテキストに変換する AI の魔法と魔法を示しています。 video world ** では、いくつかの単語または文章の説明を入力するだけで、希望のビデオ画像を生成できます。
そこで Runway は、モデルのカタログにある知識を活用して、ビデオ編集をより深く構築しようと試み始めました。チーム全体が、ビデオ制作にかかる時間とコストを削減し、誰もが ML ビデオ編集にアクセスできるようにしていることに気づきました。そこで方針を変更し、インスタントビデオ生成ツールの構築に注力することにしました。
Runway の製品とテクノロジーは自明のことであり、Adobe、Facebook、Google、Netflix、The New York Times などの多くの有名なブランドや機関に加えて、その顧客には Douyin や YouTube ユーザー、主流の映画や映画なども含まれます。テレビ ドラマ スタジオ。すべてが同社の作品を使用しており、映画、テレビ、広告で広く使用されています。例えば、「ブラック・ウィドウ」の特殊効果演出、スティーヴン・コルベア司会の「ザ・レイト・ショー」、「ザ・ユニバース」のクレイジーでクールな視覚効果などです。
この成功事例は、映画やテレビの制作における AI テクノロジーの可能性が非常に大きく、無視できないことを示しています。 AI テクノロジーが映画およびテレビ業界の未来をどのように変えることができるかを議論するために、非営利団体 AI LA は最近、ロサンゼルスで「AI on the Lot」カンファレンスを開催し、最終的に「人工知能の時代は、 「到着しました」と「すべてのクリエイティブワーカーはそれを使用することを学ぶ必要があります」これら 2 つの結論。
バレンズエラはかつてインタビューで、起業であれ仕事であれ、継続的な学習精神と常人よりも速い学習速度を維持することによってのみ、新しい製品を生み出すことができると述べました。彼の AIGC への追求と粘り強さを振り返ると、たとえ当時 Google を選んだとしても、彼が群衆の中に埋もれることは決してないと私たちは信じています。
評価額が3倍に急上昇、「インスタント・ユニバース」の制作会社ランウェイがAI映画とテレビの新時代をリード
「メタバースの開拓者たち」は、メタバース業界を深く掘り下げたり、メタバースで「砂金掘り」を行ったりしている実践者を主な対象として、メタバースの発展のために設けたコラムです。私たちは、メタバースの幕が開き、次の20年を担うテクノロジーインターネットが時代の波に乗り出したと確信しています。第38回目は、ジェネレーティブAIツールがトレンドとなっている中、Runwayの製品はユニークですので、以下からお楽しみください。
最近、生成 AI プラットフォームである Runway は、Google 主導のシリーズ D 資金調達で約 1 億ドルを調達しました。 Runway は投資界の新星であるだけでなく、その製品 RunwayML は「The Transient Universe」の制作に参加し、つい最近オスカー主演女優賞を受賞しました。
「これは魔法の世界です。人間に残されたものは、常に変化する瞬間です。」 映画のセリフが説明するように、**Runway のビデオ編集ツール Gen-2 は、テキストをテキストに変換する AI の魔法と魔法を示しています。 video world ** では、いくつかの単語または文章の説明を入力するだけで、希望のビデオ画像を生成できます。
以下では、Runway の開発の歴史を探り、そのコア製品と独自の技術を紹介し、AIGC と国内外のエンターテインメント業界への影響を分析します。
滑走路ライジングロード
ランウェイはフォーブス誌が発表する2023年のAI 50リストに掲載された最も注目すべき企業の1つだが、その台頭は一夜にして起こったわけではなく、偶然と必然性を経験してきた。
◉ 学習段階
Runway は、Cristóbal Valenzuela (CEO)、Anastailities Germanidis (CTO)、Alejandro Matamala Ortiz (CDO) によって 2018 年に設立されました。
Valenzuela 氏は、会社を設立する前に、コンピュータが視覚芸術にどのように適用されるかを理解するのに多くの時間を費やしました。彼は経済学のバックグラウンドしか持っていませんが、コンピューターの芸術的創造性に魅了されており、情報技術によってアーティストが画像やビデオでどのようなことができるようになるのかと疑問に思っています。
そこで、ニューヨークに移った後、ニューヨーク大学のITP（インタラクティブ電子メディア）専攻に入学しました。これはよく知られた 2 年間の修士課程プログラムで、学生が新しいテクノロジーを探索し、人類の生活を改善するために他の分野と交流できるように訓練します。
Valenzuela 氏は、ニューヨーク大学のクリエイティブ分野で画像およびビデオのセグメンテーション アプリケーション用の ML モデルを研究しているときに、他の 2 人の創設者に会いました。
ImageNet と AlexNet を学んだ後、彼らは世界で何か大きなことが起ころうとしていることに気付きました。しかし、誰もそれをやらないでしょう。ならば、自分たちでそれを行うことを選択してはどうでしょうか?
◉ プロトタイプが出現中
当初、彼らは学術的な道にのみ焦点を当てていましたが、論文の調査を行っているときに、バレンズエラは完璧な学術的前提が実践にとっては泡にしかならないことに気づき、芸術業界の人々とより多くのコミュニケーションを開始し、最初の研究を開始しました。学校内に 1 つ 一連の実験的かつ総合的な研究プロジェクトが Photoshop と Premiere で確立され、外の世界からインスピレーションを受けました。
Adobe の人工知能チームも彼らにオリーブの枝を投げましたが、彼らが望んでいるのは作成プロセス全体を制御することであり、あらかじめ決められたルートに従って作成することではありません。 Valenzuela 氏は、Premiere と Final Cut はオールド メディア時代の専門家がオーディオとビデオを作成するためのツールにすぎず、ショート ビデオ時代の個人向けのビデオ ツールではないと考えています。そこで彼らは会社を設立することを思いつきました。
モデル カタログとユーザー ベースが拡大し続けるにつれて、チームはビデオ編集に特定の使用パターンが現れることに気づき始めました。多くのビデオ編集者や映画製作者が Runway を使用しているのは、モデルを使用して退屈なワークフローを自動化できる可能性を認識しているためです。
そこで Runway は、モデルのカタログにある知識を活用して、ビデオ編集をより深く構築しようと試み始めました。チーム全体が、ビデオ制作にかかる時間とコストを削減し、誰もが ML ビデオ編集にアクセスできるようにしていることに気づきました。そこで方針を変更し、インスタントビデオ生成ツールの構築に注力することにしました。
◉ 大成功
Runway は、次世代のビデオクリエイターのための新しいツールとして定義されています。 Valenzuela 氏は、芸術的な創造性において、すべてを実行できるツールを見つけることは決してできないと述べました ** しかし、Runway は、ビデオ作成の退屈で複雑な作業を軽減することを目的として、人々の質問や洞察に基づいて支援を提供するツールです **。 。
現在、Runway は、ブラウザーでのリアルタイム コラボレーションを可能にする本格的なビデオ エディターであり、AI ビデオ編集および作成機能がますます増えています。アマチュアからプロまで、何千人ものユーザーが使用しています。
滑走路の商品レイアウト
ランウェイでは、誰もがストーリーを持っていると信じています。その使命は、誰もがコンテンツ作成にアクセスできるようにすることです。そこで同社は、コンピューター グラフィックスと機械学習の最新の進歩を利用して創造性の限界を押し広げ、コンテンツ作成の障壁を下げ、ストーリーテリングの新たな波を可能にしています。
過去 4 年間にわたり、同社は一流の投資家から資金を調達しており、チームはテーブルに収まるほどの小規模なチームから、あらゆる分野の人々が集まったチームまで、創造的で AI ビデオ編集に長年取り組んできたソフトウェア開発に取り組んできました。
その後、Runway は、オーディオ、画像、ビデオ、3D、生成の 5 つのカテゴリを含む、新しい AI アルゴリズムに基づく約 30 の AI 作成ツールをリリースし、ほぼすべてのオーディオおよびビデオ コンテンツの生成および処理ツールをカバーしました。
現在、Runway のコア製品はビデオ エディター Gen-1 と Gen-2 です。 Gen-1 モデルでは、テキストや画像を入力することで、現実の映像を漫画の切り絵の世界に変換するなど、元のビデオのスタイルを変更できます。 Gen-2 モデルはテキストを直接使用してビデオ シーンを生成できるため、ユーザーはテキスト プロンプトを使用して「リアルなビデオ コンテンツ」と「自動的にカットされたビデオ」を生成できます。
応用分野の拡大の背景には業界が直面している大きな変化があり、Runwayのようなツールは映像分野の「魔法」として映画・テレビ制作業界に歓迎されてきたが、AIは誰もが歓迎しているわけではない。
特殊効果が好きな脚本家に反対されました
AIツールが世界中で普及し、人々の生活は確かに便利になりましたが、それは同時にコピーライターや脚本家などのテキストワーカーの失業にもつながりました。同社はAIを利用して脚本を執筆しているが、これは脚本家の仕事を奪うだけでなく、「人間の労働の尊厳と価値」を軽視するものでもある。
グオ・ファン監督は、「もし『流浪の地球』シーズン3が撮影されれば、現場にいる少なくとも半分の人員は削減されるだろう。人工知能は私たちにとって課題であると同時にチャンスでもある。それは私たちにとってチャンスになるかもしれない」と語った。私たちは追い詰められたハリウッドを追い越すことを目指しています。」
現在、ハリウッドではコストの観点から、プロデューサーはすでにAIを多用して制作を行っています。以前のメディアの報道によると、AIマシンはアメリカの人気ドラマのあらすじを学習した後、すでに新シーズンの第1話の脚本の概要を書くことができるという。
このAIの創作利用は、ハリウッド脚本家組合（WGA）の何千人もの映画やテレビの脚本家からの強い抵抗を引き起こしており、彼らは低賃金とAIが脚本執筆において人間に取って代わる現象に抗議している。 「ブラック・ミラー」のクリエイター、チャーリー・ブロック氏はインタビューで、かつてChatGPTを使って「ブラック・ミラー」の脚本のエピソードを書いたが、その結果は「ゴミのようなもの」だったと語った。
アカデミー賞受賞作『ユニバース』の特殊効果チームがAI技術の恩恵を受け、わずか5人でポストプロダクションを完成、名シーン「ホットドッグハンド」も内外から満場一致の賞賛を獲得業界。
この傾向は止めることができず、技術革新の歯車は回転しており、AI の侵略はハリウッドで静かに演出されています。
AI 企業がハリウッドに進出
実際、人工知能の時代が到来し、映画やテレビ業界のルールが変わりつつあり、ますます多くの AIGC 企業が映画やテレビの制作に新たなインスピレーションをもたらす準備を整えています。
◉ディープブードゥー
有名なアニメ シリーズ「サウス パーク」のクリエイターであるトレイ パーカー氏とマット ストーン氏によって設立された Deep Voodoo は、ディープフェイク技術の視覚効果サービスと合成メディア技術プロジェクトの開発に重点を置いています。
ディープフェイクとは、ディープラーニングなどの機械学習手法を利用して視聴覚コンテンツを作成または合成する技術で、既存の画像や動画内の顔や表情を対象の人物に置き換えることで、身元や表現を偽造する目的を達成することができます。 . .
同社の顔変更技術は、歌手ケンドリック・ラマーの「The Heart Part 5」MVやバスケットボールのスーパースター、コービー・ブライアントの顔変更ビデオなど、発売以来広く注目を集めてきた。
また、動画作成にディープフェイク技術を利用しているのは、昨年9月にディープフェイクを利用して、亡くなって何年も経っているエルヴィス・プレスリーを「アメリカズ・ゴット・タレント」のステージに立たせたメタフィジック社だ。
◉ 3月
MARZ は、マーベル シリーズ「ワンダヴィジョン」や Netflix シリーズ「太陽が呼ぶ太陽」を手がけた視覚効果スタジオとして、AI ベースの視覚効果ツール「Vanity AI」を開発しました。
さらに、MARZ の最高執行責任者 (COO) であるマット パヌーシス氏は、吹き替えと画像の同期がずれている問題が、コンテンツをより適切に普及できない主な理由の 1 つであると考えており、同社はこのずれの問題を解決するツールを開発中です。 -of-sync オーディオと画像。このツールは、メディア企業がさらなる発展のために海外に目を向けるのに役立ちます。
◉ 発言者
Respeecher は、2018 年に設立されたウクライナの新興企業です。同社は、AI テクノロジーを使用して古いビデオ アーカイブにある俳優の声を「クローン」し、新しい映画やゲーム作品に使用することに長けています。昨年 Disney+ によって開始されたエピソード「オビ＝ワン・ケノービ」では、レスピーチャーは黒人戦士の象徴的な呼吸音の「クローン化」に成功しました。
さらに、2021年にエミー賞を受賞した短編ドキュメンタリー「イベント・オブ・ムーン・ディザスター」でも、レスピーチャーは機械学習テクノロジーを使用して、アポロ11号のミッションに関する1969年のニクソン大統領の演説の画像と音声を処理した。
上記の企業に加えて、映画、テレビ、アニメーション業界に変化をもたらしている AIGC 企業もいくつかあります。たとえば、生成 AI 技術を使用して外国語の映画やドラマを現地の言語に再吹き替えする Deepdub、インテリジェント コンピューター ビジョン テクノロジー、ライト フィールド テクノロジー、ディープラーニング テクノロジーに焦点を当てている中国企業 DGene、X-Men や Ready Player などです。スターのタイ・シェリダンとアニメーション特殊効果の専門家ニコラ・トドロヴィッチは、ワンダー・ダイナミクスなどを共同設立した。
＃＃ 渇望する愚か者であれ
Runway の起業家としての成功は、現在の生成 AI のトレンドやショートビデオメディア時代の背景と一致しており、そのプロセスの一部ではないとは言い難い。
「私たちにはあらゆる平行世界に無限の可能性がある。」 映画の中でのエヴリンの感嘆は、ランウェイ創始者の経歴でも確認できるのだろうか？彼はGoogleへの入社を拒否し、現在はRunwayを率いてGoogleと緊密に連携している。
AIGC の爆発はメタバースの発展に影響を与えるのではなく、後押しするものです。メタバースは、最終的には現実世界と仮想世界を統合することになりますが、この一見遠い概念は、人工知能技術のサポートから切り離すことはできません。
2023 年も半ば、メタバースは消滅したのでしょうか?いいえ、別のフラグとともに戻ってきただけです。