Оцінка зросла в 3 рази, Runway, компанія, що стоїть за «The Instant Universe», веде нову еру кіно та телебачення зі штучним інтелектом

«Піонери Метавсесвіту» — це рубрика, яку ми створили для розвитку Метавсесвіту. Вона в основному орієнтована на тих практиків, які глибоко занурюються в індустрію Метавсесвіту або проводять «видобуток золота» в Метавсесвіті. З унікальної точки зору ми можна побачити ті компанії чи окремих осіб, які ведуть розвиток глобального метавсесвіту. Ми твердо віримо, що завісу метавсесвіту відкрито, і технологічний Інтернет, який лідируватиме наступні 20 років, увійшов у хвилю часу. Нижче наведено наш 38-й випуск. Генеративні інструменти штучного інтелекту стали актуальною тенденцією, а продукти Runway унікальні. Насолоджуйтесь нижче.

Нещодавно Runway, генеративна платформа штучного інтелекту, залучила близько 100 мільйонів доларів у рамках фінансування серії D під керівництвом Google. Runway є не тільки висхідною зіркою в інвестиційному світі, але її продукт RunwayML брав участь у виробництві «Всесвіту», який також нещодавно отримав «Оскар» за найкращу жіночу роль.

«Це чарівний світ, і те, що залишається людям, — це момент, який постійно змінюється.» Як пояснюють рядки у фільмі, **інструмент редагування відео Runway Gen-2 демонструє магію та магію штучного інтелекту, який перетворює текст на video world **, вам потрібно лише ввести кілька слів або опис речення, щоб створити для нас потрібне відеозображення.

Відео є важливою частиною сучасного медіа соціального контенту, і відеопрограми, такі як TikTok, Instagram, Snapchat і YouTube, також були одними з найбільш завантажуваних програм за останні кілька років. Коротке відео більше відповідає розважальним потребам сучасних людей, які використовують фрагментований час у швидкому темпі та високій щільності інформації. Вертикальна сегментація також є тенденцією розвитку короткого відео. Runway just meets the two.

Нижче ми розглянемо історію розвитку Runway, представимо її основні продукти та унікальні технології, а також проаналізуємо AIGC та її вплив на індустрію розваг у країні та за кордоном.

Runway Rising Road

Runway є однією з найвизначніших компаній у списку AI 50 2023 року, опублікованому Forbes, але її підйом не відбувся миттєво, а був випадковим збігом обставин і необхідністю.

◉ Стадія навчання

Runway була заснована в 2018 році Крістобалем Валенсуелою (генеральний директор), Анастаїлітіс Германідіс (технічний директор) і Алехандро Матамала Ортіс (CDO).

(Засновники Runway: Anastailities Germanidis (вгорі), Алехандро Матамала Ортіс (ліворуч) і Крістобаль Валенсуела (праворуч) на Манхеттені)

Перш ніж заснувати свою компанію, Валенсуела присвятив багато часу розумінню того, як комп’ютери застосовуються у візуальному мистецтві. Хоча він має лише економічну освіту, він зачарований художньою творчістю комп’ютерів і цікавиться, що інформаційні технології можуть дати художникам змогу робити зображення та відео.

Тож після переїзду до Нью-Йорка він вступив на спеціальність ITP (інтерактивні електронні медіа) Нью-Йоркського університету. Це відома дворічна магістерська програма, яка навчає студентів досліджувати нові технології та взаємодіяти з іншими дисциплінами для покращення життя людини.

Валенсуела познайомився з двома іншими засновниками під час дослідження моделей машинного навчання для програм сегментації зображень і відео в творчих сферах у Нью-Йоркському університеті.

Вивчивши ImageNet і AlexNet, вони розуміють, що у світі має статися щось велике, але ніхто цього не зробить, то чому б не зробити це самим?

◉ З’являється прототип

Спочатку вони зосереджувалися лише на академічному шляху, але, досліджуючи дисертацію, Валенсуела зрозумів, що ідеальне академічне припущення стане лише бульбашкою для практики, тому він почав більше спілкуватися з людьми в арт-індустрії та розпочав першу один у школі Серія експериментальних та інтегрованих дослідницьких проектів була створена у Photoshop і Premiere і натхненна зовнішнім світом.

Команда штучного інтелекту Adobe також кинула їм оливкову гілку, але вони хочуть контролювати весь процес створення, а не створювати за заздалегідь визначеним маршрутом. Валенсуела вважає, що Premiere і Final Cut — це лише інструменти для професіоналів у стару епоху медіа для створення аудіо та відео, а не відеоінструменти для окремих осіб в епоху короткого відео. Тож у них виникла ідея створити компанію.

Незабаром, у 2018 році, Runway був вперше запущений як магазин моделей додатків, що дозволяє користувачам вибирати моделі машинного навчання для різних випадків використання.Особливість продукту полягає в тому, що візуальний інтерфейс програми абстрагує початковий процес міркування та навчання.

Оскільки каталог моделей і база користувачів продовжували зростати, команда почала помічати особливу модель використання в редагуванні відео. Багато відеоредакторів і кінематографістів використовують Runway, оскільки бачать потенціал використання моделей для автоматизації виснажливих робочих процесів.

Тож Runway почав намагатися використати знання зі свого каталогу моделей, щоб глибше побудувати процес редагування відео. Уся команда зрозуміла, що вони скорочують час і витрати на створення відео та роблять редагування ML відео доступним для всіх. Саме тоді вони змінили курс і вирішили зосередитися на створенні інструменту миттєвого створення відео.

◉ Великий успіх

Runway визначено як новий інструмент для нового покоління творців відео. Валенсуела сказав, що в мистецькій творчості люди ніколи не знайдуть інструмент, який може робити все, але Runway — це інструмент, який надає допомогу на основі запитань і думок людей, щоб зменшити виснажливу та складну роботу зі створення відео. .

Runway скористався ентузіазмом ринку щодо генеративного штучного інтелекту. Після кількох раундів залучення венчурного капіталу оцінка Runway досягла 1,5 мільярда доларів США, що зробило його новим генеративним штучним інтелектом. Після досягнення великої хмарної угоди з Amazon у березні цього року Runway нещодавно підписала велику угоду про хмарні обчислення з Google.

Сьогодні Runway — це повноцінний відеоредактор, який дає змогу співпрацювати в режимі реального часу в браузері з дедалі більшою кількістю функцій штучного інтелекту для редагування та створення відео. Ним користуються тисячі користувачів, від аматорів до професіоналів.

Макет продукту Runway

У Runway вважають, що у кожного є своя історія. Його місія: зробити створення контенту доступним для всіх. Тож компанія використовує останні досягнення комп’ютерної графіки та машинного навчання, щоб розширити межі творчості, тим самим зменшуючи бар’єри для створення контенту та створюючи нову хвилю оповідання.

Протягом останніх чотирьох років компанія залучала фінансування від провідних інвесторів, створюючи команди від достатньо маленьких, щоб помістити стіл, до команди людей з усіх верств суспільства та творчих років, які присвятили редагування відео зі штучним інтелектом.

Існує багато продуктів і технологій Runway. Формою продукту Runway на початку свого бізнесу був магазин додатків для моделей ML (машинного навчання), на якому користувачі можуть використовувати сотні моделей, як-от модель StyleGAN.

Згодом Runway випустила близько 30 інструментів створення штучного інтелекту на основі нового алгоритму штучного інтелекту, включаючи п’ять категорій аудіо, зображень, відео, 3D і генерації, охоплюючи майже всі інструменти створення й обробки аудіо- та відеоконтенту.

Крім того, як перше у світі відеопрограмне забезпечення, створене штучним інтелектом, RunwayML є прикладом його маршу на традиційні контент-платформи та мобільні термінали. На додаток до надання повного набору мультимодальної бібліотеки інструментів штучного інтелекту, бібліотека інструментів також представляє три основні функції відновлення зображення, редагування зображення зеленого екрана та відстеження руху, які можна описати як повні чорної технології та ефектів розриву. .

Сьогодні основними продуктами Runway є відеоредактори Gen-1 і Gen-2. Модель Gen-1 може змінювати стиль оригінального відео, вводячи текст або зображення, наприклад перетворюючи реальні кадри в мультфільм, вирізаний з паперу. Модель Gen-2 може безпосередньо використовувати текст для створення відеосцен, дозволяючи користувачам використовувати текстові підказки для створення «реалістичного відеоконтенту» та «автоматично вирізати відео».

Продукти та технології Runway є самоочевидними. Окрім багатьох відомих брендів та установ, таких як Adobe, Facebook, Google, Netflix та The New York Times, її клієнтами також є користувачі Douyin та YouTube, а також кіно та кіно Теледраматичні студії.Всі використовують творіння компанії, які широко використовуються в кіно, на телебаченні та в рекламі. Наприклад: створення спецефектів у фільмі «Чорна вдова»; «Пізнє шоу», яке веде Стівен Колбер; божевільні та круті візуальні ефекти у «Всесвіті» тощо.

За розширенням області його застосування стоять величезні зміни, з якими стикається індустрія.Як «чарівна магія» у сфері відео, такі інструменти, як Runway, вітали кіно- та телевізійна індустрія, але не всі вітають ШІ.

Опір сценаристам, фаворит спецефектів

Завдяки популярності інструментів штучного інтелекту в усьому світі життя людей справді стало зручнішим, але це також призвело до безробіття серед текстових працівників, таких як копірайтери та сценаристи. Компанія використовує штучний інтелект для написання сценаріїв, що не тільки позбавляє сценаристів роботи, але й принижує «гідність і цінність людської праці».

Режисер Го Фан сказав: «Якщо буде знято третій сезон «Блукаючої Землі», принаймні половина людей на сцені зменшиться. Штучний інтелект — це виклик і можливість для нас. Це може бути можливість для щоб обігнати Голлівуд у кутку».

Зараз у Голлівуді через міркування щодо вартості продюсери вже широко використовують ШІ для створення. Згідно з попередніми повідомленнями ЗМІ, дізнавшись сюжет популярної американської драми, AI-машина вже може написати ескіз сценарію для першої серії нового сезону.

Таке використання штучного інтелекту для творчості викликало сильний опір з боку тисяч кіно- та телесценаристів у Голлівудській гільдії сценаристів (WGA), які протестують проти низьких зарплат і того явища, що штучний інтелект все частіше замінює людей у написанні сценаріїв. Творець «Чорного дзеркала» Чарлі Баллок сказав в інтерв’ю, що колись він використовував ChatGPT для написання сценарію епізоду «Чорного дзеркала», і результат був «як сміття».

Хоча обидва належать до кіно- та телеіндустрії, ставлення виробників спецефектів до штучного інтелекту абсолютно протилежне, і вони активно освоюють технологію штучного інтелекту.

Завдяки технології штучного інтелекту команда спецефектів фільму, який отримав нагороду «Оскар» «Всесвіт», завершила пост-продакшн за участю лише п’яти осіб. Знаменита сцена «рука хот-дога» також отримала одностайну похвалу як усередині, так і зовні. промисловість.

Цей успішний випадок показує, що потенціал технології штучного інтелекту у створенні фільмів і телебачення величезний і його не можна ігнорувати. Щоб обговорити, як технологія штучного інтелекту може змінити майбутнє кіно- та телеіндустрії, нещодавно некомерційна організація AI LA провела конференцію «AI on the Lot» у Лос-Анджелесі та нарешті отримала «Ера штучного інтелекту прибув» і «Всі творчі працівники повинні навчитися ним користуватися» ці два висновки.

Цю тенденцію неможливо зупинити, колеса технологічних інновацій котяться повз, а вторгнення штучного інтелекту було тихо влаштовано в Голлівуді.

Компанії ШІ захоплюють Голлівуд

Дійсно, ера штучного інтелекту настала, і вона змінює правила гри в кіно- та телеіндустрії. Все більше компаній AIGC готові привнести нове натхнення у кіно- та телевиробництво.

◉ Deep Voodoo

Заснована Треєм Паркером і Меттом Стоуном, творцями відомого мультсеріалу «Південний парк», Deep Voodoo зосереджується на розробці сервісів візуальних ефектів за технологією Deepfake і проектів синтетичних медіа-технологій.

Deepfake – це технологія, яка використовує такі методи машинного навчання, як глибоке навчання, для створення або синтезу аудіовізуального контенту. Ця технологія може замінити обличчя чи вираз на наявному зображенні чи відео цільовою особою, щоб досягти мети формування особистості чи виразу .

Технологія компанії, яка змінює обличчя, привернула широку увагу з моменту свого запуску, наприклад, MV співака Кендріка Ламара «The Heart Part 5» і відео суперзірки баскетболу Кобі, яке змінює обличчя.

◉ Метафізика

Також технологію Deepfake для створення відео використовує Metaphysic, яка використала Deepfake, щоб показати Елвіса Преслі, який був мертвий багато років, на сцені «America's Got Talent» у вересні минулого року.

Крім того, компанія використає технологію штучного інтелекту, щоб омолодити обличчя головних героїв Тома Хенкса та Робіна Вайта в новому фільмі, знятому спільно з оригінальною знімальною групою класичного фільму «Форрест Гамп».

◉ БЕРЕЗЕНЬ

Як студія візуальних ефектів, що стоїть за серіалом Marvel «WandaVision» і серіалом Netflix «The Sun Calls», MARZ розробила інструмент візуальних ефектів на основі ШІ «Vanity AI».

Vanity AI може автоматично завершувати 2D візуальні ефекти, такі як старіння, омолодження, краса, перуки та протези, значно скорочуючи час і вартість виробництва.

Крім того, Мет Панусіс, головний операційний директор MARZ, вважає, що проблема несинхронізації дубляжу та зображення є однією з головних причин, чому контент не може бути поширений краще, тому компанія розробляє інструмент для вирішення проблеми з -of-sync аудіо та зображення, які інструменти допоможуть медіакомпаніям краще шукати за кордоном для більшого розвитку.

◉ Доповідач

Respeecher — українська стартап-компанія, заснована в 2018 році. Вона добре вміє за допомогою технології ШІ «клонувати» голоси акторів у старих відеоархівах, а потім використовувати їх у нових фільмах чи іграх. В епізоді «Обі-Ван Кенобі», запущеному Disney+ минулого року, Respeecher успішно «клонував» культовий звук дихання темношкірого воїна.

Подібним чином Respeecher також відновив голос Люка Скайвокера в «Книзі Боби Фетта», ще одній екранізації «Зоряних воєн» Lucasfilm.

Крім того, у документальному короткометражному фільмі «Event of Moon Disaster», який отримав премію «Еммі» 2021 року, Респічер також використав технологію машинного навчання для обробки зображень і звуків промови Ніксона 1969 року під час місії «Аполлон-11».

На додаток до вищезгаданих компаній, є деякі компанії AIGC, які також змінюють індустрію кіно, телебачення та анімації. Наприклад, Deepdub, яка використовує генеративну технологію штучного інтелекту для повторного дублювання іноземних фільмів і драм місцевими мовами; китайська компанія DGene, яка зосереджується на технології інтелектуального комп’ютерного зору, технології світлового поля та технології глибокого навчання; Люди Ікс і Ready Player Одна зірка Тай Шерідан і фахівець зі спецефектів анімації Нікола Тодорович, серед інших, заснували Wonder Dynamics.

Залишайся голодним, залишайся дурним

Підприємницький успіх Runway відповідає сучасній тенденції генеративного штучного інтелекту та тлу ери короткометражного медіа. Важко сказати, що це не частина процесу.

«У нас є безмежні можливості в кожному паралельному світі.» Чи може вигук Евелін у фільмі знайти підтвердження в кар’єрі засновника Runway? Він відмовився приєднатися до Google і тепер очолює Runway, щоб тісно співпрацювати з Google.

Валенсуела одного разу сказав в інтерв’ю, що незалежно від того, чи це підприємництво, чи робота, лише підтримуючи менталітет безперервного навчання та швидкість навчання швидше, ніж звичайні люди, можна створювати нові продукти. З огляду на його пошуки та наполегливість AIGC, навіть якщо він тоді вибрав Google, ми віримо, що він ніколи не загубиться в натовпі.

Вибух AIGC – це не вплив на розвиток Метавсесвіту, а поштовх. Метавсесвіт з часом приведе нас до інтеграції реального світу з віртуальним.Ця, здавалося б, далека концепція не може бути відокремлена від підтримки технології штучного інтелекту.

У середині 2023 року метавсесвіт зник? Ні, просто він повернувся до нас з іншим прапором.

[Декларація]: цю статтю спочатку створила оперативна група Heart of the Universe. Передрук без дозволу суворо заборонено. Якщо вам потрібно передрукувати, зв’яжіться з нами. Авторські права та права на остаточне тлумачення статті належать Серце Всесвіту.

Переглянути оригінал
Контент має виключно довідковий характер і не є запрошенням до участі або пропозицією. Інвестиційні, податкові чи юридичні консультації не надаються. Перегляньте Відмову від відповідальності , щоб дізнатися більше про ризики.
  • Нагородити
  • Прокоментувати
  • Поділіться
Прокоментувати
0/400
Немає коментарів
  • Закріпити