Runway AI, Inc. (также известная как Runway и RunwayML ) — американская компания со штаб-квартирой в Нью-Йорке , специализирующаяся на исследованиях и технологиях генеративного искусственного интеллекта . [1] Компания в первую очередь сосредоточена на создании продуктов и моделей для генерации видео, изображений и различного мультимедийного контента. Она наиболее известна разработкой коммерческих моделей генеративного ИИ для преобразования текста в видео и видео Gen-1, Gen-2 [2] [3] и Gen-3 Alpha. [1]
Компания была основана в 2018 году чилийцами Кристобалем Валенсуэла , [10] Алехандро Матамала и греком Анастасисом Германидисом после того, как они встретились в Школе искусств Тиш при Нью-Йоркском университете ITP . [11] В 2018 году компания привлекла 2 миллиона долларов США на создание платформы для масштабного развертывания моделей машинного обучения в мультимедийных приложениях.
В декабре 2020 года Runway привлекла 8,5 млн долларов США [12] в рамках раунда финансирования серии А.
В декабре 2021 года компания привлекла 35 миллионов долларов США в раунде финансирования серии B. [13]
21 декабря 2022 года Runway привлекла 50 миллионов долларов США [16] в раунде серии C. Затем последовал расширенный раунд серии C на сумму 141 миллион долларов в июне 2023 года при оценке в 1,5 миллиарда долларов [17] [18] от Google , Nvidia и Salesforce [19] для создания основополагающих мультимодальных моделей ИИ для генерации контента, который будет использоваться в производстве фильмов и видео. [20] [21]
В феврале 2023 года Runway выпустила Gen-1 и Gen-2 — первую коммерческую и общедоступную базовую модель генерации видео в видео и текста в видео [22] [23] [24], доступную через простой веб-интерфейс.
Gen-1 — это система генеративного искусственного интеллекта для преобразования видео в видео , которая синтезирует новые видео, применяя композицию и стиль изображения или текстовой подсказки к структуре исходного видео. Модель была выпущена в феврале 2023 года. Модель Gen-1 была обучена и разработана компанией Runway на основе оригинальной статьи Structure and Content-Guided Video Synthesis with Diffusion Models из Runway Research. [30] Gen-1 — пример генеративного искусственного интеллекта для создания видео.
Ген-2
Gen-2 — это мультимодальная система искусственного интеллекта, которая может генерировать новые видео с текстом, изображениями или видеоклипами. Модель является продолжением Gen-1 и включает модальность для генерации видео, обусловленного текстом. Gen-2 — одна из первых коммерчески доступных моделей преобразования текста в видео . [31] [32] [33] [34]
Ген-3 Альфа
Gen-3 Alpha — первая из предстоящей серии моделей, обученных Runway на новой инфраструктуре, созданной для крупномасштабного мультимодального обучения. Это значительное улучшение точности, согласованности и движения по сравнению с Gen-2 и шаг к построению общих мировых моделей. [2]
Данные для обучения Gen-3 были получены из тысяч видеороликов YouTube и потенциально пиратских фильмов . Бывший сотрудник Runway заявил 404 Media , что общекорпоративные усилия заключались в компиляции видео в электронные таблицы, которые затем загружались с помощью youtube-dl через прокси-серверы, чтобы избежать блокировки YouTube. В ходе тестов 404 Media обнаружила, что имена пользователей YouTube генерируют видео в их соответствующих стилях. [35]
Кинофестиваль ИИ
В Лос-Анджелесе и Нью-Йорке проходит ежегодный кинофестиваль AI Film Festival [36] . [37] [38]
Ссылки
^ ab Metz, Cade (2023-04-04). «Мгновенные видео могут стать следующим скачком в технологии искусственного интеллекта». The New York Times . ISSN 0362-4331 . Получено 15 сентября 2023 г.
^ Винсент, Джеймс (2023-03-20). «Искусственный интеллект, преобразующий текст в видео, становится все ближе, поскольку стартап Runway анонсирует новую модель». The Verge . Получено 15 сентября 2023 г.
^ «Как режиссер и монтажер Эван Халлек использует Runway для фильмов, музыкальных клипов и рекламы». Runway . Получено 2024-03-01 .
^ Коуэн, Трейс Уильям. «Канье Уэст делится тревожным видео для «Vultures (Havoc Version)» в преддверии выхода альбома Ty Dolla Sign Collab». Complex . Получено 01.03.2024 .
↑ The Dandy Warhols - «I'd Like To Help You With Your Problem (feat. Slash)» - Официальный видеоклип, 14 февраля 2024 г. , получено 01.03.2024
^ "Как Runway сократил редактирование The Late Show с пяти часов до пяти минут". Runway . Получено 2024-03-01 .
^ "Как Дрю Эмери использует Runway для редактирования контента для Top Gear America и Cooper's Bar". Runway . Получено 01.03.2024 .
^ «TIME100 AI 2023: Кристобаль Валенсуэла» . Время . 07.09.2023 . Проверено 15 сентября 2023 г.
^ Блэк, Джулия. «Не все пытаются построить Бога»: генеральный директор Runway Кристобаль Валенсуэла пытается ослабить обреченность». Информация . Получено 18 сентября 2023 г.
^ "RunwayML привлекает $8,5 млн для своих инструментов создания медиа на базе искусственного интеллекта". VentureBeat . 2020-12-16 . Получено 2023-09-15 .
^ "Runway привлекает $35M Series B | Runway Blog". Runway . Получено 2023-11-07 .
^ Кай, Кенрик. «Основатель ИИ, присвоивший себе успех Stable Diffusion, имеет историю преувеличения». Forbes . Получено 15 сентября 2023 г.
^ "Оригинальный стартап, стоящий за Stable Diffusion, запустил генеративный ИИ для видео". MIT Technology Review . Получено 18.09.2023 .
^ Кай, Кенрик. «Runway привлекает $50 млн при оценке в $500 млн, поскольку продолжается помешательство на генеративном ИИ». Forbes . Получено 15 сентября 2023 г.
^ "AI Video Startup Runway привлек $141 млн от Google и Nvidia". Bloomberg.com . 2023-06-29 . Получено 2023-09-15 .
^ "Google инвестирует в стартап AI, чтобы вырвать облачный бизнес из AWS". Информация . Получено 2023-09-15 .
^ Блэк, Джулия. «Не все пытаются построить Бога»: генеральный директор Runway Кристобаль Валенсуэла пытается ослабить обреченность». Информация . Получено 15 сентября 2023 г.
^ "Избранное интервью: генеральный директор Runway AI Крис Валенсуэла - Первый шаг с Джулией Чаттерли - Подкаст на CNN Audio". CNN . Получено 18 сентября 2023 г.
^ Метц, Кейд (2023-04-04). «Мгновенные видео могут стать следующим шагом в технологии искусственного интеллекта». The New York Times . ISSN 0362-4331 . Получено 15 сентября 2023 г.
^ Винсент, Джеймс (2023-03-20). «Искусственный интеллект, преобразующий текст в видео, становится все ближе, поскольку стартап Runway анонсирует новую модель». The Verge . Получено 15 сентября 2023 г.
^ "TIME100 Most Influential Companies 2023: Runway". Time . 2023-06-21 . Получено 2023-09-20 .
^ Винсент, Джеймс (24.04.2023). «Создавайте генеративное видео AI-to-video прямо со своего телефона с помощью приложения Runway для iOS». The Verge . Получено 01.03.2024 .
^ "Runway, разработчик Stable Diffusion, привлекает $50 млн для создания мультимедийных инструментов на основе искусственного интеллекта". SiliconANGLE . 2022-12-06 . Получено 2023-09-18 .
^ «Устойчивый ИИ теряет руководителей, инженеров и свое преимущество». Bloomberg.com . 2023-08-08 . Получено 2023-09-18 .
^ "Оригинальный стартап, стоящий за Stable Diffusion, запустил генеративный ИИ для видео". MIT Technology Review . Получено 18.09.2023 .
^ "Gen-1 by Runway". Runway . Получено 2023-09-18 .
^ «ИИ, преобразующий текст в видео, наконец-то здесь, и это чертовски странно». Gizmodo . 2023-03-22 . Получено 2023-09-18 .
^ Виггерс, Кайл (09.06.2023). «Runway's Gen-2 демонстрирует ограничения современных технологий преобразования текста в видео». TechCrunch . Получено 18.09.2023 .
^ Аврам Пилтч (2023-06-08). «Мощный инструмент преобразования текста в видео второго поколения от Runway теперь доступен всем бесплатно». Tom's Hardware . Получено 2023-09-18 .
^ Винсент, Джеймс (2023-03-20). «Искусственный интеллект, преобразующий текст в видео, становится все ближе, поскольку стартап Runway анонсирует новую модель». The Verge . Получено 18 сентября 2023 г.
^ Коул, Саманта (25 июля 2024 г.). «AI Video Generator Runway обучен на тысячах видео YouTube без разрешения». 404 Media . Получено 25 июля 2024 г.
^ "Runway AI Film Festival". Подиум . Получено 2023-11-18 .
^ Мелендес, Стивен. «На новом кинофестивале будут показывать только фильмы, созданные с использованием ИИ».
^ Кокаличева, Киа. «1 большое событие в кино: кинофестиваль, созданный искусственным интеллектом».