Компания Runway, специализирующаяся на исскуственном интеллекте, которая стала соавтором прошлогодней прорывной модели преобразования текста в изображение Stable Diffusion, выпустила модель нейросети, которая может преобразовывать существующие видео в новые, применяя любой стиль, заданный текстовой подсказкой или готовым изображением.
В демонстрационном ролике, размещенном на ее веб-сайте, Runway показывает, как ее программное обеспечение под названием Gen-1 может превращать людей на улице в пластилиновых марионеток, а книги, сложенные на столе, — в городской пейзаж ночью. Runway надеется, что Gen-1 сделает для видео то же, что Stable Diffusion сделал для изображений.
Созданная в 2018 году, Runway уже несколько лет занимается разработкой программного обеспечения для редактирования видео на основе искусственного интеллекта. Его инструменты используют Ютуб блогеры, а также кино- и телестудии.
В 2021 году Runway сотрудничала с исследователями из Мюнхенского университета, чтобы создать первую версию Stable Diffusion. Stability AI, британский стартап, затем вмешался, чтобы оплатить вычислительные затраты, необходимые для обучения модели на гораздо большем количестве данных. В 2022 году Stability AI превратил Stable Diffusion из исследовательского проекта в глобальное явление.
