OpenAI представила новую нейросеть — Sora, которая умеет создавать минутные видео по обычному текстовому описанию. И это революция в развитии нейросетей и ИИ.
Sora — это диффузионная модель, которая способна «создавать сложные сцены с несколькими персонажами, определёнными типами движения и точными деталями объекта и фона». Модель понимает подсказки и даже знает, как ведут себя различные объекты в физическом мире.
Удивителен тот факт, что Sora генерирует целое видео сразу, а не покадрово. Это помогает избежать того, что было проблемой при использовании других подходов, — изменения объекта при движении или перемещении камеры.
Sora прямо сейчас находится на финальной стадии разработки, а OpenAI пока не планирует делать её общедоступной. В том числе, из-за опасения касательно безопасности. Сейчас компания усиленно работает над идеями по сокращению возможностей создания разжигающего ненависть контента, политических материалов и сексуализированного контента (а вот это зря — видео-индустрия развивается за счёт этого в первую очередь), а также чёткой маркировки видео, сгенерированного ИИ.
Уже сейчас OpenAI даёт доступ к Sora ряду художников, дизайнеров и режиссеров, чтобы получить отзывы о том, как позиционировать и развивать модель так: чтобы она была наиболее полезной для творчества.
Больше примеров на страничке разработчиков Sora — вот тут.