Она умеет создавать новые видео и дополнять существующие текстовыми описаниями.
Модель доставки OpenAI для создания и редактирования видео называется Сора. Разработчики хорошо поработали над тем, чтобы объекты в кадре оставались неизменными, даже если они временно покидают кадр. Сора опирается на технологические разработки ChatGPT и DALL-E. Управляется с помощью текстовых инструкций, может использовать готовое статичное изображение, постепенно анимировать его и дополнять кадр дополнительными объектами.
Пользователь может расширить готовое видео с помощью новой технологии. Sora позволяет создавать высококачественные видеоролики, использовать динамические движения камеры и имитировать взаимодействие с внешним миром, например, следы кисти на холсте художника.
Сора все еще несовершенен. Например, он неточно моделирует физику и может допускать ошибки при правильном изменении объекта, например, при употреблении пищи. Видео в нейросети состоит из набора небольших фрагментов, которые разработчики называют «патчами». Они похожи на токены ChatGPT. Патчи представляют собой практичный набор визуальных данных для масштабирования и дальнейшего обучения нейронной сети.
