16 февраля 2024, 11:23 481 0

Создатели ChatGPT представили нейросеть Sora, генерирующую видео по текстовому описанию

Новая нейросеть Sora от OpenAI создаёт видео по текстовому описанию с очень впечатляющим качеством, но пока без звука и продолжительностью до минуты. Некоторые примеры сложно отличить от реальной съёмки, а другие смотрятся почти как дорогой мультфильм от Pixar.

Видео сгенерированые с помощью Sora:

Больше примеров можно посмотреть на сайте проекта.

На текущий момент доступ к нейросети предоставляется только в рамках закрытого бета-теста. Релиз в открытом доступе будет позднее.

Sora способна создавать сложные сцены с несколькими персонажами, определенными типами движений и точными деталями объекта съемки и фона. Модель воспроизводит не только то, что пользователь указал в Promt, но и то, как эти вещи взаимодействуют и выглядят в реальном мире.

Модель обладает глубоким пониманием языка, что позволяет ей точно интерпретировать подсказки и создавать привлекательных персонажей, выражающих яркие эмоции. Sora также может создавать несколько кадров в рамках одного сгенерированного видео, которые точно передают персонажей и визуальный стиль.

Текущая модель имеет недостатки. Она может испытывать трудности с точным моделированием физики сложной сцены и может не понимать конкретных причинно-следственных связей. Например, человек может откусить кусочек от печенья, но на нем может не остаться следов надкуса.

Модель также может путать пространственные детали, например, путать левое и правое направления, и может затрудняться с точным описанием событий, происходящих с течением времени, например, следования определенной траектории камеры.

Помимо возможности генерировать видео исключительно на основе текстовых инструкций (промтов), модель способна сгенерировать видео из изображения, анимируя содержимое изображения с точностью и вниманием к мелким деталям. Модель также может обработать существующее видео, расширить его или заполнить недостающие кадры.

Комментарии ()

    Главные события

    Свежие новости

    Mail‌.ru запускает собственную нейросеть

    Генеративная нейросеть Mail‌.ru собственной разработки поможет вдохновиться 
и сэкономит ваше время

    28 февраля 2024, 10:42

    В сеть слили видео геймплея, пока ещё невыпущенной, отечественной игры «Смута».

    21 февраля 2024, 11:06

    Helldivers 2 превзошла рекорд GTA 5 по количеству игроков за все время в Steam

    Helldivers 2 возглавляет рейтинги Steam и в настоящее время занимает первое место на PlayStation Store.

    19 февраля 2024, 18:48

    Быстрые ответы от нейросети YandexGPT в поиске Яндекса стали доступны всем пользователям

    Яндекс расширяет тестирование быстрых ответов от YandexGPT в «Поиске», делая их доступными всем пользователям для ограниченного набора запросов. Благодаря нейросети YandexGPT, ответы становятся более точными на сложные вопросы, с активными ссылками на источники

    07 февраля 2024, 22:48

    Rockstar опубликовала официальный трейлер GTA 6

    В трейлере GTA VI показаны фрагменты катсцен и кадры на игровом движке, которые позволяют предварительно оценить качество графики, детализацию персонажей и объектов, а также анимацию тайтла.

    06 декабря 2023, 12:34

    Все новости