OpenAI: выпустили видеогенератор Sora 2.

В модели значительно повысился реализм изображения: картинка выглядит более естественной, даже если это рандомное видео с телефона или футаж с камеры наблюдения. Также обновилась физика, которая способствует реалистичности. Плюс видео теперь генерится со звуком и липсинком, в том числе и на русском.

Вместе с Sora 2 OpenAI запустили и соцсеть для публикации сгенерированного контента. Отличительной фишкой ещё является то, что можно генерировать видео с персонажами вроде Сэма Альтмана или друзьями пришедшими по инвайту. Для последнего нужно загрузить видео с собой.

Кстати, вот вам три инвайта:

Q7STH1

MB7CTA

ZG1AEE

Если не работают таскайте из реддита, соседних чатов, или делитесь здесь в комментах.

На бесплатном тарифе генерит в шакалистом 360p длиной 10 сек, зато нет таких жёстких лимитов как с Veo 3. Sora 2 Pro, доступная по подписке ChatGPT Pro, уже выдаёт 1080p до 16 сек.

Сайт
Анонс

xAI: Илон обновил свой генератор картинок и видео Grok Imagine с v.01 до v 0.9.

Создаёт видео длительностью 6 сек на основе текста или изображений за 15 секунд. Улучшилось качество визуала, но нет разрешения 1080p. Впрочем Sora 2 по умолчанию тоже 360p выдаёт. Генерит со звуком и липсинком, но качество аудио и фреймрейт гуляют судя по примерам.

В отличие от Sora 2 тут нет такой цензуры и видео выдаются без водяного знака.

Grok Imagine работает через мобильное приложение Grok (нужно обновить до последней версии).

Приложение (Android)
Приложение (iOS)
Твит

Замена персонажа в существующем видео с сохранением липсинка и освещения.

Локально на 5090 в Comfy с помощью Wan Animate. На первое видео разрешением 1024х576 в 4 шага ушёл 1 час, на второе 35 мин.

А Sora так может?

Твит

Simulon: приложение для вписывания и анимации 3D моделей в видео с реалистичным освещением и трекингом камеры вышло в публичный доступ. Ранее, когда оно ещё было в привате, я делал обзор.

Обновился интерфейс и теперь есть два подхода к созданию сцен:
* Take-based — каждая видеозапись создаёт свою 3D сцену. Удобно для работы над индивидуальными фрагментами.
* Scene-based — можно делать глобальные правки в конкретной сцене и подгружать дубли как камеры. Подойдёт при работе в мультикам режиме.

Между подходами можно переключаться.

Что ещё нового:
* Глобальный контроль анимации — можно поставить на паузу и сделать её сброс в любой момент. Если начать запись во время паузы, анимация начнётся с 1 кадра, позволяя получить предсказуемый результат.
* Улучшен удалённый авторинг в Блендоре
* Поддержка Alembic (.abc) файлов. Конвертер Simulon позволяет воспроизводить анимации в реальном времени на iPhone.
* Рабочие группы для совместной работы над проектами.

Приложение всё также доступно пока только на iPhone.

Сайт
Приложение
Твит