Дом
ByteDance открыла исходный код фреймворка Bernini для унифицированного создания и редактирования видео
Команда ByteDance, занимающаяся коммерциализацией технологий, официально выпустила платформу с открытым исходным кодом для генерации и редактирования видео под названием Bernini. В основе платформы лежит механизм совместной работы по принципу «сначала понять, потом сгенерировать», призванный решать типичные для отрасли проблемы, такие как нестабильность изображения и мерцание кадров, возникающие из-за неспособности традиционных моделей точно интерпретировать сложные инструкции.
В ходе внутренних оценок в ByteDance Bernini продемонстрировала результаты высшего уровня. Ее код инференса и модель второго этапа, Bernini-R, теперь доступны для общественности, а полнофункциональная версия планируется к полному выпуску с открытым исходным кодом в ближайшем будущем.

Разделение семантики и рендеринга
Рабочий процесс Bernini вводит новое разделение между «семантическим планированием» и «визуальным рендерингом». Процесс начинается с мультимодального планировщика на основе большой модели, который тщательно анализирует входные материалы для создания «семантического эскиза», который затем преобразуется рендерером в стабильные, связные видеокадры.
Такое четкое разделение обязанностей делает эту платформу особенно полезной для управляемого редактирования. Пользователи могут настраивать атрибуты сцены, такие как погода, время года или визуальный стиль, с помощью простых команд, а также получать точный контроль над углами камеры, фокусом и движениями объектов.
Расширенные возможности визуального референсирования
Помимо традиционного текстового управления, Bernini поддерживает использование изображений и видео в качестве визуальных ориентиров, что значительно повышает творческую согласованность. При редактировании видео он может точно размещать определенные материалы или плакаты в целевых областях без артефактов границ или искажения перспективы.
Для генерации новых видео модель обрабатывает одноизобразительные и многоугольные входные данные и может преобразовывать ключевые кадры в непрерывные последовательности. Чтобы избежать путаницы при соединении нескольких визуальных сегментов, команда внедрила специальный механизм позиционного кодирования, который четко отличает исходные материалы от выходных целей.
Страница проекта: https://bernini-ai.github.io/
Связанная статья
Suno добавляет водяные знаки на песни в ходе судебных разбирательств
Suno, платформа, позволяющая пользователям создавать музыку с помощью искусственного интеллекта, представила новые функции для маркировки треков, созданных на платформе, ограничения на скачивание и обновления стандартов сообщества для борьбы с несанк
Маск признал, что утечка кода Grok привела к раскрытию пользовательских данных, и пообещал стереть всю историческую информацию.
Илон Маск напрямую отреагировал на скандал с конфиденциальностью вокруг Grok Build, начав с простого «Да», чтобы подтвердить достоверность инцидента. Он пообещал, что все данные пользователей, ранее загруженные в SpaceXAI, будут безвозвратно удалены,
Акции США достигли исторической отметки, поскольку гиганты искусственного интеллекта и аэрокосмической отрасли готовятся к дебюту с оценкой в триллион долларов
Илон Маск, Сэм Алтман и Дарио Амодэй, три титана технологического сектора, продвигаются к первичным публичным предложениям акций своих respective компаний. Благодаря SpaceX, OpenAI и Anthropic — трем отраслевым гигантам, чья оценка приближается к три
Рекомендации по связанным специальным темам
Комментарии (0)
Команда ByteDance, занимающаяся коммерциализацией технологий, официально выпустила платформу с открытым исходным кодом для генерации и редактирования видео под названием Bernini. В основе платформы лежит механизм совместной работы по принципу «сначала понять, потом сгенерировать», призванный решать типичные для отрасли проблемы, такие как нестабильность изображения и мерцание кадров, возникающие из-за неспособности традиционных моделей точно интерпретировать сложные инструкции.
В ходе внутренних оценок в ByteDance Bernini продемонстрировала результаты высшего уровня. Ее код инференса и модель второго этапа, Bernini-R, теперь доступны для общественности, а полнофункциональная версия планируется к полному выпуску с открытым исходным кодом в ближайшем будущем.

Разделение семантики и рендеринга
Рабочий процесс Bernini вводит новое разделение между «семантическим планированием» и «визуальным рендерингом». Процесс начинается с мультимодального планировщика на основе большой модели, который тщательно анализирует входные материалы для создания «семантического эскиза», который затем преобразуется рендерером в стабильные, связные видеокадры.
Такое четкое разделение обязанностей делает эту платформу особенно полезной для управляемого редактирования. Пользователи могут настраивать атрибуты сцены, такие как погода, время года или визуальный стиль, с помощью простых команд, а также получать точный контроль над углами камеры, фокусом и движениями объектов.
Расширенные возможности визуального референсирования
Помимо традиционного текстового управления, Bernini поддерживает использование изображений и видео в качестве визуальных ориентиров, что значительно повышает творческую согласованность. При редактировании видео он может точно размещать определенные материалы или плакаты в целевых областях без артефактов границ или искажения перспективы.
Для генерации новых видео модель обрабатывает одноизобразительные и многоугольные входные данные и может преобразовывать ключевые кадры в непрерывные последовательности. Чтобы избежать путаницы при соединении нескольких визуальных сегментов, команда внедрила специальный механизм позиционного кодирования, который четко отличает исходные материалы от выходных целей.
Страница проекта: https://bernini-ai.github.io/
Suno добавляет водяные знаки на песни в ходе судебных разбирательств
Suno, платформа, позволяющая пользователям создавать музыку с помощью искусственного интеллекта, представила новые функции для маркировки треков, созданных на платформе, ограничения на скачивание и обновления стандартов сообщества для борьбы с несанк
Маск признал, что утечка кода Grok привела к раскрытию пользовательских данных, и пообещал стереть всю историческую информацию.
Илон Маск напрямую отреагировал на скандал с конфиденциальностью вокруг Grok Build, начав с простого «Да», чтобы подтвердить достоверность инцидента. Он пообещал, что все данные пользователей, ранее загруженные в SpaceXAI, будут безвозвратно удалены,
Акции США достигли исторической отметки, поскольку гиганты искусственного интеллекта и аэрокосмической отрасли готовятся к дебюту с оценкой в триллион долларов
Илон Маск, Сэм Алтман и Дарио Амодэй, три титана технологического сектора, продвигаются к первичным публичным предложениям акций своих respective компаний. Благодаря SpaceX, OpenAI и Anthropic — трем отраслевым гигантам, чья оценка приближается к три











