字节跳动开源Bernini框架,实现视频生成与编辑一体化
字节跳动商业化技术团队正式发布了一个名为Bernini的开源视频生成与编辑框架。该框架的核心采用“先理解,后生成”的协作机制,旨在解决传统模型因无法准确解读复杂指令而导致的图像不稳定和画面闪烁等常见行业难题。
在字节跳动的内部评估中,Bernini取得了顶尖的性能表现。其推理代码及第二阶段模型Bernini-R现已对外开放,功能完整的版本也计划在不久的将来进行全面开源。

语义与渲染的解耦
Bernini的工作流开创性地将“语义规划”与“视觉渲染”进行了分离。该流程首先由多模态大型模型规划器对输入素材进行深度分析,生成“语义草图”,随后由渲染器将其转化为稳定、连贯的视频帧。
这种职责的明确划分使该框架特别适用于可控编辑。用户可通过简单命令调整场景属性(如天气、季节或视觉风格),并能精确控制摄像机角度、焦距及主体运动。
丰富的视觉参考功能
除了传统的文本控制外,Bernini 还支持使用图像和视频作为视觉参考,从而显著提升了创作的一致性。在视频编辑中,它能够将特定素材或海报精确放置到目标区域,且不会产生边界伪影或透视失真。
在生成新视频时,该模型支持单图像和多角度参考输入,并能将关键帧演化为连续序列。为避免连接多个视觉片段时的混淆,团队引入了专用的位置编码机制,可清晰区分参考素材与输出目标。
项目页面:https://bernini-ai.github.io/
相关文章
Google 测试 Remy AI 代理,以 Gemini 为重点转向用户控制
根据《商业内幕》的报道,谷歌正在测试 Remy,这是 Gemini 的一款全新 AI 个人代理工具。该工具旨在代表用户执行任务,从而简化专业工作流程和日常事务。目前,Remy 正在 Gemini 应用的内部员工专属版本中进行测试。该报告引用了一份内部文件以及对两位熟悉该项目的个人的采访。内部资料将 Remy 描述为“全天候个人代理”,将 Gemini 定位为能够代表用户行事的主动助手。接近该项目的消息人士证实,谷歌员工正在积极测试 Remy。谷歌发言人拒绝提供进一步评论。该报告未提及公开发布
如何修复核心网页指标以获得更好的 SEO 排名
利用 AI 工具简化成绩单评语撰写引言用于生成成绩单评语的 AI 工具Magic SchoolAlmanac AIChat GPT使用 Magic School 生成成绩单评语登录 Magic School选择成绩单评语工具为学生定制评语使用 Almanac AI 生成成绩单评语设置课程与评分方案配置评语长度与学生信息使用 Almanac AI 生成评语比较 Magic School 与 Almanac AI设置的便捷性可定制性与课程内容的整合速度与效率使用
Slackbot 成为 AI 智能体
Slackbot,嵌入在Salesforce企业消息平台Slack中的自动化助手,正在演变为一个AI智能体。Salesforce首席技术官Parker Harris设想它将达到与OpenAI的ChatGPT相媲美的病毒式传播地位。这家云软件巨头于周二推出了更新版的Slackbot。该新版AI驱动版本面向Business+和Enterprise+客户,可直接在Slack内查找信息、起草电子邮件和安排会议。在获得适当权限的情况下,它还能与Microsoft Teams和Google Drive等企
相关专题推荐
评论 (0)
0/500
字节跳动商业化技术团队正式发布了一个名为Bernini的开源视频生成与编辑框架。该框架的核心采用“先理解,后生成”的协作机制,旨在解决传统模型因无法准确解读复杂指令而导致的图像不稳定和画面闪烁等常见行业难题。
在字节跳动的内部评估中,Bernini取得了顶尖的性能表现。其推理代码及第二阶段模型Bernini-R现已对外开放,功能完整的版本也计划在不久的将来进行全面开源。

语义与渲染的解耦
Bernini的工作流开创性地将“语义规划”与“视觉渲染”进行了分离。该流程首先由多模态大型模型规划器对输入素材进行深度分析,生成“语义草图”,随后由渲染器将其转化为稳定、连贯的视频帧。
这种职责的明确划分使该框架特别适用于可控编辑。用户可通过简单命令调整场景属性(如天气、季节或视觉风格),并能精确控制摄像机角度、焦距及主体运动。
丰富的视觉参考功能
除了传统的文本控制外,Bernini 还支持使用图像和视频作为视觉参考,从而显著提升了创作的一致性。在视频编辑中,它能够将特定素材或海报精确放置到目标区域,且不会产生边界伪影或透视失真。
在生成新视频时,该模型支持单图像和多角度参考输入,并能将关键帧演化为连续序列。为避免连接多个视觉片段时的混淆,团队引入了专用的位置编码机制,可清晰区分参考素材与输出目标。
项目页面:https://bernini-ai.github.io/
如何修复核心网页指标以获得更好的 SEO 排名
利用 AI 工具简化成绩单评语撰写引言用于生成成绩单评语的 AI 工具Magic SchoolAlmanac AIChat GPT使用 Magic School 生成成绩单评语登录 Magic School选择成绩单评语工具为学生定制评语使用 Almanac AI 生成成绩单评语设置课程与评分方案配置评语长度与学生信息使用 Almanac AI 生成评语比较 Magic School 与 Almanac AI设置的便捷性可定制性与课程内容的整合速度与效率使用
Slackbot 成为 AI 智能体
Slackbot,嵌入在Salesforce企业消息平台Slack中的自动化助手,正在演变为一个AI智能体。Salesforce首席技术官Parker Harris设想它将达到与OpenAI的ChatGPT相媲美的病毒式传播地位。这家云软件巨头于周二推出了更新版的Slackbot。该新版AI驱动版本面向Business+和Enterprise+客户,可直接在Slack内查找信息、起草电子邮件和安排会议。在获得适当权限的情况下,它还能与Microsoft Teams和Google Drive等企





首页






