阿里巴巴推出Wan2.1-VACE:開源AI視頻解決方案
阿里巴巴推出了Wan2.1-VACE,一款開源AI模型,旨在改變視頻創作與編輯流程。
VACE是阿里巴巴Wan2.1視頻AI模型系列的關鍵組成部分,公司宣稱這是「業界首個為多樣化視頻生成與編輯任務提供全面解決方案的開源模型」。
如果阿里巴巴能夠簡化視頻製作流程,將多種工具整合到單一平台,可能會重新定義行業標準。
VACE能做什麼?它可以從多種輸入生成視頻,例如文字提示、靜態圖像或短視頻片段。
除了視頻創作,其編輯功能包括使用參考圖像或幀來引導AI、先進的視頻「重繪」功能、修改特定視頻片段,以及延長視頻時長。阿里巴巴表示,這些工具「讓用戶能夠靈活組合任務,提升創作潛力」。

想像根據您提供的照片創建包含特定角色的視頻。據報導,VACE可以實現這一點。有一張想動畫化的靜態圖像?這款開源AI模型可以為其添加逼真的動態效果。
對於精確編輯,VACE提供「視頻重繪」工具,支持主體間的姿勢轉移、詳細的運動控制、深度調整和顏色修改。
一個突出功能是其能夠「添加、修改或移除特定視頻區域而不影響周圍環境」。這對於精確編輯來說是一個改變遊戲規則的功能,確保背景不受影響。它還可以擴展視頻畫布,通過上下文相關的內容填充新區域,創造更豐富、更沉浸的結果。
有了VACE,您可以將靜態照片轉化為視頻,通過定義路徑控制物體運動,使用參考替換角色或物體,動畫化這些參考,或精確控制它們的姿勢。
阿里巴巴強調VACE能夠將高窄圖像轉換為寬屏視頻,通過參考圖像或提示智能擴展,加入額外元素。
VACE的功能由先進的技術支持,旨在應對視頻編輯的複雜性。視頻條件單元(VCU)「實現了文字、圖像、視頻和遮罩等多模態輸入的統一處理」。
此外,「上下文適配器結構」整合了「時間和空間維度的形式化表示」,讓AI對視頻中的時間和空間有深入理解。
阿里巴巴預見VACE在社交媒體內容創作、動態廣告、影視專業後期製作以及定制教育或培訓視頻等應用中表現出色。
阿里巴巴將Wan2.1-VACE開源以賦能創作者
開發先進的AI模型通常需要大量資源,包括巨大的計算能力和數據。阿里巴巴決定將Wan2.1-VACE開源是一個重大舉措。
阿里巴巴指出:「開放存取降低了門檻,讓更多企業能夠利用AI高效且經濟地創建量身定制的高品質視覺內容。」
此舉旨在通過提供無高成本的尖端AI工具,賦能小型企業和個人創作者,促進更廣泛的創新。
阿里巴巴提供兩個版本:一個是適用於高性能系統的140億參數模型,另一個是適用於較低需求配置的13億參數輕量模型。兩者均可在Hugging Face、GitHub和阿里巴巴雲的ModelScope社區免費獲取。
另見:美國收緊AI擴散規則,加強晶片出口限制
在阿姆斯特丹、加州和倫敦的AI與大數據博覽會上,從行業專家那裡了解更多關於AI和大數據的資訊。此活動與智能自動化會議、BlockX、數字轉型週和網絡安全與雲博覽會同期舉辦。
探索TechForge主辦的即將舉行的企業技術活動和網絡研討會。
相關文章
Google 測試 Remy AI 代理,以 Gemini 為重點轉向使用者控制
根據《商業內幕》的報道,谷歌正在測試 Remy,這是 Gemini 的一款全新 AI 個人代理工具。該工具旨在代表使用者執行任務,從而簡化專業工作流程和日常事務。目前,Remy 正在 Gemini 應用的內部員工專屬版本中進行測試。該報告引用了一份內部檔案以及對兩位熟悉該專案的個人的採訪。內部資料將 Remy 描述為“全天候個人代理”,將 Gemini 定位為能夠代表使用者行事的主動助手。接近該專案的訊息人士證實,谷歌員工正在積極測試 Remy。谷歌發言人拒絕提供進一步評論。該報告未提及公開發布
奧利押注隱私保護,力爭在 AI 助理競賽中勝出
要真正發揮實用價值,人工智慧助理必須深入了解其使用者。Ollie 是一款專為日常生活設計的個人助理,其運作前提是:這無需您交出個人資料,亦不會損害您的隱私。雖然某些企業級 AI 工具提供資料隱私保障,但 Ollie 作為首批獲得 SOC 2 合規認證的主流、以家庭為導向的 AI 服務之一,顯得格外突出。此框架允許企業透過獨立稽核證明,其已建立正式的管控措施來保護客戶資料,並確保系統運作的安全性。達
「AI LIVE:倫敦」將如何探討人工智慧與工業自動化
本次峰會將匯聚來自全球的高階主管,共同探討全球產業面臨的迫切挑戰,涵蓋範圍從人工智慧驅動的顛覆性變革到經濟波動。AI LIVE:倫敦峰會將以「科技+人類使命」為主題,匯聚逾 2,000 位國際領袖,共同探討人工智慧新興時代的發展。隸屬於 BizClik 旗下的《AI Magazine》已公佈其於「AI LIVE:倫敦峰會」上舉辦的「人工智慧與工業自動化」聯合爐邊談話的與會陣容。該座談會定於 10
相關專題推薦
評論 (1)
0/500
阿里巴巴推出了Wan2.1-VACE,一款開源AI模型,旨在改變視頻創作與編輯流程。
VACE是阿里巴巴Wan2.1視頻AI模型系列的關鍵組成部分,公司宣稱這是「業界首個為多樣化視頻生成與編輯任務提供全面解決方案的開源模型」。
如果阿里巴巴能夠簡化視頻製作流程,將多種工具整合到單一平台,可能會重新定義行業標準。
VACE能做什麼?它可以從多種輸入生成視頻,例如文字提示、靜態圖像或短視頻片段。
除了視頻創作,其編輯功能包括使用參考圖像或幀來引導AI、先進的視頻「重繪」功能、修改特定視頻片段,以及延長視頻時長。阿里巴巴表示,這些工具「讓用戶能夠靈活組合任務,提升創作潛力」。

想像根據您提供的照片創建包含特定角色的視頻。據報導,VACE可以實現這一點。有一張想動畫化的靜態圖像?這款開源AI模型可以為其添加逼真的動態效果。
對於精確編輯,VACE提供「視頻重繪」工具,支持主體間的姿勢轉移、詳細的運動控制、深度調整和顏色修改。
一個突出功能是其能夠「添加、修改或移除特定視頻區域而不影響周圍環境」。這對於精確編輯來說是一個改變遊戲規則的功能,確保背景不受影響。它還可以擴展視頻畫布,通過上下文相關的內容填充新區域,創造更豐富、更沉浸的結果。
有了VACE,您可以將靜態照片轉化為視頻,通過定義路徑控制物體運動,使用參考替換角色或物體,動畫化這些參考,或精確控制它們的姿勢。
阿里巴巴強調VACE能夠將高窄圖像轉換為寬屏視頻,通過參考圖像或提示智能擴展,加入額外元素。
VACE的功能由先進的技術支持,旨在應對視頻編輯的複雜性。視頻條件單元(VCU)「實現了文字、圖像、視頻和遮罩等多模態輸入的統一處理」。
此外,「上下文適配器結構」整合了「時間和空間維度的形式化表示」,讓AI對視頻中的時間和空間有深入理解。
阿里巴巴預見VACE在社交媒體內容創作、動態廣告、影視專業後期製作以及定制教育或培訓視頻等應用中表現出色。
阿里巴巴將Wan2.1-VACE開源以賦能創作者
開發先進的AI模型通常需要大量資源,包括巨大的計算能力和數據。阿里巴巴決定將Wan2.1-VACE開源是一個重大舉措。
阿里巴巴指出:「開放存取降低了門檻,讓更多企業能夠利用AI高效且經濟地創建量身定制的高品質視覺內容。」
此舉旨在通過提供無高成本的尖端AI工具,賦能小型企業和個人創作者,促進更廣泛的創新。
阿里巴巴提供兩個版本:一個是適用於高性能系統的140億參數模型,另一個是適用於較低需求配置的13億參數輕量模型。兩者均可在Hugging Face、GitHub和阿里巴巴雲的ModelScope社區免費獲取。
另見:美國收緊AI擴散規則,加強晶片出口限制
在阿姆斯特丹、加州和倫敦的AI與大數據博覽會上,從行業專家那裡了解更多關於AI和大數據的資訊。此活動與智能自動化會議、BlockX、數字轉型週和網絡安全與雲博覽會同期舉辦。
探索TechForge主辦的即將舉行的企業技術活動和網絡研討會。
奧利押注隱私保護,力爭在 AI 助理競賽中勝出
要真正發揮實用價值,人工智慧助理必須深入了解其使用者。Ollie 是一款專為日常生活設計的個人助理,其運作前提是:這無需您交出個人資料,亦不會損害您的隱私。雖然某些企業級 AI 工具提供資料隱私保障,但 Ollie 作為首批獲得 SOC 2 合規認證的主流、以家庭為導向的 AI 服務之一,顯得格外突出。此框架允許企業透過獨立稽核證明,其已建立正式的管控措施來保護客戶資料,並確保系統運作的安全性。達
「AI LIVE:倫敦」將如何探討人工智慧與工業自動化
本次峰會將匯聚來自全球的高階主管,共同探討全球產業面臨的迫切挑戰,涵蓋範圍從人工智慧驅動的顛覆性變革到經濟波動。AI LIVE:倫敦峰會將以「科技+人類使命」為主題,匯聚逾 2,000 位國際領袖,共同探討人工智慧新興時代的發展。隸屬於 BizClik 旗下的《AI Magazine》已公佈其於「AI LIVE:倫敦峰會」上舉辦的「人工智慧與工業自動化」聯合爐邊談話的與會陣容。該座談會定於 10





首頁






