Apple 的 LGTM 框架克服了運算焦慮,使 Vision Pro 能夠實現 4K 級別的 3D 渲染
近期,來自蘋果公司與香港大學的研究人員發表了一篇題為《少些高斯分布,多些紋理:4K 前饋式紋理濺射》("Less Gaussians, More Textures: 4K Feedforward Texture Splatting")的論文,介紹了一種名為LGTM 的新框架。 這項技術解決了高解析度下 3D 高斯濺射技術的運算瓶頸,為 Apple Vision Pro 等高像素顯示裝置鋪平了道路。
技術突破:解耦幾何與解析度
雖然主流的前饋式 3D 高斯濺射技術能快速將 2D 影像轉換為 3D 場景,但其運算需求會隨著渲染解析度呈指數級增長,使得即時 4K 渲染變得困難。
LGTM 框架 的核心創新在於將幾何複雜度與渲染解析度解耦。它並非透過增加高斯函數的數量,而是透過兩步驟方法來提升影像品質:
幾何學習:模型首先從低解析度影像中學習場景的基本結構,並與高解析度的真實參考資料進行比對,確保在 2K/4K 解析度下,幾何骨架能無縫且無瑕疵。
紋理疊加:專用的外觀網路將高解析度影像中的細微細節轉換為紋理,隨後將這些紋理疊加在簡單的幾何形狀上。

賦能 Apple Vision Pro
Apple Vision Pro 的雙螢幕擁有約 2,300 萬個像素,每隻眼睛的解析度均超過 4K。 傳統的SPLAT 前饋模型在處理如此高密度的像素時,往往面臨效能限制。LGTM 可升級現有系統(例如 NoPoSplat、DepthSplat 等),讓裝置在維持低運算負載的同時,生成更細緻的紋理、更清晰的文字,以及更逼真的沉浸式環境。
透過專案展示頁面 可見,LGTM 顯著突破了前饋式 3D 重建的視覺極限。這意味著未來的 visionOS 使用者,將能在即時生成的虛擬空間中體驗前所未有的真實感。
相關文章
位元組跳動旗下 Seed 啟動全球校園招聘,以虛擬股份爭奪頂尖大模型人才
在大型語言模型的競爭格局中,爭奪頂尖人才仍然是最關鍵的戰略資產。4月1日,位元組跳動宣佈啟動Seed全球校園招聘計劃,作為其大模型人才培養專案的一部分。該活動面向2027屆畢業生及現有實習生,旨在全球範圍內發掘並鎖定AI領域的精英研發與工程人才。規模擴張:全球甄選100名“AI種子”在技術快速進步的背景下,位元組跳動有限公司今年大幅增加了對基礎AI人才的投入:招聘範圍: 該計劃旨在從全球範圍內招聘約100名專注於大模型的傑出候選人,物件為2027屆畢業生。發展路徑: Seed計劃將核心
Suno 在法律訴訟中為歌曲新增水印
Suno,這個允許使用者生成由人工智慧創作的音樂的平臺,近日推出了新功能,包括為平臺製作的曲目新增標籤、限制下載,並更新社羣標準以遏制未經授權的複製品。這些更新是在Suno面臨多家唱片公司和藝術家組織提起的多起訴訟之際推出的。在部落格文章中,聯合創始人兼執行長Mikey Shulman概述了核心原則,強調該平臺旨在促進原創創作,同時擴大更廣泛受眾對人工智慧音樂工具的訪問許可權。一個主要的爭議點在於,使用者將人工智慧生成的歌曲上傳到其他流媒體服務並透過操縱系統獲取收入。Suno表示,現在將採用音訊
馬斯克承認 Grok 構建過程中洩露了使用者程式碼,並承諾清除所有歷史資料
埃隆·馬斯克直接回應了圍繞 Grok Build 的隱私爭議,首先以簡單的“True”(屬實)確認了該事件的有效性。他承諾,此前上傳至 SpaceXAI 的所有使用者資料將被永久刪除,並表示“不留一個位元組”。這是人工智慧行業首次由主要科技領袖公開承認錯誤並主動刪除使用者資料。安全研究人員的“釣魚”測試揭示了資料洩露的具體證據此次爭議源於獨立人工智慧安全研究人員 @cereblab 的一份報告。SpaceXAI 推出的 AI 程式設計助手 Grok Build 在其官方網站上聲稱其“優先本地執行,程式碼
相關專題推薦
評論 (1)
0/500
Finally, someone addressed the compute anxiety on Vision Pro! 🤯 LGTM sounds like a game-changer for 3D rendering. I've been waiting for something that doesn't make my device melt during heavy tasks. If this actually delivers 4K-grade results without the lag, Apple might finally win the spatial computing race. Can't wait to test it out! 🚀
近期,來自蘋果公司與香港大學的研究人員發表了一篇題為《少些高斯分布,多些紋理:4K 前饋式紋理濺射》("Less Gaussians, More Textures: 4K Feedforward Texture Splatting")的論文,介紹了一種名為LGTM 的新框架。 這項技術解決了高解析度下 3D 高斯濺射技術的運算瓶頸,為 Apple Vision Pro 等高像素顯示裝置鋪平了道路。
技術突破:解耦幾何與解析度
雖然主流的前饋式 3D 高斯濺射技術能快速將 2D 影像轉換為 3D 場景,但其運算需求會隨著渲染解析度呈指數級增長,使得即時 4K 渲染變得困難。
幾何學習:模型首先從低解析度影像中學習場景的基本結構,並與高解析度的真實參考資料進行比對,確保在 2K/4K 解析度下,幾何骨架能無縫且無瑕疵。
紋理疊加:專用的外觀網路將高解析度影像中的細微細節轉換為紋理,隨後將這些紋理疊加在簡單的幾何形狀上。
賦能 Apple Vision Pro
Apple Vision Pro 的雙螢幕擁有約 2,300 萬個像素,每隻眼睛的解析度均超過 4K。 傳統的
透過
位元組跳動旗下 Seed 啟動全球校園招聘,以虛擬股份爭奪頂尖大模型人才
在大型語言模型的競爭格局中,爭奪頂尖人才仍然是最關鍵的戰略資產。4月1日,位元組跳動宣佈啟動Seed全球校園招聘計劃,作為其大模型人才培養專案的一部分。該活動面向2027屆畢業生及現有實習生,旨在全球範圍內發掘並鎖定AI領域的精英研發與工程人才。規模擴張:全球甄選100名“AI種子”在技術快速進步的背景下,位元組跳動有限公司今年大幅增加了對基礎AI人才的投入:招聘範圍: 該計劃旨在從全球範圍內招聘約100名專注於大模型的傑出候選人,物件為2027屆畢業生。發展路徑: Seed計劃將核心
Suno 在法律訴訟中為歌曲新增水印
Suno,這個允許使用者生成由人工智慧創作的音樂的平臺,近日推出了新功能,包括為平臺製作的曲目新增標籤、限制下載,並更新社羣標準以遏制未經授權的複製品。這些更新是在Suno面臨多家唱片公司和藝術家組織提起的多起訴訟之際推出的。在部落格文章中,聯合創始人兼執行長Mikey Shulman概述了核心原則,強調該平臺旨在促進原創創作,同時擴大更廣泛受眾對人工智慧音樂工具的訪問許可權。一個主要的爭議點在於,使用者將人工智慧生成的歌曲上傳到其他流媒體服務並透過操縱系統獲取收入。Suno表示,現在將採用音訊
馬斯克承認 Grok 構建過程中洩露了使用者程式碼,並承諾清除所有歷史資料
埃隆·馬斯克直接回應了圍繞 Grok Build 的隱私爭議,首先以簡單的“True”(屬實)確認了該事件的有效性。他承諾,此前上傳至 SpaceXAI 的所有使用者資料將被永久刪除,並表示“不留一個位元組”。這是人工智慧行業首次由主要科技領袖公開承認錯誤並主動刪除使用者資料。安全研究人員的“釣魚”測試揭示了資料洩露的具體證據此次爭議源於獨立人工智慧安全研究人員 @cereblab 的一份報告。SpaceXAI 推出的 AI 程式設計助手 Grok Build 在其官方網站上聲稱其“優先本地執行,程式碼
Finally, someone addressed the compute anxiety on Vision Pro! 🤯 LGTM sounds like a game-changer for 3D rendering. I've been waiting for something that doesn't make my device melt during heavy tasks. If this actually delivers 4K-grade results without the lag, Apple might finally win the spatial computing race. Can't wait to test it out! 🚀





首頁






