Memories AI 為穿戴式裝置與機器人開發視覺記憶層

沈尚恩(Shawn Shen)主張,人工智慧若要在實體世界中真正蓬勃發展,就必須具備記住所見事物的能力。他所創辦的公司 Memories.ai 正利用 Nvidia 的人工智慧工具,打造一套基礎架構,使穿戴式裝置和機器人能夠儲存並調取視覺記憶。
週一,在 Nvidia GTC 大會上,Memories.ai 宣布與這家半導體龍頭建立合作夥伴關係。透過此次合作,Memories.ai 將能使用 Nvidia 的 Cosmos-Reason 2(一款具推理能力的視覺語言模型)以及用於影片搜尋與摘要的應用程式 Nvidia Metropolis,藉此推進其視覺記憶技術的發展。
沈(左圖)向 TechCrunch 解釋,這家公司的構想源於他與共同創辦人兼技術長 Ben Zhou(右圖)為 Meta 的 Ray-Ban 眼鏡開發 AI 系統期間。他們的工作凸顯了一個關鍵問題:如果使用者日後無法存取並回憶起所捕捉的影片資料,這項技術究竟有何實際用途?
在遍尋不著任何現成的AI視覺記憶解決方案後,他們決定離開Meta,親自打造這項技術。
「AI 在數位領域已取得非凡成就。下一個前沿領域就是實體世界,」沈表示。「由 AI 驅動的穿戴裝置和機器人同樣需要記憶……歸根結底,我們相信一個擁有視覺記憶的 AI 未來是不可避免的。」
AI系統的記憶概念是相對較新的發展。OpenAI於2024年為ChatGPT引入記憶功能,並在2025年進行了優化。同樣地,伊隆·馬斯克的xAI和Google Gemini也在過去兩年內推出了各自的記憶工具。
然而,沈指出,這些進展主要集中在基於文字的記憶上。雖然文字結構更為明確且更易於索引,但對於主要透過視覺輸入感知並與世界互動的實體AI(如機器人和穿戴式裝置)而言,其適用性較低。
成立於2024年的Memories.ai迄今已籌集1,600萬美元資金。其中包括2025年7月完成的800萬美元種子輪融資,以及隨後追加的800萬美元。此輪投資由Susa Ventures領投,Seedcamp、Fusion Fund、Crane Venture Partners等機構參與。
據 Shen 表示,建構這層視覺記憶層面臨兩大核心挑戰:一是開發基礎架構,將影片嵌入並索引為可儲存、可檢索的資料格式;二是蒐集必要的訓練資料。
該公司於2025年7月首次推出其大型視覺記憶模型(LVMM)。Shen 將其描述為 Google 近期發布的多模態索引與檢索模型 Gemini Embedding 2 的更精簡版本。
在資料蒐集方面,團隊開發了名為 LUCI 的自訂硬體裝置,由「資料蒐集員」佩戴以錄製訓練影片。Shen 澄清,他們並無計畫成為硬體製造商或販售這些裝置。他們開發 LUCI 的原因在於,市售的影片錄製設備往往側重於會耗盡電池壽命的高畫質格式,因此不適合他們的需求。
Memories.ai 隨後推出了第二代 LVMM,並與高通(Qualcomm)簽署了合作協議。該模型預計將於今年下半年起在高通的處理器上運行。
沈先生透露,公司已與數家主要穿戴式裝置製造商展開合作,但他拒絕透露具體名稱。儘管目前已有市場需求,他預見穿戴式裝置與機器人市場未來將有更大的發展機會。
「從商業化的角度來看,我們的重點完全放在模型和基礎設施上,」沈表示。「我們相信穿戴式裝置和機器人市場終將到來,但其全面興起仍需時日。」
相關文章
Nvidia 執行長黃仁勳告訴特朗普:“我們不會讓 [人工智慧放緩] 發生。”
在週一於洛杉磯舉行的 All-In 峰會上,英偉達(Nvidia)執行長黃仁勳接到美國總統唐納德·特朗普的意外來電,這是一通他無法簡單忽略的電話。“我正和幾位好友站在臺上,”黃仁勳向特朗普解釋道,他指的是 All-In 播客背後的風險投資家,包括科技投資者 Chamath Palihapitiya 和 Jason Calacanis,以及白宮顧問 David Friedberg 和 David Sacks。這一舉動很可能讓公關專業人士感到噩夢連連,黃仁勳透過將特朗普置於擴音模式,讓全場聽
黃仁勳揭示英偉達“全新”的2000億美元市場機遇
英偉達創始人兼執行長黃仁勳脫穎而出,成為推動公司敘事的最具吸引力的企業願景家之一,甚至可能是最偉大的。在對公司未來前景和收入流方面,他毫不掩飾的樂觀態度甚至可能超越Salesforce的馬克·貝尼奧夫。然而,他始終用一個個季度的業績來印證這種熱情。與其對他的“為英偉達發現了一個全新的2000億美元總可定址市場(TAM)”的說法持懷疑態度,我認為他已經贏得了一定的可信度。黃仁勳將這一巨大的新市場機會歸因於英偉達今年3月推出的最新CPU產品Vera。在週三的財報電話會議上——該公司剛剛度過
OneRail 運用 NVIDIA 人工智慧來優化即時「最後一哩」配送
OneRail 推出了一套採用 Nvidia 技術的人工智慧驅動配送平台,旨在協助零售商、批發商及經銷商為每筆訂單確定最有效的配送方式。據 OneRail 表示,這套名為 OmniSTAR 的系統會評估各種配送管道——包括自有車隊、快遞員、包裹服務及其他物流模式——以找出既符合服務水準協議,又最具成本效益的解決方案。該平台整合了 NVIDIA 的 cuOpt 決策優化引擎與 cuDF 資料處理軟體
相關專題推薦
評論 (0)
0/500

沈尚恩(Shawn Shen)主張,人工智慧若要在實體世界中真正蓬勃發展,就必須具備記住所見事物的能力。他所創辦的公司 Memories.ai 正利用 Nvidia 的人工智慧工具,打造一套基礎架構,使穿戴式裝置和機器人能夠儲存並調取視覺記憶。
週一,在 Nvidia GTC 大會上,Memories.ai 宣布與這家半導體龍頭建立合作夥伴關係。透過此次合作,Memories.ai 將能使用 Nvidia 的 Cosmos-Reason 2(一款具推理能力的視覺語言模型)以及用於影片搜尋與摘要的應用程式 Nvidia Metropolis,藉此推進其視覺記憶技術的發展。
沈(左圖)向 TechCrunch 解釋,這家公司的構想源於他與共同創辦人兼技術長 Ben Zhou(右圖)為 Meta 的 Ray-Ban 眼鏡開發 AI 系統期間。他們的工作凸顯了一個關鍵問題:如果使用者日後無法存取並回憶起所捕捉的影片資料,這項技術究竟有何實際用途?
在遍尋不著任何現成的AI視覺記憶解決方案後,他們決定離開Meta,親自打造這項技術。
「AI 在數位領域已取得非凡成就。下一個前沿領域就是實體世界,」沈表示。「由 AI 驅動的穿戴裝置和機器人同樣需要記憶……歸根結底,我們相信一個擁有視覺記憶的 AI 未來是不可避免的。」
AI系統的記憶概念是相對較新的發展。OpenAI於2024年為ChatGPT引入記憶功能,並在2025年進行了優化。同樣地,伊隆·馬斯克的xAI和Google Gemini也在過去兩年內推出了各自的記憶工具。
然而,沈指出,這些進展主要集中在基於文字的記憶上。雖然文字結構更為明確且更易於索引,但對於主要透過視覺輸入感知並與世界互動的實體AI(如機器人和穿戴式裝置)而言,其適用性較低。
成立於2024年的Memories.ai迄今已籌集1,600萬美元資金。其中包括2025年7月完成的800萬美元種子輪融資,以及隨後追加的800萬美元。此輪投資由Susa Ventures領投,Seedcamp、Fusion Fund、Crane Venture Partners等機構參與。
據 Shen 表示,建構這層視覺記憶層面臨兩大核心挑戰:一是開發基礎架構,將影片嵌入並索引為可儲存、可檢索的資料格式;二是蒐集必要的訓練資料。
該公司於2025年7月首次推出其大型視覺記憶模型(LVMM)。Shen 將其描述為 Google 近期發布的多模態索引與檢索模型 Gemini Embedding 2 的更精簡版本。
在資料蒐集方面,團隊開發了名為 LUCI 的自訂硬體裝置,由「資料蒐集員」佩戴以錄製訓練影片。Shen 澄清,他們並無計畫成為硬體製造商或販售這些裝置。他們開發 LUCI 的原因在於,市售的影片錄製設備往往側重於會耗盡電池壽命的高畫質格式,因此不適合他們的需求。
Memories.ai 隨後推出了第二代 LVMM,並與高通(Qualcomm)簽署了合作協議。該模型預計將於今年下半年起在高通的處理器上運行。
沈先生透露,公司已與數家主要穿戴式裝置製造商展開合作,但他拒絕透露具體名稱。儘管目前已有市場需求,他預見穿戴式裝置與機器人市場未來將有更大的發展機會。
「從商業化的角度來看,我們的重點完全放在模型和基礎設施上,」沈表示。「我們相信穿戴式裝置和機器人市場終將到來,但其全面興起仍需時日。」
Nvidia 執行長黃仁勳告訴特朗普:“我們不會讓 [人工智慧放緩] 發生。”
在週一於洛杉磯舉行的 All-In 峰會上,英偉達(Nvidia)執行長黃仁勳接到美國總統唐納德·特朗普的意外來電,這是一通他無法簡單忽略的電話。“我正和幾位好友站在臺上,”黃仁勳向特朗普解釋道,他指的是 All-In 播客背後的風險投資家,包括科技投資者 Chamath Palihapitiya 和 Jason Calacanis,以及白宮顧問 David Friedberg 和 David Sacks。這一舉動很可能讓公關專業人士感到噩夢連連,黃仁勳透過將特朗普置於擴音模式,讓全場聽
黃仁勳揭示英偉達“全新”的2000億美元市場機遇
英偉達創始人兼執行長黃仁勳脫穎而出,成為推動公司敘事的最具吸引力的企業願景家之一,甚至可能是最偉大的。在對公司未來前景和收入流方面,他毫不掩飾的樂觀態度甚至可能超越Salesforce的馬克·貝尼奧夫。然而,他始終用一個個季度的業績來印證這種熱情。與其對他的“為英偉達發現了一個全新的2000億美元總可定址市場(TAM)”的說法持懷疑態度,我認為他已經贏得了一定的可信度。黃仁勳將這一巨大的新市場機會歸因於英偉達今年3月推出的最新CPU產品Vera。在週三的財報電話會議上——該公司剛剛度過
OneRail 運用 NVIDIA 人工智慧來優化即時「最後一哩」配送
OneRail 推出了一套採用 Nvidia 技術的人工智慧驅動配送平台,旨在協助零售商、批發商及經銷商為每筆訂單確定最有效的配送方式。據 OneRail 表示,這套名為 OmniSTAR 的系統會評估各種配送管道——包括自有車隊、快遞員、包裹服務及其他物流模式——以找出既符合服務水準協議,又最具成本效益的解決方案。該平台整合了 NVIDIA 的 cuOpt 決策優化引擎與 cuDF 資料處理軟體





首頁






