Heim
Cosmos3, das erste vollständig quelloffene multimodale physikalische KI-Modell, wird vorgestellt; NVIDIA ist Mitbegründer der Cosmos Alliance
Im Bereich der physikalischen künstlichen Intelligenz wurden bedeutende Fortschritte erzielt. Am 1. Juni stellte NVIDIA offiziell Cosmos3 vor, ein grundlegendes Großmodell für physikalische KI in einer offenen Welt. Als weltweit erstes vollständig quelloffenes und multimodales großes Modell für physikalische KI nutzt es eine innovative hybride Transformer-Architektur, die visuelles Schlussfolgern, Weltgenerierung und Aktionsvorhersage in einem einzigen System vereint. Dies könnte den Trainings- und Evaluierungszyklus für physikalische KI drastisch von Monaten auf nur wenige Tage verkürzen.
Cosmos3 bietet eine neue Lösung für die seit langem bestehende Herausforderung der Branche, nämlich die „Schwierigkeit der Verallgemeinerung in realen Szenarien mit begrenzten Daten und fragmentierten Simulationsframeworks“. Das Modell wurde auf einem riesigen physikalischen KI-Datensatz trainiert, der Milliarden von Texten, Bildern, Videos, Audiodaten und Bewegungstrajektorien enthält. Es kann modalitätsübergreifende Inhalte auf natürliche Weise verstehen und generieren und erreicht dabei branchenführende Genauigkeit bei der physikalischen Simulation.

Auf der technischen Seite kombiniert Cosmos3 auf innovative Weise einen „Reasoning Transformer“ mit einem „Generative Transformer“. Das Modell analysiert zunächst eingehend die Interaktionsregeln von Objekten, Bewegungszustände und räumlich-zeitliche Beziehungen, um anschließend präzise Videos zu generieren und Bewegungsbahnen vorherzusagen. Dieses Design verleiht ihm ein starkes multimodales Verständnis von Bildern und Text, die Fähigkeit, physikalische Umgebungen zu simulieren und vorherzusagen, sowie Aktionsstrategiefähigkeiten, die Robotern helfen, bestimmte Aufgaben zu erfüllen. In mehreren gängigen physikalischen KI-Benchmarks, darunter Artificial Analysis, Physics-IQ und RoboLab, zählt Cosmos3 zu den besten Open-Source-Modellen.
Um unterschiedlichen Entwicklungsstadien gerecht zu werden, hat NVIDIA mehrere Versionen veröffentlicht: Cosmos3Super, das auf das sekundäre Training von Roboter- und autonomen Fahrmodellen mit extremer Präzision ausgerichtet ist, und Cosmos3Nano, das in Sekundenschnelle eine hochwertige Videoanalyse und Aktionsinferenz durchführen kann. Beide sind nun offiziell verfügbar. Die Version Cosmos3Edge, die für Echtzeit-Inferenz auf Edge-Geräten konzipiert ist, steht ebenfalls auf der Release-Roadmap.
Parallel zur Einführung der großen Modelle hat NVIDIA gemeinsam mit weltweit führenden Modellforschungsteams und KI-Entwicklern, darunter Agile Robots, Black Forest Labs, Generalist, LTX, Runway und Skild AI, die „NVIDIA Cosmos Coalition“ gegründet. Jensen Huang, Gründer und CEO von NVIDIA, erklärte, dass mit den kontinuierlichen Durchbrüchen im multimodalen Schlussfolgern und bei Weltmodellen das transformative Zeitalter der physischen KI angebrochen sei. Die Veröffentlichung dieser hochmodernen Open-Source-Modelle wird Entwicklern auf der ganzen Welt helfen, technologische Sprünge zu erzielen und die nächste Generation intelligenter Systeme zu schaffen, die in der Lage sind, die reale Welt wahrzunehmen, zu interpretieren und zu handeln.
Verwandter Artikel
Schwedisches KI-Startup Lovable Eyes: Bewertung von 13,2 Milliarden US-Dollar nach großer Finanzierungsrunde
Während KI-gestützte Coding-Tools an Popularität gewinnen, hat das schwedische Startup Lovable eine bedeutende Finanzierungsrunde abgeschlossen. Das Unternehmen strebt danach, 3 Milliarden US-Dollar einzusammeln, was seine Bewertung potenziell auf 13
Google testet den Remy AI Agent für Gemini, da der Fokus auf die Benutzerkontrolle verlagert wird
Laut Business Insider testet Google Remy, einen neuen KI-Personalagenten für Gemini. Dieses Tool soll Aufgaben im Auftrag von Nutzern ausführen und sowohl professionelle Arbeitsabläufe als auch tägliche Routinen optimieren.Derzeit wird Remy in einer
So beheben Sie Core Web Vitals für bessere SEO-Rankings
Berichtskartenkommentare mit KI-Tools optimierenEinführungKI-Tools zur Generierung von BerichtskartenkommentarenMagic SchoolAlmanac AIChat GPTNutzung von Magic School zur Generierung von BerichtskartenkommentarenAnmeldung bei Magic SchoolAuswahl des
Empfehlungen zu verwandten Spezialthemen
Kommentare (0)
Im Bereich der physikalischen künstlichen Intelligenz wurden bedeutende Fortschritte erzielt. Am 1. Juni stellte NVIDIA offiziell Cosmos3 vor, ein grundlegendes Großmodell für physikalische KI in einer offenen Welt. Als weltweit erstes vollständig quelloffenes und multimodales großes Modell für physikalische KI nutzt es eine innovative hybride Transformer-Architektur, die visuelles Schlussfolgern, Weltgenerierung und Aktionsvorhersage in einem einzigen System vereint. Dies könnte den Trainings- und Evaluierungszyklus für physikalische KI drastisch von Monaten auf nur wenige Tage verkürzen.
Cosmos3 bietet eine neue Lösung für die seit langem bestehende Herausforderung der Branche, nämlich die „Schwierigkeit der Verallgemeinerung in realen Szenarien mit begrenzten Daten und fragmentierten Simulationsframeworks“. Das Modell wurde auf einem riesigen physikalischen KI-Datensatz trainiert, der Milliarden von Texten, Bildern, Videos, Audiodaten und Bewegungstrajektorien enthält. Es kann modalitätsübergreifende Inhalte auf natürliche Weise verstehen und generieren und erreicht dabei branchenführende Genauigkeit bei der physikalischen Simulation.

Auf der technischen Seite kombiniert Cosmos3 auf innovative Weise einen „Reasoning Transformer“ mit einem „Generative Transformer“. Das Modell analysiert zunächst eingehend die Interaktionsregeln von Objekten, Bewegungszustände und räumlich-zeitliche Beziehungen, um anschließend präzise Videos zu generieren und Bewegungsbahnen vorherzusagen. Dieses Design verleiht ihm ein starkes multimodales Verständnis von Bildern und Text, die Fähigkeit, physikalische Umgebungen zu simulieren und vorherzusagen, sowie Aktionsstrategiefähigkeiten, die Robotern helfen, bestimmte Aufgaben zu erfüllen. In mehreren gängigen physikalischen KI-Benchmarks, darunter Artificial Analysis, Physics-IQ und RoboLab, zählt Cosmos3 zu den besten Open-Source-Modellen.
Um unterschiedlichen Entwicklungsstadien gerecht zu werden, hat NVIDIA mehrere Versionen veröffentlicht: Cosmos3Super, das auf das sekundäre Training von Roboter- und autonomen Fahrmodellen mit extremer Präzision ausgerichtet ist, und Cosmos3Nano, das in Sekundenschnelle eine hochwertige Videoanalyse und Aktionsinferenz durchführen kann. Beide sind nun offiziell verfügbar. Die Version Cosmos3Edge, die für Echtzeit-Inferenz auf Edge-Geräten konzipiert ist, steht ebenfalls auf der Release-Roadmap.
Parallel zur Einführung der großen Modelle hat NVIDIA gemeinsam mit weltweit führenden Modellforschungsteams und KI-Entwicklern, darunter Agile Robots, Black Forest Labs, Generalist, LTX, Runway und Skild AI, die „NVIDIA Cosmos Coalition“ gegründet. Jensen Huang, Gründer und CEO von NVIDIA, erklärte, dass mit den kontinuierlichen Durchbrüchen im multimodalen Schlussfolgern und bei Weltmodellen das transformative Zeitalter der physischen KI angebrochen sei. Die Veröffentlichung dieser hochmodernen Open-Source-Modelle wird Entwicklern auf der ganzen Welt helfen, technologische Sprünge zu erzielen und die nächste Generation intelligenter Systeme zu schaffen, die in der Lage sind, die reale Welt wahrzunehmen, zu interpretieren und zu handeln.
Schwedisches KI-Startup Lovable Eyes: Bewertung von 13,2 Milliarden US-Dollar nach großer Finanzierungsrunde
Während KI-gestützte Coding-Tools an Popularität gewinnen, hat das schwedische Startup Lovable eine bedeutende Finanzierungsrunde abgeschlossen. Das Unternehmen strebt danach, 3 Milliarden US-Dollar einzusammeln, was seine Bewertung potenziell auf 13
So beheben Sie Core Web Vitals für bessere SEO-Rankings
Berichtskartenkommentare mit KI-Tools optimierenEinführungKI-Tools zur Generierung von BerichtskartenkommentarenMagic SchoolAlmanac AIChat GPTNutzung von Magic School zur Generierung von BerichtskartenkommentarenAnmeldung bei Magic SchoolAuswahl des











