Maison
Le framework LGTM d'Apple vient à bout des problèmes de puissance de calcul et permet un rendu 3D de qualité 4K sur le Vision Pro
Récemment, des chercheurs d'Apple et de l'Université de Hong Kong ont publié un article intitulé « Less Gaussians, More Textures: 4K Feedforward Texture Splatting », présentant un nouveau cadre appelé LGTM. Cette technologie résout les goulots d’étranglement de calcul liés au « Gaussian Splatting » 3D à haute résolution, ouvrant ainsi la voie à des écrans à haute densité de pixels tels que l’Apple Vision Pro.
Percée technique : découplage de la géométrie et de la résolution
Alors que le « Gaussian Splatting » 3D à propagation directe, largement répandu, permet de convertir rapidement des images 2D en scènes 3D, la charge de calcul augmente de manière exponentielle avec la résolution de rendu, rendant difficile le rendu 4K en temps réel.
L’innovation principaledu cadre LGTM réside dans le découplage de la complexité géométrique et de la résolution de rendu. Au lieu d’augmenter le nombre de fonctions gaussiennes, il améliore la qualité de l’image grâce à une approche en deux étapes :
Apprentissage de la géométrie : le modèle apprend d’abord la structure de base de la scène à partir d’images en basse résolution et la compare à une référence en haute résolution, garantissant ainsi que le squelette géométrique est homogène et exempt de défauts aux résolutions 2K/4K.
Superposition de textures : un réseau d’apparence spécialisé convertit les détails fins des images haute résolution en textures, qui sont ensuite superposées sur des formes géométriques simples.

Les atouts de l’Apple Vision Pro
Les deux écrans de l’Apple Vision Pro comptent environ 23 millions de pixels, chaque œil dépassant la résolution 4K. Les modèles SPLAT traditionnels à propagation directe se heurtent souvent à des limites de performance lors du traitement de pixels d’une telle densité. LGTM permet d’améliorer les systèmes existants (tels que NoPoSplat, DepthSplat, etc.), permettant ainsi aux appareils de générer des textures plus détaillées, du texte plus net et des environnements immersifs plus réalistes tout en conservant une faible charge de calcul.
La page de démonstration du projet montre que LGTM repousse considérablement les limites visuelles de la reconstruction 3D de type feedforward. Cela laisse présager que les futurs utilisateurs de visionOS pourraient bénéficier d’un réalisme sans précédent dans des espaces virtuels générés en temps réel.
Article connexe
Les actions américaines atteignent un jalon historique alors que les géants de l'IA et de l'aérospatiale se préparent pour leur entrée boursière à la valeur du trillion de dollars.
Elon Musk, Sam Altman et Dario Amodei, trois titans du secteur technologique, s’approchent des introductions en bourse de leurs entreprises respectives. Avec SpaceX, OpenAI et Anthropic – trois géants de l’industrie dont les valorisations approchent
La startup suédoise en intelligence artificielle Lovable Eyes atteint une valorisation de 13,2 milliards de dollars après un tour de table majeur
Alors que les outils de codage alimentés par l’intelligence artificielle gagnent en popularité, la startup suédoise Lovable a levé des fonds lors d’un tour de table majeur. L’entreprise vise à collecter 3 milliards de dollars, ce qui pourrait porter
Google teste l'agent IA Remy pour Gemini à mesure que l'accent se déplace vers le contrôle utilisateur
Selon Business Insider, Google teste Remy, un nouvel agent personnel d’IA pour Gemini. Cet outil vise à exécuter des tâches au nom des utilisateurs, rationalisant ainsi les flux de travail professionnels et les routines quotidiennes.Actuellement, Re
Recommandations de sujets spéciaux liés
commentaires (1)
Finally, someone addressed the compute anxiety on Vision Pro! 🤯 LGTM sounds like a game-changer for 3D rendering. I've been waiting for something that doesn't make my device melt during heavy tasks. If this actually delivers 4K-grade results without the lag, Apple might finally win the spatial computing race. Can't wait to test it out! 🚀
Récemment, des chercheurs d'Apple et de l'Université de Hong Kong ont publié un article intitulé « Less Gaussians, More Textures: 4K Feedforward Texture Splatting », présentant un nouveau cadre appelé LGTM. Cette technologie résout les goulots d’étranglement de calcul liés au « Gaussian Splatting » 3D à haute résolution, ouvrant ainsi la voie à des écrans à haute densité de pixels tels que l’Apple Vision Pro.
Percée technique : découplage de la géométrie et de la résolution
Alors que le « Gaussian Splatting » 3D à propagation directe, largement répandu, permet de convertir rapidement des images 2D en scènes 3D, la charge de calcul augmente de manière exponentielle avec la résolution de rendu, rendant difficile le rendu 4K en temps réel.
L’innovation principale
Apprentissage de la géométrie : le modèle apprend d’abord la structure de base de la scène à partir d’images en basse résolution et la compare à une référence en haute résolution, garantissant ainsi que le squelette géométrique est homogène et exempt de défauts aux résolutions 2K/4K.
Superposition de textures : un réseau d’apparence spécialisé convertit les détails fins des images haute résolution en textures, qui sont ensuite superposées sur des formes géométriques simples.
Les atouts de l’Apple Vision Pro
Les deux écrans de l’Apple Vision Pro comptent environ 23 millions de pixels, chaque œil dépassant la résolution 4K. Les modèles
Les actions américaines atteignent un jalon historique alors que les géants de l'IA et de l'aérospatiale se préparent pour leur entrée boursière à la valeur du trillion de dollars.
Elon Musk, Sam Altman et Dario Amodei, trois titans du secteur technologique, s’approchent des introductions en bourse de leurs entreprises respectives. Avec SpaceX, OpenAI et Anthropic – trois géants de l’industrie dont les valorisations approchent
La startup suédoise en intelligence artificielle Lovable Eyes atteint une valorisation de 13,2 milliards de dollars après un tour de table majeur
Alors que les outils de codage alimentés par l’intelligence artificielle gagnent en popularité, la startup suédoise Lovable a levé des fonds lors d’un tour de table majeur. L’entreprise vise à collecter 3 milliards de dollars, ce qui pourrait porter
Finally, someone addressed the compute anxiety on Vision Pro! 🤯 LGTM sounds like a game-changer for 3D rendering. I've been waiting for something that doesn't make my device melt during heavy tasks. If this actually delivers 4K-grade results without the lag, Apple might finally win the spatial computing race. Can't wait to test it out! 🚀











