Maison
Apple dévoile un modèle LiTo capable de convertir des images 2D en 3D, avec une précision d'éclairage améliorée de 37 %
L'équipe de recherche en IA d'Apple a récemment présenté un modèle de génération 3D révolutionnaire baptisé LiTo (Surface Light Field Tokenization). Cette technologie s'attaque à un défi majeur de la reconstruction 3D en générant des objets 3D complets et de haute fidélité, dotés d'un éclairage réaliste, à partir d'une seule image 2D.

L'innovation de LiTo repose sur un espace latent novateur et un cadre de représentation 3D unifié :
Codage efficace: il compresse les données complexes du champ lumineux de surface en ensembles vectoriels compacts, capturant mathématiquement la géométrie de l'objet et son interaction avec la lumière.
Architecture bidirectionnelle: à l'aide d'une structure encodeur-décodeur, l'encodeur extrait les caractéristiques géométriques et d'apparence fondamentales. Le décodeur reconstitue ensuite ces données, restituant avec précision des effets visuels avancés tels que les reflets spéculaires et les reflets de Fresnel.
Performances : une cohérence d'éclairage inégalée entre les vues
LiTo a été entraîné sur un ensemble de données 3D complet contenant des milliers d'objets. Les principaux résultats expérimentaux sont les suivants :
Élimination du biais directionnel: LiTo respecte strictement le système de coordonnées de la caméra, corrigeant ainsi les erreurs d'orientation courantes dans d'autres modèles.
Mesures de pointe: en matière de cohérence de l'éclairage multi-vues, LiTo surpasse le modèle de référence précédent, TRELLIS, d'environ 37 %.
Cette avancée réduit considérablement les obstacles à la création de contenu 3D de haute qualité. Elle est en passe d'offrir une génération de ressources supérieure pour les futures plateformes de réalité augmentée (RA) et d'informatique spatiale, y compris des appareils tels que le Vision Pro.
Article connexe
Les actions américaines atteignent un jalon historique alors que les géants de l'IA et de l'aérospatiale se préparent pour leur entrée boursière à la valeur du trillion de dollars.
Elon Musk, Sam Altman et Dario Amodei, trois titans du secteur technologique, s’approchent des introductions en bourse de leurs entreprises respectives. Avec SpaceX, OpenAI et Anthropic – trois géants de l’industrie dont les valorisations approchent
La startup suédoise en intelligence artificielle Lovable Eyes atteint une valorisation de 13,2 milliards de dollars après un tour de table majeur
Alors que les outils de codage alimentés par l’intelligence artificielle gagnent en popularité, la startup suédoise Lovable a levé des fonds lors d’un tour de table majeur. L’entreprise vise à collecter 3 milliards de dollars, ce qui pourrait porter
Google teste l'agent IA Remy pour Gemini à mesure que l'accent se déplace vers le contrôle utilisateur
Selon Business Insider, Google teste Remy, un nouvel agent personnel d’IA pour Gemini. Cet outil vise à exécuter des tâches au nom des utilisateurs, rationalisant ainsi les flux de travail professionnels et les routines quotidiennes.Actuellement, Re
Recommandations de sujets spéciaux liés
commentaires (1)
L'équipe de recherche en IA d'Apple a récemment présenté un modèle de génération 3D révolutionnaire baptisé LiTo (Surface Light Field Tokenization). Cette technologie s'attaque à un défi majeur de la reconstruction 3D en générant des objets 3D complets et de haute fidélité, dotés d'un éclairage réaliste, à partir d'une seule image 2D.

L'innovation de LiTo repose sur un espace latent novateur et un cadre de représentation 3D unifié :
Codage efficace: il compresse les données complexes du champ lumineux de surface en ensembles vectoriels compacts, capturant mathématiquement la géométrie de l'objet et son interaction avec la lumière.
Architecture bidirectionnelle: à l'aide d'une structure encodeur-décodeur, l'encodeur extrait les caractéristiques géométriques et d'apparence fondamentales. Le décodeur reconstitue ensuite ces données, restituant avec précision des effets visuels avancés tels que les reflets spéculaires et les reflets de Fresnel.
Performances : une cohérence d'éclairage inégalée entre les vues
LiTo a été entraîné sur un ensemble de données 3D complet contenant des milliers d'objets. Les principaux résultats expérimentaux sont les suivants :
Élimination du biais directionnel: LiTo respecte strictement le système de coordonnées de la caméra, corrigeant ainsi les erreurs d'orientation courantes dans d'autres modèles.
Mesures de pointe: en matière de cohérence de l'éclairage multi-vues, LiTo surpasse le modèle de référence précédent, TRELLIS, d'environ 37 %.
Cette avancée réduit considérablement les obstacles à la création de contenu 3D de haute qualité. Elle est en passe d'offrir une génération de ressources supérieure pour les futures plateformes de réalité augmentée (RA) et d'informatique spatiale, y compris des appareils tels que le Vision Pro.
Les actions américaines atteignent un jalon historique alors que les géants de l'IA et de l'aérospatiale se préparent pour leur entrée boursière à la valeur du trillion de dollars.
Elon Musk, Sam Altman et Dario Amodei, trois titans du secteur technologique, s’approchent des introductions en bourse de leurs entreprises respectives. Avec SpaceX, OpenAI et Anthropic – trois géants de l’industrie dont les valorisations approchent
La startup suédoise en intelligence artificielle Lovable Eyes atteint une valorisation de 13,2 milliards de dollars après un tour de table majeur
Alors que les outils de codage alimentés par l’intelligence artificielle gagnent en popularité, la startup suédoise Lovable a levé des fonds lors d’un tour de table majeur. L’entreprise vise à collecter 3 milliards de dollars, ce qui pourrait porter











