Pas besoin d’être expert pour se lancer dans la création 3D, Apple dévoile deux IA capables de transformer radicalement votre manière de créer.
Depuis iOS 18.4, les Français découvrent progressivement Apple Intelligence sur leurs iPhones mis à jour. Le déploiement tardif a suscité des critiques, notamment sur la comparaison avec ChatGPT ou Gemini. Pourtant, Apple ne vise pas le bavardage, mais l’efficacité dans des domaines concrets.
Deux nouvelles recherches publiées sur son blog Machine Learning changent la donne. Matrix3D et StreamBridge pourraient faire de votre iPhone ou Vision Pro de véritables outils de création.
Matrix3D : créer un objet 3D avec seulement trois photos
La méthode classique de modélisation 3D nécessite des dizaines, voire des centaines de clichés. Apple casse les codes avec Matrix3D, développé avec les universités de Nanjing et Hong Kong. Ce modèle crée des objets 3D à partir de deux ou trois images seulement. Il combine plusieurs étapes complexes comme l’analyse d’angle et la profondeur en un seul processus. L’apprentissage masqué permet au modèle de combler les zones absentes avec cohérence. Résultat : une 3D nette et fidèle sans longue préparation.
Matrix3D fonctionne grâce à une technique originale : il apprend en complétant des morceaux de données manquantes. Apple cache volontairement certaines parties des images pour forcer l’IA à prédire les zones absentes. Cela lui permet d’acquérir une compréhension plus abstraite des formes et des volumes. Le modèle devient ainsi plus flexible, même avec très peu d’images en entrée. Cette méthode pourrait alimenter des outils créatifs sur le Vision Pro ou l’iPad Pro dans les mois à venir.
StreamBridge : une IA vidéo qui vous assiste en direct
Pendant que Matrix3D s’occupe des objets, StreamBridge se penche sur les vidéos en temps réel. Contrairement aux IA classiques qui analysent des vidéos terminées, ce modèle travaille directement sur le flux. Il comprend ce qui se passe à l’écran et répond à vos questions instantanément. Vous pouvez lui demander : « C’est quel monument ? », et il répond sans délai.
Apple pousse encore plus loin l’interaction en rendant l’IA proactive. Dans une démonstration, StreamBridge aide un utilisateur à dessiner en temps réel. L’IA analyse ses gestes et propose des conseils sans même être sollicitée. Cela pourrait transformer l’usage de Siri ou de l’app Appareil photo. Apple laisse entendre que cette technologie rejoindra bientôt l’écosystème d’Apple Intelligence.
Deux IA discrètes, mais prometteuses pour le futur d’Apple
Matrix3D et StreamBridge ne sont pas encore sur tous les iPhones, mais leur potentiel intrigue déjà. Avec ces outils pensés pour la création 3D et l’analyse vidéo, Apple emprunte un chemin plus discret mais redoutablement efficace. Moins spectaculaire que la conversation avec un chatbot, mais beaucoup plus utile au quotidien. Et si Apple n’avait pas tant de retard qu’on le pensait dans l’IA ?
- Partager l'article :