Visualiser un meuble dans une pièce en AR : coulisses d'Interior AI

Interior AI est né d'une promesse simple : prenez en photo n'importe quelle pièce, choisissez un style et découvrez-la réaménagée en quelques secondes. Depuis le lancement, nos utilisateurs nous posent sans cesse la même question : « C'est superbe, mais est-ce que ça rentrera vraiment dans ma pièce ? »

Une belle image générée par IA répond à la question « à quoi cela pourrait-il ressembler ? ». Elle ne répond pas à « à quoi cela ressemblera-t-il ici, dans mon espace, à mon échelle, sous ma lumière ? ». Cette seconde question exige la réalité augmentée. Voici comment nous avons ajouté la mise en scène AR et la personnalisation en direct des murs et des sols à Interior AI, et les choix techniques qui se cachent derrière.

D'un MVP FlutterFlow à une app AR native

La première version d'Interior AI, lancée en 2024, a été développée avec FlutterFlow. C'était le bon choix à l'époque. Nous avons validé l'idée rapidement, publié l'app sur l'App Store et appris ce que les gens utilisaient réellement.

Mais c'est en AR que les abstractions multiplateformes font le plus mal. La détection des plans, la reconstruction de la scène, l'occlusion et l'estimation de la lumière se trouvent au cœur des frameworks d'Apple, et elles doivent s'exécuter à chaque image sans en perdre une seule. Début 2026, nous avons donc développé deux prototypes AR ciblés pour valider les aspects les plus difficiles : l'un pour détecter les sols et en changer le revêtement, l'autre pour transformer une pièce en modèle 3D navigable. Une fois ces prototypes au point, nous avons réécrit Interior AI en natif, en Swift et SwiftUI, en y intégrant ces enseignements.

Le résultat : une seule app dans laquelle la génération par IA et l'AR ne sont pas des fonctionnalités séparées. Elles se nourrissent l'une l'autre.

La mise en scène AR : de vrais meubles, à la bonne échelle, dans votre pièce

La mise en scène AR (AR Staging) vous permet de placer des meubles en 3D dans votre pièce à travers la caméra, en taille réelle, et d'en faire le tour.

Sous le capot, elle repose sur ARKit et RealityKit. L'app détecte les surfaces horizontales comme verticales : vous pouvez ainsi poser un canapé au sol, accrocher un miroir au mur ou suspendre une lampe au plafond. Nous vous laissons choisir explicitement le type de surface plutôt que de le deviner. Lors de nos tests, la détection automatique renvoyait presque toujours « sol », même lorsque vous visiez un mur, et rien ne brise l'illusion plus vite qu'un tableau qui tombe par terre.

Quelques détails font toute la différence entre « un modèle 3D qui flotte sur mon écran » et « une chaise dans mon salon » :

• Un éclairage réel. L'app lit l'estimation de la lumière d'ARKit à chaque image et ajuste l'intensité et la direction de la lumière virtuelle pour qu'elles correspondent à votre pièce : une chaise près d'une fenêtre ne semble pas éclairée par une lampe de studio. Nous utilisons aussi la texturation de l'environnement, afin que les surfaces réfléchissantes reprennent les couleurs réelles de votre pièce.
• L'occlusion sur les iPhone équipés du LiDAR. Sur les modèles Pro dotés du LiDAR, l'app reconstruit un maillage de votre pièce. Les objets réels masquent alors les objets virtuels : la table basse que vous placez derrière votre vrai canapé disparaît bel et bien derrière lui.
• Des points de pivot corrects. Les modèles 3D proviennent de sources multiples, et leur point d'origine est souvent placé de façon étrange. Nous normalisons chaque modèle pour que les éléments de sol reposent exactement au sol, que les éléments muraux soient parfaitement plaqués contre le mur et que les éléments de plafond pendent dans le bon sens.
• Des gestes naturels. Touchez pour sélectionner, faites glisser pour déplacer sur la surface, pincez pour redimensionner, faites pivoter pour tourner, touchez deux fois pour revenir à la taille réelle.

D'où viennent les meubles

Vous pouvez puiser dans une bibliothèque sélectionnée de plus de 2 700 modèles 3D prêts à être placés : canapés, tables, chaises, étagères, luminaires et objets de décoration, regroupés selon l'endroit où ils se placent. Chaque modèle n'est téléchargé qu'une fois puis mis en cache, si bien que le deuxième placement est instantané.

Vous pouvez aussi apporter les vôtres. Image to 3D transforme une simple photo de produit en modèle 3D texturé grâce à TRELLIS, un modèle open source de conversion d'image en 3D que nous faisons tourner sur nos propres serveurs GPU : vous pouvez ainsi mettre en scène le fauteuil exact que vous lorgnez dans une boutique en ligne. Et Object Capture utilise la photogrammétrie sur l'appareil d'Apple pour numériser un objet réel autour de vous en modèle 3D, sans LiDAR.

Personnalisation AR des murs et des sols en direct

La fonctionnalité qui a le plus surpris nos utilisateurs est AR Surface Design : pointez votre téléphone vers une pièce et changez le sol et les murs en direct. Remplacez le carrelage par du chêne, peignez un mur en terracotta, essayez le marbre. Vous voyez le résultat sur les vraies surfaces à mesure que vous vous déplacez.

Détecter les surfaces sans deviner

Une approche courante consiste à exécuter un modèle de segmentation d'image sur chaque image de la caméra et à recolorer les pixels qu'il étiquette comme « mur ». C'est impressionnant en démo, mais les bords scintillent et tout se dérègle quand la caméra bouge. Nous avons plutôt opté pour une approche géométrique. ARKit détecte les plans réels de votre pièce, et nous recouvrons chacun d'eux d'une véritable surface 3D qui s'étend à mesure qu'ARKit découvre la pièce.

Le plus difficile est de déterminer quels plans correspondent réellement à votre sol et à vos murs :

• Les sols. Lorsque l'appareil sait classer les surfaces, nous n'acceptons que les plans étiquetés comme sol et rejetons les tables, les sièges et les plafonds. Lorsque la classification n'est pas disponible, nous suivons la surface horizontale la plus basse et considérons comme sol tout ce qui se trouve à quelques centimètres d'elle.
• Les murs. Un plan de travail, un réfrigérateur et un mur sont tous des surfaces verticales. Nous n'acceptons un plan vertical comme mur que s'il mesure au moins deux mètres de haut et s'il est assez large pour être un mur. Ce seuil est issu de tests en conditions réelles : un réfrigérateur mesure environ 1,8 m, et il finissait sans cesse repeint.

Cette approche fonctionne aussi sur les iPhone sans LiDAR. Le LiDAR améliore l'occlusion, mais nul besoin d'un modèle Pro pour repenser votre sol.

Des matériaux physiquement crédibles

Les couleurs, c'est simple. C'est avec les textures que l'AR paraît généralement artificielle. Chaque texture d'Interior AI est un véritable matériau physiquement réaliste (PBR), avec des cartes de couleur, de normales, de rugosité et d'occlusion ambiante. C'est pourquoi le chêne laisse apparaître son veinage sous votre lampe et le marbre poli accroche les reflets, tandis que le béton reste mat.

Nous appliquons aussi chaque texture à l'échelle réelle. Un carreau de 30 cm ressemble à un carreau de 30 cm, que vous soyez juste au-dessus ou à l'autre bout de la pièce. La bibliothèque compte actuellement 247 textures (115 pour les sols et 132 pour les murs) : bois, carrelage, marbre, enduit, brique, béton, papier peint et bien d'autres, ainsi qu'une palette de 12 couleurs. Vous pouvez aussi utiliser la photo de votre propre échantillon.

Tenir les 60 fps

Le chargement de textures haute résolution peut figer une session AR pendant une fraction de seconde, ce qui suffit à donner une impression de dysfonctionnement. Nous chargeons toutes les cartes de texture en parallèle, hors du thread principal, les appliquons ensemble en une seule étape et annulons tout chargement en cours dès que vous choisissez autre chose : c'est toujours le dernier toucher qui l'emporte.

Quand l'IA rencontre l'AR

Le plus utile n'est ni l'AR ni l'IA prise isolément. C'est la façon dont elles s'articulent :

• De la capture à la mise en scène. Prenez une capture de votre design AR et envoyez-la directement dans AI Virtual Staging pour générer une version entièrement meublée et photoréaliste.
• Des résultats spatiaux. Chaque design IA peut être affiché sous forme d'image « spatiale ». Un modèle de profondeur exécuté sur l'appareil estime la profondeur de la scène, et l'image gagne un subtil effet de parallaxe 3D lorsque vous inclinez votre téléphone. Tout s'exécute sur votre iPhone, dans le respect des réglages Réduire les animations et mode Économie d'énergie.
• La numérisation de pièce. Sur les iPhone équipés du LiDAR, Room Scan utilise RoomPlan d'Apple pour capturer votre pièce sous forme de modèle 3D, avec un plan 2D et un export PDF que vous pouvez remettre à un entrepreneur.
• Du plan à la 3D. Importez l'image d'un plan, et Interior AI le transforme en espace 3D que vous pouvez parcourir.

Et ensuite ?

Nous sommes en train de repenser l'interface et l'expérience utilisateur d'Interior AI pour rendre ces outils encore plus faciles à découvrir, et nous développons la version Android, qui arrive bientôt. Interior AI est également disponible sur le web à l'adresse interior-ai.app, où vous pouvez l'essayer gratuitement.

Si vous réaménagez une pièce, téléchargez Interior AI sur l'App Store et visualisez vos idées dans votre propre espace avant de rien acheter.

Et si vous développez un produit qui a besoin d'AR, d'IA sur l'appareil ou des deux, parlons-en. Tout ce que décrit cet article, nous le réalisons aussi pour nos clients.