ChatGPT peut lire des plans d'architecture
ChatGPT vision peut lire mes plans !
J’ai fait une vidéo YouTube en Français que je t’encourage à regarder.
ChatGPT vision est une nouvelle fonctionnalité de ChatGPT qui permet de “lire” les images, et donc de pouvoir discuter avec nous, à propos de nos plans, coupes, 3D et autres croquis d’architecture.
Pour en bénéficier, tu as besoin pour l’instant d’avoir la version payante de chat GTP et alors un bouton mettre en ligne apparaîtra sur la gauche de l’invitation de prompt.
Tu peux lui partager différents types de fichiers comme des PDF, des CSV ou bien des images.
Dans cette vidéo, j’ai testé l’outil sur différents exemples concret du monde de l’architecture :
- Commenter un plan
- Reconnaître des éléments sur une image
- Lire les labels de textes
- Faire la relation entre un plan et des données externes (normes de construction par exemple)
La conclusion partielle que je peux en tirer, est que c’est utile, mais que Google Vision à des limites pour l’instant.
Par exemple, je ne pense pas que Chat-GPT puisse faire encore des calculs géométriques complexes. Qui serait utile par exemple pour évaluer si le plan respecte les normes handicapées.
Je ne pense pas qu’il puisse comprendre l’échelle d’un dessin, même si une échelle figure sur le plan.
De même, pour avoir des infos tierces sur un plan urbain, cela demanderait, qu’il interroge des bases de données / API externes. Ce qu’il ne fait pas encore.
Il est néanmoins possible de programmer une application qui le fasse, en utilisant l’API d'open API.
En revanche, il voit le plan, peut décrire ce qu’il contient.
Dans le cas d’une photo de chantier, en faisant un zoom suffisant, il peut certainement répondre à des questions générales. Pas encore capable de juger de la qualité d’un revêtement !
Pour lire les textes compris dans les images, technique qui existe depuis longtemps sous le nom de OCR, il se débrouille très bien.
Et donc c’est tout à fait possible de prendre une photo qui contient beaucoup de texte, le titre sur les livres d’une bibliothèque par exemple. Et il va l’identifier et le déchiffrer sans problème et lister tous les livres, sous forme de tableau si on lui demande.
Tu peux essayer de prendre les livres de ta bibliothèque pour qu’il en fasse la liste afin de mettre en base de donnée ta bibliothèque d’architecture. Il va sans doute faire du bon travail !