Bing Chat ChatGPT et les outils d’IA similaires se concentraient principalement sur la compréhension du texte et les réponses. L’IA de Microsoft pour Bing Chat est désormais capable de lire et de comprendre des images.
Microsoft a annoncé la recherche visuelle pour Bing Chat dans un blog récent. Visual Search permet aux utilisateurs de télécharger une image existante ou de sélectionner une image similaire sur Internet. Bing tente de comprendre cette image afin de fournir des réponses basées sur le contexte. La vidéo de démonstration de Microsoft (incluse dans l’article) montre comment quelqu’un peut télécharger une maquette de formulaire web dessinée à la main et demander à Bing de générer du code HTML et CSS pour qu’il soit fonctionnel.
L’IA de Bing Chat devient plus rapide et dispose de nouveaux boutons
Microsoft a expliqué cette nouvelle fonctionnalité dans un récent billet de blog. « Que vous soyez en vacances et que vous souhaitiez vous renseigner sur le style architectural d’un certain bâtiment ou que vous soyez à la maison et que vous cherchiez des idées pour cuisiner en fonction de ce que vous avez dans votre réfrigérateur, il vous suffit de télécharger l’image dans Bing Chat.
La capacité à détecter le contenu des images n’est pas un concept nouveau. Google Lens est capable d’identifier des personnes dans des images depuis 2017, alors que son prédécesseur Google Goggles avait une capacité beaucoup plus limitée. Microsoft utilise les fonctionnalités de détection d’images de GPT-4. Il s’agit de la même version linguistique que celle utilisée par l’édition premium de ChatGPT. ChatGPT ne prend pas encore en charge les entrées d’images, c’est donc la première fois que vous verrez cette fonctionnalité.
L’IA de Bing Chat a désormais une meilleure recherche et des limites
Visual Search est un outil formidable. Je l’ai testé avec quelques photos et j’ai été impressionné par les résultats. Bing vous donnera des réponses plus détaillées que Google Lens. En téléchargeant la photo de mon chiot noir et feu sur un tapis brun et moelleux, j’ai reçu la réponse suivante : « Cette photo est celle d’un chien de couleur sombre assis sur le tapis ». Le chien porte un collier orange avec une étiquette argentée. Le chien regarde l’appareil photo, les oreilles dressées. L’arrière-plan est composé d’un canapé blanc, avec des coussins bleus et blancs. La photo a été prise d’un angle élevé ». Le logiciel a également correctement déterminé que l’image téléchargée était de côté.
La fonction est disponible en cliquant sur l’icône de l’appareil photo dans la zone de texte de Bing Chat.
Vous n’avez plus besoin d’un compte Microsoft pour utiliser Bing Chat