Intelligence Artificielle

Vous pouvez désormais télécharger des images sur Google Bard; Voici quelques exemples sympas

Juil 5, 2024

Google a progressivement amélioré Bard et ajouté de nouvelles fonctionnalités toutes les quelques semaines, amenant ses capacités à égalité avec ChatGPT. Désormais, la société a ajouté la possibilité de télécharger des images sur Bard pour une expérience beaucoup plus large que le texte. Ne vous y trompez pas, Google Bard est toujours un grand modèle de langage contenant uniquement du texte. Cependant, le géant de la recherche a intégré Google Lens, la recherche d'images inversée et quelques systèmes VQA (Visual Question Answering) pour donner à Bard l'impression d'être un modèle multimodal. Néanmoins, la capacité de vision actuelle de Bard est en effet quelque peu surprenante, et nous l'avons testée ci-dessous pour en savoir plus sur ses capacités. Sur cette note, jetons un coup d'œil à quelques exemples intéressants de téléchargements d'images dans Google Bard.

1. Extraire des textes à partir d'images

  • Une capture d'écran de la conversation de Google Bard
  • Une capture d'écran de Google Bard effectuant une OCR

La meilleure utilité de la capacité de gestion d'image de Bard est que vous pouvez désormais télécharger une image en cliquant sur le bouton (+) bouton. Il peut ensuite récupérer rapidement les textes des téléchargements. Google Barde alors effectue automatiquement l'OCR et fait un travail précis. Cela étant dit, malgré une longue liste de langues prises en charge dans Bard, la fonctionnalité OCR ne fonctionne actuellement que pour la langue anglaise. J'ai essayé plusieurs langues internationales et régionales, mais je n'ai pas réussi à récupérer les textes des images numérisées. Néanmoins, pour extraire rapidement du texte à partir d’images, Bard peut être très utile.

2. Extraire des tableaux avec un formatage intact

  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas
  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas

Nous avons tous du mal à extraire des tableaux d'images ou de documents numérisés. Cependant, Google Bard peut facilement extraire des tableaux avec le formatage intact. En fait, vous pouvez exporter le tableau vers Google Sheets ainsi que d'effectuer d'autres modifications ou analyses de données. À quel point cela est cool? Cela dit, actuellement, Bard hallucine beaucoup et, dans certains cas, il remplit les cellules avec les mauvaises données, alors assurez-vous de les vérifier avant de l'exporter.

Lire  Comment discuter vocalement avec ChatGPT sur les téléphones Android

3. Générer du code pour les sites Web/applications à l'aide de maquettes

Pour présenter la fonctionnalité multimodalité de GPT-4, en mars 2023, OpenAI a démontré comment son modèle j'ai compris la note griffonnée et a rapidement créé une maquette du site Web à partir d'un morceau de papier. Bien que la fonctionnalité multimodale ne soit pas encore disponible dans GPT-4, Google Bard est capable de générer du code qui correspond à la maquette. Garde en tête que Bard n'est pas un modèle multimodal mais utilise la segmentation d'image via Google Lens pour comprendre l'image. Néanmoins, Bard nous a surpris par ses résultats.

  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas
  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas
  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas
  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas

J'ai téléchargé une capture d'écran de la page de destination de Facebook et elle a rapidement généré code en HTML et CSS cela ressemblait un peu. J'ai également téléchargé une image d'un site Web simple que j'ai dessiné sur papier, et Google Bard a fait un assez bon travail en le recréant. De plus, vous pouvez également utiliser des méthodes similaires pour recréer des interfaces utilisateur pour les applications pour smartphones et autres sites Web.

4. Google Bard peut expliquer les images

Google Bard est doué pour expliquer les images et résumer ce qui s'y passe. Vous pouvez télécharger des images obscures, et cela peut produire des informations fiables rapidement. J'ai téléchargé une image de mauvaise qualité d'un mécanisme biologique et elle l'a correctement identifié comme étant la mitose cellulaire. Il explique en outre le processus étape par étape.

  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas
  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas
  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas

Dans un autre exemple, je téléchargé un graphique, et il a correctement compris l'image et expliqué les données. Il a même créé un tableau des points de données afin que je puisse travailler dessus dans Google Sheets. En particulier pour les étudiants, Bard peut être utile pour comprendre les concepts scientifiques et d’autres sujets. Vous pouvez simplement télécharger une image et en parler à Bard.

Lire  15 meilleures applications d'IA pour Android et iOS (gratuites et payantes)

5. Obtenez des informations nutritionnelles à partir d’images

calculer les calories alimentaires totales à l'aide de Google Bard

Grâce à la capacité de gestion d'images de Bard, vous pouvez obtenir le valeurs nutritionnelles des aliments. Téléchargez simplement l'image de la nourriture dans votre assiette et elle sera calculer la calorie totale en quelques secondes. Cela peut être extrêmement utile pour les personnes qui suivent un régime alimentaire réglementé.

Lors de mes tests, il n'a pas pu évaluer la taille des portions, mais a donné des exemples afin que vous puissiez calculer vous-même l'apport calorique total. Il semble que Google utilise la segmentation d'images pour catégoriser les produits alimentaires et fournir des informations nutritionnelles.

6. Improviser des recettes culinaires

  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas
  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas

Un autre excellent cas d'utilisation consiste à ajouter l'image d'aliments crus et à demander à Google Bard de proposer diverses recettes alimentaires. Vous pouvez également ajouter des images d'aliments dans votre réfrigérateur, et cela créera sans effort recettes personnalisées pour toi. De plus, vous pouvez demander à Bard des cuisines particulières de diverses régions du monde. Et si vous suivez un régime, vous pouvez demander à Google Bard de créer des recettes alimentaires sans gras et faibles en calories pour vous rassasier.

7. Résoudre des questions mathématiques

  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas
  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas

Vous pouvez également utiliser Google Bard pour résoudre des questions mathématiques. Vous pouvez télécharger une image de vos problèmes de mathématiques sur Bard, et elle sera essaie de résoudre la question pour toi. Lors de mes tests, l'approche de Bard était correcte, mais en raison de problèmes de notation, elle n'a abouti qu'à de mauvaises réponses. Je pense qu'il faudra une mise à jour de son système de vision pour rendre Bard plus adapté à la gestion des notations et des questions mathématiques.

8. Expliquez les mèmes et les blagues

Google Bard peut également expliquer les mèmes et les blagues. Vous pouvez télécharger des images de mèmes et de dessins animés amusants et demande à Bard ce qui est drôle à peu près la même chose, et il fournira sa propre interprétation. J'ai téléchargé la même image que celle présentée par OpenAI lors du dévoilement de GPT-4, et Bard a bien compris l'absurdité hilarante derrière l'image.

  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas
  • Vous pouvez désormais télécharger des images sur Google Bard;  Voici quelques exemples sympas

Dans un autre cas, j'ai téléchargé une image sur Google Bard de The New Yorker Cartoons et lui ai demandé de explique la blague. Cependant, cette fois, il expliquait simplement la scène et ne pouvait pas dire pourquoi l'image était drôle. Il manquait complètement l’expression de courrier électronique couramment utilisée sur les lieux de travail. Je vous suggère d'essayer Google Bard vous-même et de vérifier s'il est suffisamment intelligent pour comprendre l'esprit et l'humour.

Lire  Google Bard AI est désormais ouvert à tous; Essayez-le dès maintenant!

9. Traduire les équations en LaTeX

Ce n'est un secret pour personne que de nombreuses personnes ont du mal à écrire avec LaTeX et préfèrent utiliser des traitements de texte. Cependant, pour les articles de recherche scientifique et les écrits universitaires, LaTeX est requis pour ajouter des équations complexes et une composition de haute qualité. Dans un tel scénario, Google Bard peut être utile. Vous pouvez ajouter des images d'équations et Bard peut les traduire en code LaTeX. C'est incroyable, non ? Alors, allez-y et traduisez les équations en code LaTeX en un rien de temps.

10. Téléchargez des rapports médicaux et posez des questions

Enfin, vous pouvez télécharger des images de vos rapports médicaux et les numériser sur Google Bard. Vous pouvez alors poser des questions médicales en fonction de celles-ci. Certains médecins sur Twitter ont montré que Bard était plutôt correct pour le diagnostic différentiel. Il peut également aider les utilisateurs à comprendre leur santé et à donner un sens aux rapports médicaux.

Cela dit, gardez à l'esprit que Google Bard fonctionne sur un LLM à usage général appelé PaLM 2. Le géant de la recherche a développé un modèle Med-PaLM 2 distinct pour le domaine médical, qui est assez précis et avancé, mais il n'est pas encore disponible pour les utilisateurs généraux. Je recommanderai donc aux utilisateurs de rester à l’écart de tout type d’autodiagnostic utilisant Bard. Il est fortement recommandé de consulter un médecin. Et enfin, si vous téléchargez vos rapports médicaux personnels sur Bard, assurez-vous de supprimer les discussions Bard pour protéger votre vie privée.

Laisser un Commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *