Google déploie un nouvel outil appelé "Select from screen" pour l'assistant Gemini dans le navigateur Chrome. Cette fonctionnalité permet aux utilisateurs d'ajouter rapidement du texte ou des images de l'onglet actif directement dans la zone de question de Gemini, sans avoir à faire une capture d'écran manuelle ou à copier-coller. Lorsque l'utilisateur clique sur l'outil, l'onglet actif est surligné, puis il peut sélectionner la zone que Gemini doit analyser. Cette fonction fait partie de la mise à jour de Chrome 149 et est déployée progressivement. Si l'option n'est pas encore visible, un redémarrage du navigateur suffit à l'activer.
Parallèlement, Google annonce que le modèle Gemini 3.5 Flash intègre désormais une capacité d'utilisation de l'ordinateur. Les développeurs peuvent y accéder via l'API Gemini, permettant au modèle de contrôler directement l'interface écran pour effectuer des analyses. Une démonstration montre que 3.5 Flash peut ouvrir automatiquement l'application Gemini, parcourir ses fonctionnalités et renvoyer une liste organisée de celles-ci. Cette avancée signifie que l'assistant IA ne se limite plus à comprendre du texte ou des images, mais peut "manipuler" des logiciels comme un humain, ouvrant de nouvelles possibilités pour les tests automatisés, les agents intelligents et les scénarios RPA. Le modèle est disponible dès maintenant dans l'API Gemini.
