Browser Operator : un assistant intégré au navigateur Opera 171

小编 ·

Browser Operator : un assistant intégré au navigateur Opera

Browser Operator est un assistant intégré directement dans le navigateur Opera qui permet aux utilisateurs d'accomplir diverses tâches de navigation web à l'aide d'instructions en langage naturel.

Browser Operator : un assistant intégré au navigateur Opera

Qu'est-ce que Browser Operator

Browser Operator est un assistant intégré au navigateur Opera, qui permet aux utilisateurs de lui confier diverses tâches de navigation web à l'aide d'instructions en langage naturel.

Browser-Operator-Idle-screen.webp

Les caractéristiques de Browser Operator

  • Axé sur la confidentialité : il ne s'appuie pas sur des captures d'écran ni sur la capture vidéo pour comprendre la session de navigation, ne stocke pas les identifiants des utilisateurs dans le cloud, fonctionne entièrement sur l'appareil local et s'appuie sur l'arbre DOM et les données de mise en page du navigateur pour obtenir des informations.

  • Rapide : au lieu de « voir » l'écran pixel par pixel ou de naviguer à la souris comme le ferait un humain, il accède la plupart du temps à l'ensemble de la page en une seule fois, sans défilement, ce qui permet de gagner du temps dans l'exécution des tâches.

  • Fonctionnement local : il s'exécute directement dans le navigateur, sans machine virtuelle ni serveur cloud ; l'historique de navigation, les informations de connexion et les paramètres des cookies des utilisateurs restent sur l'appareil local, pour une expérience fluide et privée.

  • Interaction intelligente : il peut interagir avec des éléments invisibles de la page web, comme gérer automatiquement les boîtes de dialogue contextuelles (par exemple les boîtes de dialogue d'acceptation des cookies et de vérification), facilitant ainsi l'accès au contenu des pages.

Les cas d'utilisation de Browser Operator

  • Collecte d'informations : extraire des informations de sites web, puis les remplir dans des feuilles de calcul ou des documents.

  • Réservation de billets : réserver en ligne toutes sortes de billets et d'événements.

  • Gestion des tâches : les utilisateurs peuvent à tout moment voir le déroulement des opérations de Browser Operator et, si nécessaire, prendre le relais sur la tâche.

  • Achats en ligne : prise en charge des achats en ligne, de la réservation de billets d'avion, d'hôtels, de billets pour des événements, etc. L'utilisateur décrit la tâche en langage naturel, par exemple « acheter 10 paires de chaussettes de tennis blanches Nike, taille 12 », et l'assistant effectue automatiquement le processus d'achat.

Browser Operator在线购物.webp

Le fonctionnement de Browser Operator

Browser Operator exploite les ressources locales du client du navigateur pour comprendre les instructions en langage naturel de l'utilisateur, puis traite les informations via le Composer Engine ai d'Opera afin d'accomplir les tâches. Il s'appuie sur l'arbre DOM et les données de mise en page du navigateur pour obtenir le contexte, sans dépendre de captures d'écran ni de capture vidéo, ce qui rend les opérations rapides et efficaces.

Comment utiliser Browser Operator

  1. Installer la dernière version du navigateur Opera : rendez-vous sur le site officiel d'Opera pour télécharger et installer la dernière version.

  2. Trouver Browser Operator : vous pouvez y accéder via la barre latérale d'Opera ; après avoir ouvert le navigateur, cliquez sur l'icône Browser Operator dans la barre latérale. Vous pouvez également saisir une commande spécifique ou utiliser un raccourci dans la barre d'adresse.

  3. Saisir une instruction : dans le champ de saisie de Browser Operator, saisissez la tâche que vous souhaitez exécuter, par exemple « acheter 10 paires de chaussettes de tennis blanches Nike, taille 12 », « réserver un billet en classe économique pour un vol de Pékin à Sanya demain », « acheter 3 ramettes de papier A4 chez Walmart ».

  4. Exécuter et suivre la tâche : Browser Operator commence à exécuter la tâche et l'utilisateur peut suivre sa progression en temps réel. Si la tâche nécessite la saisie d'informations sensibles (comme des informations de paiement ou de connexion), il s'arrête et laisse l'utilisateur les saisir manuellement. L'utilisateur peut à tout moment prendre le contrôle ou annuler la tâche pendant son exécution.

  5. Actions après l'achèvement de la tâche : une fois la tâche terminée, l'utilisateur peut consulter les étapes détaillées. En cas de besoin supplémentaire, comme l'annulation d'une commande erronée, il peut simplement envoyer une nouvelle instruction à Browser Operator.

Browser Operator est actuellement disponible en tant qu'aperçu d'une fonctionnalité à venir, dont le lancement officiel est prévu prochainement dans le cadre du programme de mise à jour des fonctionnalités IA d'Opera.

La vision d'Opera pour un navigateur IA

Opera a toujours été un pionnier de l'innovation dans les navigateurs, avec par exemple l'introduction des onglets, de la recherche dans la barre d'adresse, du VPN intégré et de la messagerie instantanée dans la barre latérale. En 2023, Opera a repensé son navigateur phare en plaçant l'IA au cœur de son fonctionnement. Depuis mars 2024, il teste des fonctionnalités IA expérimentales via son programme de mise à jour des fonctionnalités IA, telles qu'un LLM local, la génération d'images et les commandes d'onglets par IA. Aujourd'hui, Opera innove à nouveau dans le rôle du navigateur en devenant le premier navigateur « agentique » capable d'exécuter des tâches pour ses utilisateurs.

En lien :

Browser-use : permettre à un agent IA de naviguer, d'interagir et d'extraire des informations sur le web comme un véritable utilisateur