Microsoft a récemment lancé en avant-première Copilot Vision, un outil d’intelligence artificielle conçu pour offrir une compréhension approfondie des pages web visitées à travers le navigateur Microsoft Edge.
Disponible uniquement aux États-Unis pour le moment, cette fonctionnalité expérimentale est accessible via Copilot Labs, un programme réservé aux abonnés de l’offre Copilot Pro à 20 dollars par mois.
L’objectif principal de Copilot Vision est de permettre aux utilisateurs d’interagir directement avec le contenu qu’ils consultent. Par exemple, il peut répondre à des questions spécifiques comme « Quelle est la recette de cette lasagne ? » en analysant le texte et les images d’une page web. En outre, l’outil propose des fonctionnalités telles que la traduction de texte, la synthèse d’informations et la mise en évidence d’offres promotionnelles dans des catalogues en ligne.
Lire aussi :
- Comment les agents IA comme Agentforce transforment-ils la productivité et les stratégies commerciales des entreprises ?
- Quels services, en dehors de Spotify, proposent des rétrospectives personnalisées et comment se démarquent-ils ?
Des fonctionnalités conçues pour faciliter le quotidien
Copilot Vision ne se limite pas à des tâches basiques. Il peut également se transformer en assistant de jeu, offrant des conseils en temps réel lors de parties sur des plateformes comme Chess.com. Microsoft décrit cet outil comme un compagnon virtuel, capable de lire et de comprendre les pages visitées, prêt à aider l’utilisateur à résoudre des problèmes directement dans le coin inférieur du navigateur Edge.
Pour garantir une meilleure expérience utilisateur tout en respectant la confidentialité, Microsoft affirme que les données traitées par Copilot Vision – qu’il s’agisse de texte, d’images ou d’audio – sont supprimées à la fin de chaque session. De plus, ces données ne sont pas utilisées pour entraîner les modèles d’IA de l’entreprise.
Une approche prudente face aux défis éthiques et légaux
Copilot Vision est soumis à des restrictions. L’outil ne fonctionne pas sur les contenus payants ou considérés comme « sensibles », tels que les sites de violence graphique ou de pornographie. Microsoft adopte une approche mesurée en limitant son utilisation à une liste approuvée de sites populaires, une mesure visant à éviter des litiges comme celui en cours avec le New York Times.
Par ailleurs, pour répondre aux préoccupations des éditeurs de contenu concernant l’utilisation non autorisée de leurs données, Microsoft affirme que Copilot Vision respecte les contrôles des sites web conçus pour bloquer les outils d’IA. Cependant, l’entreprise reste vague sur les standards exacts qu’elle applique.
Quels sont les nouveaux ajouts de la fonctionnalité Apple Music Replay en 2024 ?
Vers une expérience web enrichie
En collaborant avec des éditeurs tiers et en prenant en compte leurs retours, Microsoft espère affiner Copilot Vision pour en faire un outil à la fois utile et respectueux des droits des éditeurs. Bien qu’il reste des défis à surmonter, cette innovation pourrait révolutionner la manière dont les utilisateurs interagissent avec les pages web, transformant leur navigation en une expérience plus intuitive et enrichissante.
