J'ai fait une démonstration de chaque nouvelle fonctionnalité d'IA disponible sur les PC Copilot+, et je suis presque convaincu par le battage médiatique.
Du rappel aux effets Windows Studio, ces fonctionnalités d'IA peuvent faire à peu près tout sur un PC pour vous.
À mesure que l’IA générative évolue, les géants de la technologie développent de nouvelles solutions qui permettent de résoudre les problèmes quotidiens un peu plus rapidement et plus facilement. La dernière annonce Copilot+ PC de Microsoft présentait de telles solutions d'IA du début à la fin de la présentation, et j'ai eu l'occasion de toutes les tester.
Les nouvelles fonctionnalités d'IA, notamment Recall, Cocreator dans Paint, Live captions with live translation, Restyle in Photos et Windows Studio Effects, sont uniquement disponibles sur les PC Copilot+, qui incluent le nouveau Surface Laptop et Surface Pro, ainsi que des PC de partenaires tels que Lenovo, HP et Dell .
Mes réflexions sur les derniers outils d'IA, leurs performances et leur convivialité, et plus encore ci-dessous.
1. Rappel
À quelle fréquence avez-vous quitté un onglet, une application ou un projet auquel vous vouliez accéder par la suite mais que vous n'aviez pas trouvé ? Microsoft a dévoilé hier une nouvelle fonctionnalité « Rappel » pour les PC Copilot+ qui résout exactement ce problème, tout en allant encore plus loin.
Avec Recall, les utilisateurs peuvent localiser à peu près tout ce avec quoi ils ont déjà interagi sur leur PC - y compris des fichiers, des images, du texte, etc. - en tapant simplement ce qu'ils souhaitent localiser et en demandant à leur PC de renseigner les correspondances possibles pour eux. Vous pouvez également faire défiler les chronologies possibles pour voir ce que vous avez parcouru et où dans le passé.
La fonctionnalité fonctionne en stockant un index sémantique de votre activité localement sur votre PC. Si vous êtes comme moi, vos premières pensées ont été : « Est-ce que je veux que tout soit stocké ? » Microsoft répond à ce problème en permettant aux utilisateurs de personnaliser leurs instantanés, de supprimer les informations spécifiées, de suspendre tout suivi et de filtrer les sites Web et les applications qu'ils ne souhaitent pas enregistrer.
Un exemple qu'un membre de Microsoft m'a partagé est celui où il a demandé à son collègue s'il connaissait un autre collègue. Pour lui montrer à quoi ressemblait l'autre collègue, il a utilisé la fonction Rappel pour accéder à un appel Zoom qu'il a eu avec l'individu.
2. Sous-titres en direct avec traduction en direct
Ayant grandi dans un foyer hispanophone, je connais les barrières linguistiques et combien elles peuvent entraver la communication quotidienne. Naturellement, ce sont les sous-titres en direct pris en charge par l’IA avec fonction de traduction en direct qui m’ont le plus marqué.
Comme son nom long l'indique, la fonctionnalité peut générer des sous-titres pour tout l'audio qui transite par votre PC dans plus de 40 langues sous-titrées en anglais, le tout en temps réel. Pour la démo, j'ai parlé dans le microphone du Surface Laptop et j'ai été agréablement surpris par la précision et la rapidité de la traduction de l'espagnol vers l'anglais.
Lorsque je suis passé de l'anglais à l'espagnol, les sous-titres sont automatiquement passés d'une langue à l'autre presque instantanément avec un décalage minimal. Plus important encore, les traductions étaient toujours précises et meilleures que celles de Google Translate standard. Ne pas avoir à basculer manuellement entre les langues change la donne car, dans les conversations du monde réel, vous n’avez ni le temps ni la prévoyance pour prédire quand l’autre personne commencera à parler.
Lorsque vous l'utilisez, vous pouvez choisir si le microphone de l'ordinateur ou l'audio interne d'une vidéo, d'une chanson ou d'une réunion doit être utilisé. Cela rend la fonctionnalité adaptée à diverses applications, telles que la traduction de réunions à tous, de conversations avec des représentants du service client, etc.
3. Cocréateur en peinture
Cocreator remportera-t-il des prix pour être la fonctionnalité d'IA la plus utile jamais créée ? Probablement pas. Était-ce très amusant de tester ? Certainement. Avec Cocreator, les utilisateurs peuvent utiliser un canevas d'IA pour transformer rapidement leurs croquis en un art plus raffiné. La barre de créativité vous permet de choisir la part de l'esquisse originale que vous souhaitez conserver et la part supplémentaire que vous souhaitez générer par l'IA.
Par exemple, dans la démo, j'ai dessiné un terrible croquis d'un chiot, comme le montre l'image ci-dessus. Lorsque j'ai augmenté la créativité jusqu'à 100, Cocreator a généré une interprétation beaucoup plus mignonne du chien, en conservant certaines caractéristiques de base telles que de grands yeux perçants, des oreilles tombantes et même ma palette de couleurs.
Cette fonctionnalité m'attire plus que les générateurs d'images IA traditionnels, car le processus de maquette semble plus authentique et personnel. De plus, certains créatifs, tels que les spécialistes du marketing ou les architectes d'intérieur, peuvent bénéficier de l'ajout d'un outil comme celui-ci à leur flux de travail - lorsqu'une idée leur vient à l'esprit et qu'ils n'ont tout simplement pas le temps de tout planifier.
4. Restyler l'image dans les photos
Restyle in Photos est presque tout aussi amusant. Grâce à cette fonctionnalité, les utilisateurs peuvent modifier leurs photos avec l'IA générative, en modifiant des éléments tels que l'arrière-plan ou même l'image complète pour qu'ils correspondent à un style ou un thème spécifique.
Comme on l'a vu dans ma démo, j'ai pu changer complètement l'arrière-plan d'une photo du couple en tapant un texte descriptif avec ce que je voulais voir à la place. Comme Cocreator, les utilisateurs peuvent définir un niveau de créativité pour ajuster la quantité d'image générée avec l'IA.
Bien que Restyle in Photos ne soit pas une fonctionnalité que j'utiliserais nécessairement tous les jours, je peux la voir utile pour créer des écrans de verrouillage, des cartes de vœux, des messages saisonniers, etc.
5. Créateur d'images dans les photos
Les PC Copilot+ disposent également d'Image Creator dans Photos, qui, comme d'autres générateurs d'images, transforme une invite de texte utilisateur en image. Cependant, ce qui est impressionnant ici, c'est que l'outil s'exécute sur l'appareil plutôt que dans le cloud comme DALL-E. En conséquence, les images générées sortent plus rapidement et l’ensemble du processus se déroule localement.
Dans ma démo, j'ai demandé à Image Creator in Photos de générer 50 images et j'ai été choqué par la rapidité avec laquelle il a accompli la tâche. Comme le montre l'image ci-dessus, Image Creator s'est entièrement appuyé sur le NPU Snapdragon X Elite de Qualcomm pour générer les images, réduisant ainsi la puissance requise du GPU et du CPU de l'ordinateur portable.
6. Effets Windows Studio
Enfin, Windows Studio Effects a été amélioré pour offrir des appels vidéo améliorés, avec des fonctionnalités telles que Portrait Light qui améliore la façon dont vous ou votre arrière-plan êtes éclairés, un téléprompteur de contact visuel, qui vous aide à lire votre écran tout en gardant le contact et, mon préféré, filtres créatifs.
Bien que les filtres créatifs soient peut-être l'ajout le moins pratique aux effets Windows Studio, c'était vraiment amusant de me voir transformé en une version animée avec des détails impressionnants, comme le montre l'image ci-dessus. Le travail et les appels vidéo peuvent être ennuyeux, alors pourquoi ne pas s'amuser ?
Pour des conversations plus sérieuses, la mise au point vocale, une fonctionnalité qui utilise l'IA pour détecter et annuler les bruits autour de vous, et le flou de portrait, qui brouille votre arrière-plan lors des appels, seront d'une grande utilité.