3 fonctionnalités d'IA à venir sur les PC Copilot+ que j'aurais aimé voir sur mon MacBook
Microsoft a tout dévoilé aujourd'hui, depuis une nouvelle expérience Copilot AI jusqu'aux nouveaux appareils Surface. Voici toutes les fonctionnalités d’IA pour les PC Copilot+.
Microsoft a lancé aujourd'hui l'événement Build with a Surface, qui a lancé une nouvelle catégorie informatique appelée Copilot+ PC. Cette nouvelle gamme de PC à intelligence artificielle offrira aux utilisateurs une expérience d'IA améliorée dans leur flux de travail quotidien, avec de nouvelles fonctionnalités pour aider les utilisateurs à générer rapidement du contenu, à obtenir des sous-titres et des traductions en direct et à trouver tout ce qu'ils ont vu sur leur PC avec leur voix.
Ces fonctionnalités seront disponibles pour les utilisateurs de Copilot+ PC en appuyant simplement sur un bouton... littéralement. Les PC Copilot+ de Microsoft, comme tous les nouveaux systèmes Windows sortis au cours des derniers mois, auront chacun un bouton Copilot dédié sur le clavier.
1. GPT-4o arrive dans Copilot sur les PC Copilot+
Microsoft a annoncé que GPT-4o, le dernier modèle d'IA d'OpenAI, arriverait bientôt sur Copilot. Les capacités textuelles, visuelles et audio de GPT-4o seront disponibles via Copilot sur les derniers PC. Microsoft a présenté l'exemple d'un joueur de Minecraft demandant à Copilot comment fabriquer une épée, le robot étant capable de voir ce qu'il y avait sur l'écran de l'utilisateur lorsque son personnage se déplaçait.
"Je vois cette table de fabrication devant vous, idéale pour fabriquer une épée. Vous aurez besoin de quelques matériaux. Pouvez-vous ouvrir votre inventaire ? Appuyez simplement sur E sur votre clavier", a expliqué Copilot à l'utilisateur. Le robot a ensuite expliqué les ressources nécessaires pour fabriquer une épée, comment échapper à un zombie dans le jeu et comment créer rapidement un abri. Bien sûr, les cas d'utilisation vont au-delà du jeu, mais c'est un exemple de la façon dont le modèle d'IA multimodal fonctionne avec le matériel amélioré des PC Copilot+.
2. « Rappel » rend la recherche beaucoup plus intuitive
Le rappel est une fonctionnalité qui enregistre votre écran et utilise l'IA pour indexer toute information afin que vous puissiez facilement la rechercher plus tard. Au lieu de saisir un mot-clé dans une barre de recherche pour trouver un e-mail, un fichier ou un site Web, les utilisateurs peuvent simplement demander à Recall de « trouver ce collier en forme de cœur violet que j'ai vu en ligne la semaine dernière » avec leur voix et demander à Recall d'extraire intelligemment le site Web de leur historique de navigation. C'est effrayant mais magiquement utile.
Cette fonctionnalité enregistre le contenu capturé sur l'appareil, de sorte que les enregistrements d'écran des utilisateurs ne seront à aucun moment envoyés vers le cloud. Les utilisateurs pourront également ajuster leurs paramètres pour désactiver la capture de certaines choses et modifier, afficher et supprimer des enregistrements. Microsoft déclare qu'il n'utilisera pas les données capturées pour former des modèles d'IA.
3. Une nouvelle expérience Copilot
Outre l'utilisation de la touche Copilot dédiée, la nouvelle expérience de l'assistant AI a changé avec l'ajout du glisser-déposer. Désormais, les utilisateurs peuvent glisser et déposer des éléments dans la fenêtre Copilot et demander à l'IA de leur en dire plus. Par exemple, si vous voyez une photo historique en ligne, vous pouvez la faire glisser et la déposer sur la fenêtre Copilot et demander au robot de vous donner plus de contexte sur ce qui se passait sur cette photo et sur qui y figure.
Le compagnon Copilot AI bénéficiera également d'une expérience d'application plus flexible, avec des fenêtres redimensionnables qui permettent aux utilisateurs de l'afficher sur le côté ou de l'agrandir pour l'afficher en plein écran.
Autres fonctionnalités d'IA dans les PC Copilot+
- Cocreator in Paint : permet aux utilisateurs de générer et d'affiner des images en temps quasi réel avec cinq modèles d'apprentissage automatique (ML) différents exécutés localement en tandem dans le NPU. La fonctionnalité Cocreator dispose également d'un curseur de créativité pour différentes sorties artistiques.
- Sous-titres en direct avec traduction en direct : cette fonctionnalité fournit des sous-titres en anglais cohérents en temps réel pour tout audio transitant par vos PC Copilot+ sur toutes les applications et plates-formes vidéo, y compris Microsoft Teams, Zoom, Chrome, Netflix, etc. . Il prend en charge plus de 40 langues et fonctionne sur l'appareil, même hors ligne.
- L'application Photos est relookée : l'application Photos bénéficie d'une nouvelle option Restyler l'image pour transformer facilement des images et des vidéos avec l'IA, notamment en supprimant l'arrière-plan des vidéos, en concevant un nouvel arrière-plan ou un nouveau premier plan, en générant de nouvelles images ou en en utilisant des filtres prédéfinis, tous sur l'appareil.
- Effets Windows Studio : les nouveaux PC Copilot+ incluront une fonctionnalité d'amélioration basée sur l'IA pour la qualité visuelle et audio pendant les appels vidéo et les enregistrements. Certaines nouvelles fonctionnalités incluent le cadrage automatique, le flou de portrait, la mise au point vocale et les filtres créatifs.