Microsoft Build 2024 : Windows Recall, Cocreate AI, Live captions et autres fonctionnalités d'IA annoncées

Ici, nous allons expliquer toutes les nouvelles fonctionnalités alimentées par IA que Microsoft a annoncé comme faisant partie de l'ensemble du Copilot+ PC avec Windows 11.

Windows 10 a fait ses débuts avec une fonctionnalité appelée Timeline. La fonctionnalité visait à garder une trace de tout ce que les utilisateurs faisaient sur leurs PCs quelques jours auparavant. Que vous ayez accedé à un site web, aux applications, aux fichiers, bref tout ce que vous faites sur votre Pc était enregistré.

Seulement, Microsoft a amélioré la fonctionnalité pour la ramener en tant que "Recall" avec la puissance de l'IA qui enregistre tout ce que Timeline faisait mais mieux et plus efficacement.

A quoi sert Recall de Microsoft ?

Recall est une fonctionnalité puissance conçue pour vous aider à trouver et à revoir tout ce que les utilisateurs ont vu ou fait sur leur PC. Il agit comme une mémoire photographique, capturant et organisant vos activités numériques afin que vous puissiez facilement localiser différentes informations sans se souvenir des emplacements ou des détails des fichiers exacts.

Recall enregistre en continu votre écran, capturant des instantanés de vos activités sur toutes les applications, sites Web, documents, et plus encore. Il construit un indice sémantique personnel basé sur vos interactions, qui est stockée localement sur votre appareil pour vous assurer de la confidentialité. Vous pouvez interagir avec Recall en utilisant le langage naturel, et il recherchera vos données enregistrées et trouver ce dont vous avez besoin.

Cocreator Ai dans Paint et Photos

Microsoft a également annocé l'introduction d'une nouvelle fonctionnalité basée sur l'Intelligence Artificielle (IA) dans ses produits phares qui s'occupent des images notamment MS Paint et MS Photos. Cette nouvelle fonctionnalité est nommée Cocreator.

COCreator permet aux utilisateurs de combiner des traits d'encre avec des invites de texte pour générer des images en temps réel. Tirant parti des unités de traitement neuronal (UTN) et des modèles de langue locale, il itère sur l'œuvre d'art, fournissant des sorties de haute qualité avec de puissants algorithmes basés sur la diffusion. Les utilisateurs peuvent ajuster le curseur de créativité pour aller du littéral aux styles expressifs et continuer à affiner leur œuvre sans effort.

Restyle Image dans l'application Photos

Cette nouvelle fonctionnalité d'IA facilite l'édition de photos et plus simple pour les utilisateurs en leur permettant d'appliquer des styles prédéfinis tels que le cyberpunk ou l'argile à leurs photos. Les utilisateurs peuvent transformer des arrière-plans, des premières ou des images entières et obtenir une inspiration visuelle pour leurs projets créatifs. Sur Copilot + PCS, les utilisateurs peuvent générer, affiner et enregistrer rapidement des images sans fin.

DaVinci Resolve Studio et CapCut enhancements

Microsoft a annoncé que DaVinci Resolve Studio propose désormais un masque magique accéléré par le NPU pour appliquer des effets visuels, tandis que Capcut utilise la découpe automatique pour la suppression instantanée de l'arrière-plan. Ces améliorations rationalisent les processus d'édition vidéo et de création de contenu.

Adaptive input et Annotation improvements

Cephable introduit des commandes d'entrée adaptatives plus rapides en utilisant des mouvements de tête ou des expressions faciales, grâce aux pipelines de caméra NPOPOWERED.

LiquidText fournit des annotations d'IA plus intelligentes sur les dispositifs, garantissant la confidentialité des données en conservant le traitement local.

Live Captions offre une traduction en temps réel

Cette fonctionnalité traduit tout audio passant par un PC en sous-titres en anglais en temps réel, prenant en charge plus de 40 langues et travaillant hors ligne. Il est disponible sur tous les PC Copilot +, assurant l'accessibilité et la compréhension dans les communications mondiales.

Windows Studio effects

Microsoft a annoncé de nouvelles fonctionnalités et améliorations, notamment Portrait Light pour un meilleur éclairage, des filtres créatifs comme :

• Illustré,
• Aquarelle, 
• Téléprompteur de contact visuel,
• des améliorations pour la concentration vocale, 
• le flou des images,
• etc.

 Notons que toutes ces fonctionnalités ont été ajoutées dans le but d'améliorer la qualité des appels vidéo.

Copilot Ai Companion

Chaque PC Copilot + comprend Copilot Companion, un agent AI avancé qui propose des conversations vocales naturelles en utilisant les derniers modèles d'IA, y compris GPT-4O. Cet assistant AI personnel est conçu pour la facilité d'utilisation, avec une clé de copilote dédiée sur les claviers pour un accès rapide.