Hier, dans sa mise à jour de printemps, OpenAI a lancé une application Mac entièrement native pour ChatGPT et a également lancé son nouveau modèle phare, GPT-4o. Les démos et l’enthousiasme remarquables ne manquaient pas, en particulier pour les utilisateurs d’Apple réfléchissant à la rumeur d’un partenariat Apple-OpenAI pour iOS 18.
Un élément clé qui a retenu mon intérêt pour le vidéo complète de l’événement était une prochaine fonctionnalité de l’application ChatGPT qui a été présentée en démonstration mais sans aucun détail réel partagé. Quelle fonctionnalité ? La possibilité pour ChatGPT de voir tout ce qui se passe sur l’écran de votre appareil.
Prêt à faire confiance à ChatGPT avec votre contenu à l’écran ?
Au lancement, l’application ChatGPT Mac prend en charge la capture manuelle d’une capture d’écran ou le téléchargement d’un fichier, pour ensuite interroger ChatGPT à ce sujet. Mais à l’avenir, comme le montre la vidéo ci-dessous, vous pourrez cliquer sur un bouton qui permettra à l’application d’accéder à tout et n’importe quoi sur votre écran.
Cette fonctionnalité ne sera apparemment pas limitée au Mac, puisque l’application iOS et iPadOS a démontré la même technologie dans l’exemple de tutorat ci-dessous.
On ne sait pas quand ces fonctionnalités d’affichage d’écran seront disponibles dans ChatGPT. Ils semblent cependant être des ajouts évidents pour une expérience plus fluide et interactive. Apple fournit même des API permettant aux développeurs d’accéder au contenu de l’écran d’un appareil, avec le consentement de l’utilisateur, bien sûr. OpenAI ne fait donc rien de néfaste en ajoutant ces fonctionnalités.
Prise de 9to5Mac
ChatGPT ayant accès à l’intégralité du contenu de votre écran pourrait certainement s’avérer un peu effrayant, mais cela sera aussi sans aucun doute incroyablement utile.
Il y aura très probablement des limites de temps pour l’accès de l’application à votre écran, vous obligeant à appuyer sur un bouton chaque fois que vous souhaitez accorder l’accès. Mais en théorie, il est logique qu’un jour les outils d’IA aient un accès permanent à tout ce que vous pouvez voir, permettant ainsi une aide plus transparente avec un minimum de frictions.
Un assistant IA capable de voir tout ce que vous voyez sur vos appareils semble être quelque chose qu’Apple pourrait activer au niveau du système sur ses plates-formes. Si Siri était doté d’une nouvelle intelligence IA, alors, grâce à son intégration approfondie du système, il pourrait s’avérer un véritable atout pour les utilisateurs d’iOS 18 et au-delà.
FTC : Nous utilisons des liens d’affiliation automatique générateurs de revenus. Plus.
