Nous sommes à un peu plus d’une semaine du discours d’ouverture de la WWDC, au cours duquel Apple devrait annoncer une multitude de nouvelles fonctionnalités d’IA dans le cadre d’iOS 18.
On s’attend à ce que ce soit le moment où Siri acquiert l’intelligence de l’IA générative, grâce à un accord avec OpenAI pour intégrer la technologie ChatGPT…
2024 : l’année des fonctionnalités de l’IA générative
Nous avons déjà noté qu’il n’est pas juste d’agir comme si Apple était un débutant en IA. La société a largement utilisé l’apprentissage automatique dans son application Appareil photo en particulier, avec des fonctionnalités de photographie informatique utilisées pour tout, du bracketing d’exposition aux effets artificiels de faible profondeur de champ.
Nous avons également observé que même si Siri a peut-être été laissé derrière par d’autres assistants intelligents, c’est en partie une comparaison injuste, et en partie parce qu’Apple a accordé une plus grande priorité à la protection de la confidentialité des données des utilisateurs (avec quelques échecs).
Mais en même temps, il ne fait aucun doute que l’IA générative – aussi imparfaite soit-elle – a complètement changé les attentes quant à ce qu’un assistant intelligent devrait être capable de faire. En particulier, nous attendons désormais beaucoup plus d’interactions conversationnelles et une bien meilleure compréhension du contexte et de l’intention.
C’est pourquoi Apple a décidé de placer les fonctionnalités d’IA au cœur des mises à jour logicielles de cette année – mais qu’attendons-nous exactement ?
Un Siri bien plus intelligent
La priorité absolue d’Apple en matière d’IA doit être de rendre Siri beaucoup plus intelligent que ses réponses souvent guinchées, son incapacité à comprendre ce que nous voulons qu’il fasse et la redoutable réponse « J’ai trouvé ceci sur le Web ».
On pense que la société est essentiellement en train de reconstruire Siri pour pouvoir être alimenté par de grands modèles linguistiques (LLM). Il est probable qu’il s’agira d’une combinaison du propre LLM d’Apple et de la technologie ChatGPT d’OpenAI.
Cependant, l’ampleur de cette tâche signifie que le déploiement complet n’est pas attendu avant l’année prochaine. Il est probable qu’Apple publiera une mise à jour intermédiaire dans la version initiale d’iOS 18.
Les détails que nous nous attendons à voir incluent :
- Une meilleure compréhension de ce que vous voulez que Siri fasse
- Réponses orales aux questions au lieu d’afficher des liens Web (avec une clause de non-responsabilité ChatGPT)
- Connaissance de vos contacts, rendez-vous, emplacements, etc., pour des réponses plus intelligentes
- Possibilité de tout résumer, des notifications et messages aux documents longs
- Possibilité d’interagir avec vos applications – par exemple. « Déplacer cette note vers mon nouveau dossier Accueil »
- Enchaînez plusieurs commandes ensemble – par exemple. « Recadrez cette photo en carré et envoyez-la à Sam »
L’enchaînement des commandes, qui devrait arriver dans une mise à jour ultérieure, résoudrait l’une des plus grandes frustrations liées au contrôle par Siri des appareils HomeKit. Vous ne pouvez actuellement pas dire quelque chose comme « Dis Siri, éteint les lumières du salon et lance la scène Garage Work ».
Capacités de retouche photo IA
Les rapports à ce sujet sont assez généraux, mais il existe des indications spécifiques, comme la suppression d’objets grâce à l’IA, pour se débarrasser des personnes et des objets indésirables sur les photos.
Une nouvelle fonctionnalité Clean Up, qui permettra aux utilisateurs de supprimer des objets des images grâce à l’utilisation d’un logiciel d’IA générative.
Nous savons également que la société a travaillé sur la retouche photo basée sur du texte, dans laquelle il vous suffit d’indiquer à l’appareil ce que vous souhaitez réaliser.
Par exemple, un utilisateur peut simplement dire « rendre le ciel plus bleu » et MGIE interprétera cela comme « identifier et sélectionner le ciel, puis augmenter la saturation de cette zone de 20 % ».
Nous ne savons pas combien de ces fonctionnalités seront intégrées à iOS 18, mais le modèle présenté par Apple est capable de :
- Recadrage, redimensionnement, rotation, retournement
- Ajout de filtres
- Identifier et modifier des éléments photo spécifiques, comme les yeux, les cheveux et les vêtements
Bien que l’article (et la démo) utilisent du texte dactylographié, l’implémentation éventuelle semble plus susceptible d’être une commande Siri ; « Hey Siri, supprime le message derrière la femme à droite. »
Là encore, le déploiement complet de ces capacités prendra probablement du temps.
Émoji personnalisé
Les histoires sur les nouveaux emoji arrivant sur iOS sont toujours populaires ici, ce qui suggère que de nombreux propriétaires d’iPhone souhaitent pouvoir utiliser les éléments graphiques pour exprimer un plus large éventail d’émotions dans les messages.
UN Bloomberg le rapport indique qu’Apple utilisera l’IA générative pour permettre aux utilisateurs de créer des emoji personnalisés.
Une fonctionnalité remarquable apportera l’IA générative aux emojis. La société développe un logiciel capable de créer des emojis personnalisés à la volée, en fonction des SMS envoyés par les utilisateurs.
C’est peut-être quelque chose que vous demandez, ou il se peut qu’iOS 18 suggère automatiquement un emoji personnalisé lorsque vous appuyez sur le bouton pour afficher le menu emoji.
Autres possibilités
Il y a eu suffisamment de rapports Siri pour faire d’une refonte majeure ici une valeur sûre ; les capacités de retouche photo semblent extrêmement probables ; et Gurman est confiant dans les emoji personnalisés. Mais il y a également eu des rapports supplémentaires sur des choses sur lesquelles Apple travaille et sur lesquelles nous pourrait voir introduit dans iOS 18 et macOS 15.
Recherches Spotlight plus intelligentes
Un rapport indique qu’Apple « envisage » d’utiliser l’IA pour permettre des recherches Spotlight plus intelligentes. En particulier, il affirme qu’il serait capable d’approfondir les applications. Cela pourrait, par exemple, permettre des recherches comme celles-ci :
« Montrez-moi toutes les notes et dessins que j’ai pris sur les améliorations de l’habitat »
« Montre-moi toutes mes recettes de fromage »
Codage assisté par l’IA dans Xcode
ChatGPT est largement utilisé pour générer du code, le GitHub Copilot de Microsoft aidant également les développeurs à compléter leur code. Un rapport indique qu’Apple teste une fonctionnalité Xcode similaire en interne, en vue de la lancer publiquement une fois qu’elle fonctionnera bien.
Coaching de santé et de remise en forme basé sur l’IA
Un rapport un peu plus vague suggère qu’Apple travaille sur une fonctionnalité de coaching de santé et de remise en forme basée sur l’IA.
L’objectif est de « garder les utilisateurs motivés à faire de l’exercice, à améliorer leurs habitudes alimentaires et à mieux dormir ». La plateforme utilisera une combinaison d’intelligence artificielle et de données Apple Watch pour donner aux utilisateurs des suggestions sur les changements de mode de vie qui contribueront à améliorer leur santé et leur bien-être en général.
Journalisation améliorée par l’IA
Avant le lancement de l’application Apple’s Journal, Bloomberg a également suggéré que les fonctionnalités de l’IA pourraient être utilisées pour analyser le libellé des entrées de journal afin de détecter l’humeur de l’utilisateur. Nous avons discuté hier de la manière dont l’entreprise pourrait utiliser les fonctionnalités de l’IA de la même manière que l’application Autobiographer pour dynamiser le Journal.
Qu’espérez-vous le plus ?
Quelles fonctionnalités basées sur l’IA espérez-vous le plus voir dans iOS 18 et macOS 15 ?
Veuillez partager vos réflexions dans les commentaires.
photo par Randa Marzouk sur Unsplash
FTC : Nous utilisons des liens d’affiliation automatique générateurs de revenus. Plus.
