WWDC 2024 : L’ère de l’IA chez Apple, Réactions à la publication du 10/06/2024

[Gãbriel]

La conférence d’ouverture de la WWDC 2024 vient de se terminer. Y ont été annoncé des nouveautés pour l’ensemble des OS d’Apple mais également une entrée dans une nouvelle ère marquée par l’IA : l’Intelligence Apple. Voici ce que l’on en retient.



Les photos classiques disponibles dans la galerie Photos peuvent désormais être transformées grâce au machine learning en des Photos Spatiales visionnables sur Apple Vision Pro. De nouveaux gestes avec les mains permettent de nouveaux raccourcis en portant le casque. Un mode train fait son apparition en plus du mode avion. Canon lance un objectif permettant de prendre des Photos Spatiales sur son boîtier EOS R7. L’Apple Vision Pro devient progressivement disponible dans de nouveaux pays, dont la France ce 12 juillet.



La nouvelle version d’iOS se démarque par sa customisabilité. Les icônes d’applications peuvent maintenant être placés n’importe où sur l’écran, se dotent d’un Mode Sombre et peuvent même être changés de couleur selon un thème. Le Centre de Contrôle peut lui aussi être personnalisé avec plusieurs groupes et pages. Il s’ouvre d’ailleurs aux applications tierces qui peuvent y ajouter des raccourcis. Sous iOS 18, il sera aussi possible de modifier les actions des deux boutons de l’écran verrouillé, dont les fonctions historiques sont la lampe torche et l’appareil photo.

Apple joue aussi la carte de la confidentialité en permettant de verrouiller les applications avec Face ID ou un mot de passe. Il est aussi possible de masquer complètement la présence d’une application sur l’iPhone.

Les messages s’enrichissent avec des réactions désormais sans limites : tous les emojis/stickers sont utilisables en tant que Tapback. Les messages peuvent désormais être programmés à l’avance (pratique pour ne pas oublier un anniversaire), et le texte peut être stylisé et animé de différents effets. Les iMessage et SMS via satellites sont généralisés pour les iPhone 14 et plus récents (plus seulement en situation d’urgence).

Mail et Photos font du tri de manière intelligente, certains lieux sur Plan se dotent de données topographiques et Cartes s’améliore avec une partie billetterie plus esthétique et fonctionnelle. Un mode de jeu permet d’abaisser la latence du Bluetooth tout en optimisant le nombre d’images par seconde. Les AirPods améliorent l’isolation de la voix lors d’appels.



watchOS intègre désormais un mode permettant de quantifier des progrès en entraînement. Cette onzième itération de l’OS rend (enfin !) possible la mise en place d’un jour « off » pour les anneaux sans casser une série.

Une nouvelle application Vitals regroupe toutes les métriques de santé et permet de suivre leur évolution. La montre d’Apple permet aussi de suivre une grossesse. Les Live Activities débarquent sur Apple Watch et les widgets sont plus intelligents.



Une barre supérieure flottante remplace le menu traditionnellement à gauche dans les applications pour un contenu de bord à bord. SharePlay devient l’outil ultime pour vous transformer en vrai SAV Apple auprès de votre famille avec la possibilité de prendre le contrôle à distance de l’appareil de l’autre (avec son accord, bien évidemment).

L’iPad se dote enfin d’une app calculatrice. Elle est cependant bien plus puissante que sur iPhone grâce à « Math Notes » permettant de résoudre des équations directement depuis une entrée manuscrite. D’ailleurs, l’écriture manuscrite est désormais automatiquement améliorée et il est possible, à travers iPadOS, avec la fonctionnalité « Smart Script », de générer et modifier une écriture manuscrite comme si elle était tapée.



macOS continue son tour de Californie avec le célèbre Sequoia Park. Cette nouvelle version de macOS améliore la fonction « Continuity » : il est possible de répliquer son iPhone sur son Mac et de l’utiliser normalement. Il est même possible de faire des copier/coller entre le Mac et l’iPhone.

macOS se dote enfin d’un système de management des fenêtre natif à la Windows. L’application Keychain rassemble désormais les mots de passe et autres. Le gaming se développe avec Game Porting 2 qui rend encore plus facile de porter des jeux sur Mac. Ubisoft annonce d’ailleurs que son prochain jeu Assassin's Creed sera disponible et optimisé sur Mac et iPad à sa sortie.



C’est la grande annonce de cette WWDC 2024 : l’arrivée de l’IA dans l’écosystème Apple. Jouant sur les initiales anglophones AI, l’Apple Intelligence apporte les modèles génératifs d’intelligence artificielle. Cela permet pour les appareils Apple d’écrire/corriger des textes, générer des images ou emojis personnalisés, obtenir des réponses personnalisées…

Apple mets cependant l’accès sur la confidentialité en traitant le maximum en local sur l’appareil. Pour les requêtes demandant des modèles génératifs plus conséquents et donc en ligne, Apple met en place des protocoles sécurisés qui ne conservent pas les données. Les serveurs utilisés sont d'ailleurs exclusivement composés de composants Apple Silicon. Siri se voit donc boosté à l'IA et devient (enfin ?) intelligent et permissif. Tout cela permet de la prise en compte du contexte et les requêtes successives. Au-delà de Siri, l’IA se retrouve un peu partout en permettant d’accéder à des résumés de mails non lus ou encore de retrouver une photo précise dans sa galerie.

Apple supportera d’autres modèles génératifs que le sien comme le désormais très célèbre ChatGPT. Il demandera cependant bien la permission à l'utilisateur à chaque requête car moins soucieux de la confidentialité qu’Apple Intelligence. Le support d’autres modèles devrait suivre.

Seule la gamme d’iPhone 15 Pro est cependant compatible. Les Mac et iPad équipés d’une puce M1 ou plus récente le sont également.

Lien vers le billet original

[Hebus]

Ça reconnaît le français en lettre cursives attachées, je viens d’installer iPadOS 18 , j’ai un peu joué avec

On n’est pas sur du Grapher.app

il faut se souvenir qu’on avait ça dans les versions vielles de MacOSX , ça a disparu je ne sais plus quand, je m’en servais avec une petite tablette wacom dans les années 2000/2010 je crois

Par ailleurs je crois plutôt que la partie math de notes et calculatrice vient d’une boîte qu’ils ont acheté car il y a une des applications de prise de notes sur iPad , entre autres qui offre ce genre de possibilité

[linus]

Ça reconnaît le français en lettre cursives attachées, je viens d’installer iPadOS 18 , j’ai un peu joué avec

On n’est pas sur du Grapher.app

il faut se souvenir qu’on avait ça dans les versions vielles de MacOSX , ça a disparu je ne sais plus quand, je m’en servais avec une petite tablette wacom dans les années 2000/2010 je crois

Par ailleurs je crois plutôt que la partie math de notes et calculatrice vient d’une boîte qu’ils ont acheté car il y a une des applications de prise de notes sur iPad , entre autres qui offre ce genre de possibilité

Pour la lecture cursive, Apple a sans doute gardé le savoir faire. A l'époque du Newton, Apple expliquait qu'elle avait mis la main sur mathématicien de génie qui avait développé un algorithme incroyable. De fait le Newton, après une phase d'apprentissage, s'en sortait bien même avec une écriture de médecin ! Si l'algo est dispo, réécrire l'appli est fastoche.

Pour Grapher.app, je me doute bien que Apple n'a pas ressorti des cartons cette appli probablement écrite en assembleur. Ce qui est étonnant, au vu de son passé d'oublieuse de ses propres bonnes idées, c'est qu'elle remette au goût du jour un tel produit qui n'aurait jamais du disparaître.

A quand la réactivation du génial QuickTime 7 ? Il manque !!!! Il concentrait des tas d'outils super pratiques dans un logiciel fourni en standard avec macOS alors qu'il faut des logiciels tiers plus complexes pour faire pareil. iMovie ne remplace pas, notamment parce qu'il est bloqué en 16:9. Oui, il a aussi un format iPhone vertical bien caché, mais ce n'est qu'un aspect du problème car iMovie n'offre pas un large choix de transcodage, le dealiasing, la gestion du bitrate, etc, etc.