Apple a introduit un nouveau look et des capacités améliorées pour Siri, leur assistant virtuel. Les fonctionnalités mises à jour de Siri présentent une conception plus intégrée au sein du système d'exploitation, permettant des interactions plus naturelles et intuitives.

Une amélioration clé est la compréhension du langage améliorée de Siri. Les utilisateurs peuvent maintenant s'adresser à Siri de manière plus naturelle, même s'ils butent sur leurs mots, et Siri comprendra l'intention derrière la demande. Cela est rendu possible par les progrès des modèles de langage à grande échelle qui alimentent les capacités de Siri.

De plus, Apple a introduit la possibilité de taper sur Siri au lieu de parler à haute voix. Avec un double-appui au bas de l'écran, les utilisateurs peuvent communiquer avec Siri de manière discrète et silencieuse, ce qui peut être utile dans des environnements publics ou lorsque l'interaction vocale n'est pas préférée.

En outre, Apple a intégré des interactions basées sur les gestes avec Siri via les AirPods. Les utilisateurs peuvent maintenant simplement hocher la tête pour répondre "oui" ou secouer doucement la tête pour répondre "non" lors de l'interaction avec Siri, offrant une expérience mains libres transparente.

Ce qui est génial, c'est qu'à tout moment, vous avez la possibilité de taper sur Siri avec un simple double-appui au bas de l'écran. Je peux rapidement et discrètement demander à Siri de régler une alarme, et vous pouvez passer du texte à la voix pour communiquer de la manière qui vous convient le mieux à ce moment-là.

Cette année, nous rendons encore plus facile l'interaction avec Siri pour une expérience mains libres transparente. Pour les moments où vous ne voulez peut-être pas parler à haute voix en réponse à Siri, comme dans le bus pour aller au travail ou dans ces endroits un peu trop bondés, nous avons créé la possibilité de simplement hocher la tête pour dire oui ou secouer doucement la tête pour dire non pour interagir.

La possibilité de taper sur Siri et d'utiliser de simples gestes comme hocher ou secouer la tête offre un moyen plus discret d'interagir avec votre assistant virtuel, surtout dans les lieux publics. Cette intégration des commandes textuelles et gestuelles élargit les moyens dont les utilisateurs peuvent interagir avec Siri, le rendant plus accessible et adaptable à différentes situations. En offrant ces méthodes d'entrée alternatives, Apple améliore l'expérience globale de Siri et la rend plus fluide à utiliser dans la vie quotidienne.

Siri aura la capacité d'effectuer des centaines de nouvelles actions dans et entre les applications, y compris certaines qui tirent parti des nouvelles capacités d'écriture et de génération d'images d'Apple. Par exemple, vous pourrez dire "Montre-moi mes photos de Stacy à New York portant son manteau rose" et Siri les affichera. Vous pourriez ensuite dire "Fais ressortir cette photo" et Siri l'améliorera.

Siri pourra également prendre des mesures entre les applications. Vous pourriez dire "Ajoute cela à ma note avec la biographie de Stacy" et il passera de l'application Photos à l'application Notes pour le faire. Cela est rendu possible grâce à des améliorations importantes apportées au cadre App Intents, qui permet aux applications de définir des actions pour les raccourcis Siri et d'autres expériences système.

Cela ne se limitera pas aux propres applications d'Apple - les développeurs pourront utiliser le cadre App Intents pour exposer des actions dans leurs applications que Siri pourra également exploiter.

L'intelligence d'Apple a également une compréhension approfondie de votre contexte personnel, avec un index sémantique de vos photos, événements de calendrier, fichiers, messages et plus encore. Siri peut exploiter ce contexte pour être incroyablement utile, comme retrouver cette recommandation de livre que votre ami vous a envoyée il y a des mois, ou remplir automatiquement un formulaire avec vos informations de permis de conduire.

L'intelligence d'Apple propose une suite d'outils d'écriture puissants qui peuvent vous aider à communiquer plus efficacement dans vos tâches quotidiennes. Ces outils tirent parti des capacités de compréhension du langage des modèles d'IA d'Apple pour fournir une assistance intelligente.

Réécrire : Cette fonctionnalité vous permet de générer plusieurs variations de votre texte écrit, vous permettant de choisir la version qui correspond le mieux à vos besoins. Que vous rédigiez une lettre de motivation, révisiez un e-mail ou peaufiniez le ton d'un message, Réécrire vous donne la flexibilité d'expérimenter et de trouver le libellé parfait.

Relecture : L'outil de relecture analyse votre écriture pour la grammaire, le choix des mots et la structure des phrases, en fournissant des suggestions pour vous aider à peaufiner votre travail. Cela est particulièrement utile lorsque vous communiquez avec des interlocuteurs importants, comme votre professeur ou un employeur potentiel, en vous assurant que votre message est poli et professionnel.

Réponse intelligente : L'intelligence d'Apple peut maintenant générer des suggestions de réponses intelligentes en fonction du contexte de vos e-mails. Lorsque vous devez rapidement répondre à une invitation ou fournir une brève mise à jour, Réponse intelligente vous proposera des options sur mesure, vous permettant de répondre efficacement sans avoir à composer l'intégralité du message à partir de zéro.

Avec des milliers d'emojis à choisir, il y a des moments où vous ne trouvez pas tout à fait le bon pour exprimer ce que vous ressentez. Apple introduit une nouvelle fonctionnalité appelée Gen Emoji qui exploite la puissance de l'intelligence d'Apple pour créer des emojis personnalisés sur l'appareil.

Pour utiliser Gen Emoji, il vous suffit de fournir une description, et l'intelligence d'Apple générera un emoji personnalisé qui correspondra parfaitement au moment. Le processus se déroule directement dans votre clavier, vous permettant d'expérimenter et de créer autant d'images que vous le souhaitez.

Bien que cette fonctionnalité puisse sembler amusante et attrayante, Apple reconnaît le potentiel d'abus, similaire à ce qui a été observé avec les autocollants IA de Facebook. Ils reconnaissent que Gen Emoji pourrait être utilisé pour créer du contenu inapproprié ou offensant. À ce titre, Apple a mis en place des garde-fous plus stricts par rapport aux modèles génératifs ouverts comme Dall-E.

La fonctionnalité Gen Emoji est conçue pour offrir une expérience plus contrôlée et soignée, limitant les types de concepts et de styles qui peuvent être générés. Cette approche vise à équilibrer la créativité et la personnalisation que les utilisateurs désirent, tout en atténuant les risques de capacités génératrices sans contrainte.

Apple introduit une nouvelle fonctionnalité appelée "Image Playground" qui permet aux utilisateurs de créer des images génératives directement sur leur iPhone, iPad et Mac. Voici les points clés :

• Image Playground s'appuie sur l'intelligence d'Apple, le système d'IA de l'entreprise, pour générer des images en fonction des descriptions et des concepts des utilisateurs.

• Les utilisateurs peuvent choisir parmi une gamme de thèmes, de costumes, d'accessoires et de lieux pour commencer, et l'intelligence d'Apple générera des images d'aperçu. Pas besoin de rédiger la requête parfaite.

• La génération d'images se fait sur l'appareil, permettant aux utilisateurs d'expérimenter et de créer plusieurs images sans avoir à envoyer des données dans le cloud.

• Les utilisateurs peuvent ajuster le style des images générées, en choisissant entre réalisme, croquis ou illustration.

• Apple fournit également une application dédiée Image Playground pour faciliter l'exploration et la création d'images génératives.

• Pour les développeurs, Apple fournit une API pour intégrer l'expérience Image Playground directement dans leurs propres applications.

Supposons que vous vouliez une meilleure image pour votre cours d'histoire de l'architecture. Avec Image Wand, vous pouvez entourer votre croquis à l'aide d'Apple Pencil pour ouvrir un playground d'images dans votre note. Image Wand utilise l'intelligence sur l'appareil pour analyser votre croquis et vos mots, et crée une image pour vous.

Ce qui est vraiment amusant, c'est que vous pouvez même entourer un espace vide, et il en tirera le contexte de la zone environnante pour suggérer l'image idéale à associer à votre note. Il n'a jamais été aussi facile de rendre vos notes plus visuelles et attrayantes.

Néanmoins, il existe d'autres outils d'intelligence artificielle disponibles qui peuvent être utiles pour des tâches s'appuyant sur de vastes connaissances du monde ou offrant une expertise de domaine spécialisée. Nous voulons que vous puissiez utiliser ces modèles externes sans avoir à passer d'un outil à l'autre, nous les intégrons donc directement dans vos expériences. Et nous commençons avec les meilleurs d'entre eux - le pionnier et le leader du marché, ChatGPT, d'OpenAI.

Tout d'abord, nous avons intégré un support dans Siri afin que Siri puisse exploiter l'expertise de ChatGPT lorsque cela pourrait vous être utile. Par exemple, si vous avez besoin d'idées de menu pour un repas élaboré à préparer pour des amis avec du poisson fraîchement pêché et des ingrédients de votre jardin, vous pouvez simplement demander à Siri. Siri détermine que ChatGPT pourrait avoir de bonnes idées pour cela, demande votre autorisation pour partager votre question, et présente la réponse directement.

Vous pouvez également inclure des photos avec vos questions. Si vous voulez des conseils sur la décoration, vous pouvez prendre une photo et demander quels types de plantes iraient bien sur cette terrasse. Siri confirme s'il est ok de partager votre photo avec ChatGPT et vous renvoie des suggestions pertinentes. C'est une intégration transparente.

En plus des photos, vous pouvez également poser des questions liées à vos documents, présentations ou PDF. Nous avons également intégré ChatGPT dans les outils d'écriture système. Avec Composer, vous pouvez créer du contenu avec ChatGPT pour tout ce dont vous écrivez. Supposons que vous vouliez créer une histoire de coucher de soleil personnalisée pour votre fille de six ans qui adore les papillons et résoudre des énigmes - entrez votre idée initiale et envoyez-la à ChatGPT pour obtenir quelque chose qu'elle adorera. Composer peut également vous aider à tirer parti des capacités d'image de ChatGPT pour générer des images dans une grande variété de styles pour illustrer votre histoire de coucher de soleil.

Vous pourrez accéder à ChatGPT gratuitement sans créer de compte. Et pour les abonnés à ChatGPT, vous pourrez connecter votre compte et accéder aux fonctionnalités payantes directement dans nos expériences. Bien sûr, vous contrôlez quand ChatGPT est utilisé, et nous demanderons votre autorisation avant de partager l'une de vos informations.