Apple dévoile Visual Intelligence, une IA qui espionne votre écran

Le WWDC 2025 aura permis à Apple de dévoiler un nouveau système d’IA, baptisé Visual Intelligence. Cette dernière vous permet d’interagir avec l’IA à propos de ce qui est directement affiché sur l’écran de votre iPhone.

Apple semble vouloir rattraper son retard accumulé en matière d’intelligence artificielle. En effet, la marque va devoir faire face à la justice pour cette même raison. Celle-ci, sobrement baptisée Apple Intelligence, ferait n’importe quoi en termes de résumés d’actualité. Mais cela n’empêche pas le fabricant de l’iPhone de persévérer dans cette voie, l’application prenant de plus en plus de place sur votre smartphone. Ainsi, Apple continue sur sa lancée et nous propose désormais Visual Intelligence, une IA qui scrute votre écran.

Toutefois, il ne s’agit pas d’un espionnage à proprement parler, de la même façon qu’Apple Intelligence lit vos mails pour s’entraîner. En effet, il est ici question d’une IA qui permet à l’utilisateur d’interagir avec les informations disponibles à l’écran.

Apple mise toujours plus sur l’IA

« Les utilisateurs peuvent poser des questions à ChatGPT sur ce qu’ils voient à l’écran pour en savoir plus, ainsi que rechercher sur Google, Etsy ou d’autres applications prises en charge pour trouver des images et des produits similaires », explique Apple. « Si un utilisateur est particulièrement intéressé par un objet, comme une lampe, il peut le mettre en surbrillance pour rechercher cet article spécifique ou des objets similaires en ligne. »

Apple, qui a déjà assuré avoir choisi une approche « responsable » pour le développement de son IA, a tenu une nouvelle fois à rassurer ses utilisateurs. « Les développeurs d’applications pourront s’appuyer sur Apple Intelligence pour offrir aux utilisateurs de nouvelles expériences intelligentes, disponibles même lorsqu’ils sont hors ligne, et qui protègent leur vie privée, grâce à une inférence IA gratuite », écrit Apple.

« Par exemple, une application éducative peut utiliser le modèle intégré à l’appareil pour générer un quiz personnalisé à partir des notes d’un utilisateur, sans aucun coût lié à l’API cloud, ou une application de plein air peut ajouter des capacités de recherche en langage naturel qui fonctionnent même lorsque l’utilisateur est hors ligne. »

Source : gizmodo