Contexte et annonce
Apple aurait publié une offre d’emploi pour un senior engineering manager chargé de créer un « AI agent that can use a computer ». La description indique que l’agent doit browsing web, travailler entre les applications, exécuter des commandes, écrire et déboguer du code, appeler des services et choisir l’outil adéquat, le tout « privément et avec le polish attendu d’Apple ». Bloomberg précise que le projet est encore à un stade précoce mais que le lancement pourrait être envisagé « d’ici la fin de l’année prochaine ».
Architecture et contraintes techniques
Pour réaliser les fonctions décrites, l’agent devra s’interfacer avec plusieurs couches de macOS : le moteur de rendu WebKit, les API d’inter‑application (AppleScript, Shortcuts), le terminal et les frameworks de développement (Xcode, Swift). La capacité à « se déplacer fluidement entre les outils » implique une orchestration dynamique, probablement basée sur un modèle de langage large (LLM) capable de planifier des séquences d’actions et d’appeler des APIs internes. Apple pourrait exploiter son Neural Engine pour l’inférence locale, limitant ainsi les échanges de données sensibles et respectant la promesse de confidentialité. Le choix entre exécution locale et appel à des services cloud influencera la latence, la consommation d’énergie et la conformité aux politiques de sandboxing d’Apple.
Sécurité et contrôle d’accès
En parallèle du développement, Apple prépare des restrictions pour les agents tiers. La version macOS 27.3 introduira des avertissements décourageant l’octroi d’un accès complet à des agents externes. En octobre, la société a notifié les développeurs qu’une « action utilisateur très explicite » sera requise pour autoriser un tel niveau d’accès. Ces mesures visent à protéger le système contre les abus potentiels d’un agent capable de « exécuter des commandes, écrire du code et appeler des APIs », ce qui représente une surface d’attaque importante.
Perspectives et limites
Le projet d’Apple s’inscrit dans une course où Anthropic, OpenAI et Meta (avec sa ligne Muse) proposent déjà des agents capables de manipuler un ordinateur. Cependant, l’accent mis par Apple sur la confidentialité et l’intégration native pourrait limiter la portée des modèles cloud, au détriment de la puissance brute disponible. De plus, la nécessité d’obtenir une autorisation explicite pour chaque tâche multi‑étape pourrait ralentir l’expérience utilisateur et freiner l’adoption par les développeurs habitués à des flux plus automatisés. En l’absence de détails sur le modèle exact, la viabilité du produit dépendra de la capacité d’Apple à concilier performance, confidentialité et ergonomie.