Présentation
Un rapport exclusif de Reuters révèle que des entreprises chinoises d'intelligence artificielle utilisent les sorties de modèles américains de pointe développés par OpenAI Group PBC et Anthropic PBC pour former leurs propres systèmes d'IA à des fins de défense. Cette pratique, appelée « distillation de modèles », permet de créer des modèles plus petits et plus spécialisés qui peuvent fonctionner de manière plus efficace sur du matériel moins puissant.
Contexte technique
La distillation de modèles est une technique qui consiste à prendre les sorties, les étapes de raisonnement et les données de modèles enseignants puissants pour former des modèles étudiants plus petits et plus spécialisés. Cette technique peut être utilisée pour optimiser les modèles pour des charges de travail spécifiques, mais elle est également au centre d'une controverse, en particulier dans le contexte de la recherche chinoise qui semble utiliser cette méthode pour développer des modèles qui rivalisent avec les plus avancés des États-Unis.
Model distillation = prendre les sorties et les étapes de raisonnement d'un modèle enseignant pour former un modèle étudiant
Implications et limites
Les révélations de ce rapport sont susceptibles d'accroître les tensions entre les États-Unis et la Chine, notamment à l'approche de pourparlers sur la gouvernance et la sécurité de l'IA. Les États-Unis sont préoccupés par le fait que la distillation de modèles contournement les contrôles à l'exportation et viole les droits de propriété intellectuelle des créateurs de modèles américains, tandis que la Chine accuse les États-Unis de poursuivre l'« hégémonie de l'IA ».
Analyse scientifique
Les experts estiment que même si la Chine peut utiliser la distillation de modèles pour développer des systèmes qui rivalisent avec les capacités des modèles américains dans certaines applications, elle devra encore faire preuve d'innovation pour dépasser les États-Unis dans le domaine de l'IA. La distillation de modèles peut être considérée comme un moyen de transférer des capacités sélectionnées dans un système moins coûteux et contrôlé localement, mais elle ne signifie pas nécessairement atteindre l'indépendance par rapport à l'IA de pointe.