Présentation de DesignArena
DesignArena est un outil d'IA créé par la société Intelligence, qui vise à améliorer les modèles d'IA en intégrant des retours d'utilisateurs à grande échelle. L'outil a été développé à partir d'un moteur de jeu d'IA qui pouvait créer des jeux fonctionnels, mais pas nécessairement amusants.
Fonctionnement de DesignArena
DesignArena fonctionne en présentant aux utilisateurs une série de choix « A vs. B » pour évaluer les sorties de modèles d'IA. Les utilisateurs peuvent ainsi classer les sorties de meilleure à moins bonne, ce qui fournit des données précieuses pour améliorer les modèles d'IA. L'outil est utilisé par 5,3 millions de personnes dans le monde et est particulièrement utile pour les entreprises qui cherchent à améliorer leurs modèles d'IA.
Implications et limites
La société Intelligence a annoncé un tour de table de 7,9 millions de dollars pour développer son outil. Le modèle économique de DesignArena repose sur la vente de données d'évaluation humaine à des entreprises qui cherchent à améliorer leurs modèles d'IA. L'outil génère actuellement 60 millions de dollars de chiffre d'affaires annuel. Cependant, le marché des retours d'utilisateurs pour les modèles d'IA est concurrentiel et comporte des risques, comme en témoigne la fermeture de la société Yupp après avoir levé 33 millions de dollars.
Avantages et perspectives
DesignArena offre une approche complémentaire aux benchmarks automatisés, qui peuvent être manipulés ou biaisés. Les données d'évaluation humaine collectées par DesignArena peuvent aider les entreprises à mieux comprendre les préférences de leurs utilisateurs et à améliorer leurs modèles d'IA. L'outil est particulièrement utile pour les entreprises qui cherchent à développer des modèles d'IA plus performants et plus personnalisés.
Les utilisateurs de DesignArena peuvent évaluer les sorties de modèles d'IA à l'aide d'une interface simple et intuitive.