Oxylabs lève 130M$ pour son infrastructure de scraping de données

Présentation d'Oxylabs

Oxylabs, une startup lituanienne spécialisée dans l'infrastructure de scraping de données web, a levé 130 millions de dollars lors de sa première levée de fonds. Cette levée de fonds, menée par la société de capital-investissement Warburg Pincus, valorise Oxylabs à 3,6 milliards de dollars.

Fonctionnement et architecture

Oxylabs fournit aux développeurs de modèles d'intelligence artificielle (IA) une infrastructure complète pour collecter des données publiques sur Internet à grande échelle. La société propose un service de proxy qui a accès à un pool de plus de 175 millions d'adresses IP de consommateurs « éthiquement sourcées », permettant ainsi de scraper des données Internet sans être bloqué par des interdictions d'IP, des outils CAPTCHA ou des restrictions géographiques.

Le service de proxy d'Oxylabs est complété par des outils tels que son API de scraping de données Web Scraper et son gestionnaire de proxy AI-native, Web Unblocker, qui permet de contourner automatiquement les systèmes anti-scraping. La société propose également un navigateur Headless pour extraire des données de sites web dynamiques.

Implications et limites

La pratique du scraping de données web soulève des questions éthiques, notamment en ce qui concerne la collecte de données sans compensation pour les créateurs de contenu. Oxylabs tente de se positionner comme l'un des fournisseurs de services de scraping les plus éthiques de l'industrie, en respectant les lois de l'Union européenne sur la collecte de données et en étant membre fondateur de l'Initiative de collecte éthique de données web (EWDCI).

Le financement d'Oxylabs souligne l'importance croissante des infrastructures de données pour les modèles d'IA. La société compte plus de 350 000 clients dans le monde et son chiffre d'affaires annuel récurrent dépasse 350 millions de dollars. Les fonds levés seront utilisés pour étendre le réseau mondial d'Oxylabs et développer la prochaine génération d'outils de scraping de données web.

Exemple de code pour utiliser l'API de scraping de données Web Scraper :
   // Importation de la bibliothèque
   const { WebScraper } = require('oxylabs-web-scraper');
   
   // Création d'une instance de l'API
   const webScraper = new WebScraper({
     // Clé d'API
     api_key: 'YOUR_API_KEY',
   });
   
   // Exécution de la requête de scraping
   webScraper.scrape('https://example.com', {
     // Sélecteur de données
     data_selector: '.data',
   })
   .then((data) => {
     // Traitement des données scrapées
     console.log(data);
   })
   .catch((error) => {
     // Gestion des erreurs
     console.error(error);
   });
   

Conclusion

Le financement d'Oxylabs met en évidence l'importance croissante des infrastructures de données pour les modèles d'IA. La société doit naviguer dans un contexte réglementaire complexe et faire face à des questions éthiques liées à la collecte de données. Cependant, avec son infrastructure de scraping de données web et ses outils complémentaires, Oxylabs est bien positionnée pour répondre aux besoins croissants des développeurs de modèles d'IA.