Intégration du Proxy Apify
L’utilisation des proxies Bright Data avec Apify améliore l’efficacité du Scraping web en garantissant une extraction de données sécurisée et anonyme et en réduisant le risque de blocage et de détection des adresses IP.
Ce guide est peut-être obsolète. Pour obtenir un guide à jour, veuillez consulter notre documentation.
- 150M+ IPs résidentielles
- Sessions persistantes et rotatives
- Taux de réussite de 99,95 %.
- Ciblage géographique - GRATUIT
Qu'est-ce qu'Apify ?
Apify est une puissante plateforme de Scraping web, d’extraction de données et de RPA web. Elle peut automatiser tout ce que vous pouvez faire manuellement dans un navigateur web et l’exécuter à grande échelle. Apify Store propose des centaines d’outils de Scraping web prêts à l’emploi qui ne nécessitent que quelques réglages.
Les proxys sont souvent un élément essentiel du Scraping web. Vous devez toujours sécuriser votre identité lorsque vous effectuez du Scraping web et vous devrez peut-être également faire face à des mesures anti-scraping et à d’autres restrictions mises en place par le site web cible.
C’est là que Bright Data entre en jeu 💪
Les Proxys de Bright Data peuvent vous aider à mener à bien vos tâches de scraping et d’automatisation. Les Proxys Bright Data s’intègrent parfaitement à Apify, ce qui vous permet d’effectuer votre travail sans être bloqué.
Comment configurer l'
d'Apify avec les Proxy Bright Data :
Rendez-vous sur Bright Data :
- Connectez-vous à votre compte Bright Data et accédez au tableau de bord
- Cliquez sur Proxy & Infra et créez une Zone
- Vous pouvez choisir entre Datacenter, IPs résidentielles, FAI et IPs mobiles
- Configurez et créez la zone en fonction des exigences de votre projet
- Cliquez sur l’icône Paramètres à côté du nom de la zone.
- Obtenez le nom d’utilisateur et le mot de passe.
Rendez-vous sur Apify :
- Rendez-vous sur apify.com et connectez-vous à votre compte.
- Une fois dans la console Apify, cliquez sur Acteurs dans le menu de gauche.
- Sous l’onglet Store, vous trouverez Web Scraper. Nous l’utiliserons comme exemple. Cliquez dessus.
- Accédez à l’onglet Entrée.
- Entrez lumtest comme URL de départ à extraire : https://lumtest.com/myip.json
- Dans la fonction Page, collez ce code :
async function pageFunction(context) {
// jQuery est pratique pour trouver des éléments DOM et en extraire des données.
// Pour l'utiliser, veillez à activer l'option « Inject jQuery ».
const $ = context.jQuery;
// Sélectionnez l'élément à l'aide du sélecteur CSS « body > pre » et extrayez son contenu textuel.
const data = $('body > pre').text();
// Renvoyez un objet contenant les données extraites. Il sera stocké dans l'ensemble de données résultant.
return {
data: data
};
}
- Faites ensuite défiler vers le bas pour trouver la configuration du Proxy et du navigateur.
- Cliquez sur votre propre Proxy et saisissez vos identifiants de Proxy dans le format suivant.
- http://username:[email protected]:33335 et le mot de passe peut être récupéré dans les paramètres de zone que nous venons de créer.
- Le nom d’hôte des Proxy Bright Data est :brd.superproxy.io et le port est 33335.
- Voici à quoi ressemblera l’URL finale du Proxy Bright Data : http://lum-customer-c_375eb5c4-Zone-Zone5:[email protected]:33335
- Il suffit ensuite de cliquer sur Démarrer.
- Vous pouvez ensuite prévisualiser et télécharger les données au format HTML, JSON, CSV, Excel, XML et flux RSS, ou les consulter dans l’onglet de sortie
- Pour vérifier qu’Apify a utilisé le Proxy, accédez à votre tableau de bord Bright Data, naviguez jusqu’aux Proxys, puis consultez le Journal d’événements.
⚠️Remarque importante : si vous utilisez les Proxys résidentiels, le Web Unlocker ou l’API SERP de Bright Data, vous devez installer un certificat SSL pour activer des connexions sécurisées de bout en bout vers vos sites web cibles. Il s’agit d’un processus simple, consultez https://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificate pour obtenir des instructions.
Obtenir des Proxys pour Apify
Alimenté par une infrastructure de proxy résidentiel primée
Plus de 150 million+ d’adresses IP résidentielles, la meilleure technologie avec la possibilité de cibler n’importe quel pays, ville et opérateur mobile font de nos services de proxy premium le meilleur choix pour les développeurs.
Des types de proxys adaptés à tous vos besoins
Proxys résidentiels
- de 150,000,000+ adresses IP
- Disponibles dans 195 pays
- Le plus grand réseau permettant la rotation d’adresses IP de pairs réels
- Accédez et parcourez tous les sites web les plus complexes
Proxys de centre de données
- + de 1,300,000+ adresses IP
- Disponibles dans 98 pays
- Pools d’adresses IP partagés et dédiés disponibles
- Accès rapide aux sites web peu complexes
Proxys ISP
- + de 1,300,000+ adresses IP
- Disponibles dans 35 pays
- Adresses IP résidentielles statiques d’utilisateurs réels sans rotation d’adresses IP
- Idéal pour vous connecter simultanément à différents comptes
Proxys mobiles
- + de 7,000,000+ adresses IP
- Disponibles dans 195 pays
- Le réseau d’adresses IP 3G/4G d’utilisateurs réels le plus développé au monde
- Vérifiez les publicités et parcourez les sites destinés aux appareils mobiles
Proxy Network Pricing
Leader de la catégorie des proxys et de la collecte de données
La meilleure expérience client du secteur
De nouvelles fonctionnalités tous les jours
Pour répondre à toutes vos questions quand vous en avez besoin
Tableau de bord des performances en temps réel
Pour optimiser votre performance
Pour atteindre vos objectifs de collecte de données