Intégration de Proxy Apify
L’utilisation des proxys Bright Data avec Apify améliore l’efficacité du scraping web en garantissant une extraction de données sécurisée et anonyme, tout en réduisant le risque de blocages d’IP et de détection.
Ce guide est peut-être obsolète. Pour un guide à jour, veuillez consulter notre documentation.
- 400M+ IPs résidentielles
- Sessions persistantes et rotatives
- Taux de réussite de 99,95%
- Ciblage géographique - GRATUIT
O que é o Apify?
Apify est une puissante plateforme de scraping web, d’extraction de données et de RPA web. Elle peut automatiser tout ce que vous pouvez faire manuellement dans un navigateur web, et l’exécuter à grande échelle. L’Apify Store propose des centaines d’outils de scraping prêts à l’emploi qui nécessitent seulement de modifier quelques paramètres.
Les proxys sont souvent un élément essentiel du scraping web. Vous devez toujours sécuriser votre identité lors du scraping web et vous devrez peut-être aussi faire face aux mesures anti-scraping et autres restrictions déployées par votre site cible.
C’est là qu’intervient Bright Data 💪
Les proxys de Bright Data peuvent vous aider à réaliser avec succès vos tâches de scraping et d’automatisation. Les proxys Bright Data s’intègrent parfaitement à Apify pour que vous puissiez effectuer votre travail sans être bloqué.
Como configurar o Apify
com proxies Bright Data:
Acesse Bright Data:
- Connectez-vous à votre compte Bright Data et accédez au tableau de bord
- Cliquez sur Proxys & Infra et créez une zone
- Vous pouvez choisir entre les IPs Datacenter, Résidentielles, ISP et Mobile
- Configurez et créez la zone selon les exigences de votre projet
- Cliquez sur l’icône Paramètres à côté du nom de la zone.
- Obtenez le nom d’utilisateur et le mot de passe.
Acesse o Apify:
- Rendez-vous sur apify.com et connectez-vous à votre compte.
- Une fois dans la console Apify, cliquez sur Actors dans le menu de gauche.
- Sous l’onglet Store, vous trouverez le Web scraper. Nous l’utiliserons comme exemple. Cliquez dessus.
- Accédez à l’onglet Input.
- Entrez lumtest comme URL de départ à scraper : https://lumtest.com/myip.json
- Dans la fonction de page, collez ce code :
async function pageFunction(context) {
// jQuery est pratique pour trouver des éléments DOM et en extraire des données.
// Pour l'utiliser, assurez-vous d'activer l'option "Inject jQuery".
const $ = context.jQuery;
// Sélectionnez l'élément avec le sélecteur CSS 'body > pre' et extrayez son contenu textuel.
const data = $('body > pre').text();
// Retournez un objet avec les données extraites. Il sera stocké dans le jeu de données résultant.
return {
data: data
};
}
- Faites ensuite défiler vers le bas pour trouver la configuration du proxy et du navigateur.
- Cliquez sur own proxy et saisissez vos identifiants de proxy dans le format suivant.
- http://username:[email protected]:33335 et le mot de passe peuvent être obtenus depuis les paramètres de zone que nous venons de créer.
- Le nom d’hôte pour les proxys Bright Data est : brd.superproxy.io et le port est 33335.
- Voici à quoi ressemblera l’URL finale du proxy Bright Data : http://lum-customer-c_375eb5c4-zone-zone5:[email protected]:33335
- Cliquez ensuite sur Start.
- Vous pouvez ensuite prévisualiser et télécharger les données en HTML, JSON, CSV, Excel, XML et flux RSS, ou les consulter dans l’onglet de sortie
- Pour confirmer qu’Apify a utilisé le proxy, accédez à votre tableau de bord Bright Data, naviguez vers les proxys puis vérifiez le journal d’événements.
⚠️Note importante : Si vous utilisez les Proxys Résidentiels, le Web Unlocker ou l’API SERP de Bright Data, vous devez installer un certificat SSL pour activer des connexions sécurisées de bout en bout vers votre ou vos sites cibles. Il s’agit d’un processus simple, consultez https://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificate pour les instructions.
Obtenha proxies para o Apify
Alimenté par une infrastructure de proxy résidentiel primée
Plus de 400M+ monthly d’adresses IP résidentielles, la meilleure technologie avec la possibilité de cibler n’importe quel pays, ville et opérateur mobile font de nos services de proxy premium le meilleur choix pour les développeurs.
Un proxy pour chaque voie de développement
Combinez réseaux, pairs et IPs pour optimiser votre flux continu de données web.
Tarification du réseau de proxys
Leader de la catégorie des proxys et de la collecte de données
La meilleure expérience client du secteur
De nouvelles fonctionnalités tous les jours
Pour répondre à toutes vos questions quand vous en avez besoin
Tableau de bord des performances en temps réel
Pour optimiser votre performance
Pour atteindre vos objectifs de collecte de données