Integração do Apify Proxy
O uso de proxies Bright Data com Apify aumenta a eficiência do Scraping de dados, garantindo a extração segura e anônima de dados e reduzindo o risco de bloqueios e detecção de IP.
Este guia pode estar desatualizado. Para obter um guia atualizado, consulte nossa documentação.
- 400M+ IPs residencialis
- Sessões fixas e rotativas
- Taxa de sucesso de 99,95%
- Segmentação por localização geográfica - GRÁTIS
O que é o Apify?
O Apify é uma poderosa plataforma de Scraping de dados e RPA na web. Ele pode automatizar tudo o que você pode fazer manualmente em um navegador da web e executá-lo em escala. A Apify Store tem centenas de ferramentas de scraping prontas para uso que exigem apenas que você altere algumas configurações.
Os proxies costumam ser uma parte essencial do Scraping de dados. Você deve sempre proteger sua identidade ao fazer Scraping de dados e também pode precisar lidar com medidas anti-scraping e outras restrições implementadas pelo site de destino.
É aí que entra a Bright Data 💪
Os proxies da Bright Data podem ajudá-lo a concluir com sucesso suas tarefas de scraping e automação. Os proxies da Bright Data se integram perfeitamente ao Apify para que você possa realizar seu trabalho sem ser bloqueado.
Como configurar o Apify
com proxies Bright Data:
Acesse Bright Data:
- Faça login na sua conta Bright Data e acesse o painel
- Clique em Proxy & Infra e crie uma zona
- Você pode escolher entre Datacenter, Residencial, ISP e IPs móveis
- Configure e crie a zona de acordo com os requisitos do seu projeto
- Clique no ícone Configurações ao lado do nome da zona.
- Obtenha o nome de usuário e a senha.
Acesse o Apify:
- Acesse apify.com e faça login na sua conta.
- Quando estiver no Console Apify, clique em Atores no menu à esquerda.
- Na guia Loja, você encontrará o Scraper. Usaremos isso como nosso exemplo. Clique nele.
- Navegue até a guia Entrada.
- Insira lumtest como URL inicial para extrair: https://lumtest.com/myip.json
- Na função Página, cole este código:
async function pageFunction(context) {
// jQuery é útil para localizar elementos DOM e extrair dados deles.
// Para usá-lo, certifique-se de habilitar a opção "Injetar jQuery".
const $ = context.jQuery;
// Selecione o elemento usando o seletor CSS 'body > pre' e extraia seu conteúdo de texto.
const data = $('body > pre').text();
// Retorne um objeto com os dados extraídos. Ele será armazenado no conjunto de dados resultante.
return {
data: data
};
}
- Em seguida, role para baixo para encontrar a configuração do Proxy e do navegador.
- Clique em seu próprio Proxy e insira suas credenciais de Proxy no seguinte formato.
- http://username:[email protected]:33335 e a senha podem ser obtidos nas configurações da zona que acabamos de criar.
- O nome do host para proxies Bright Data é:brd.superproxy.io e a porta é 33335.
- Esta é a aparência final da URL do Proxy Bright Data: http://lum-customer-c_375eb5c4-zona-zone5:[email protected]:33335
- Em seguida, basta clicar em Iniciar.
- Você pode então visualizar e baixar os dados como HTML, JSON, CSV, Excel, XML e feed RSS, ou visualizá-los na guia de saída
- Para confirmar que o Apify usou o Proxy, acesse o painel do Bright Data, navegue até Proxy e verifique o Log de eventos.
⚠️Observação importante: se você estiver usando os Proxies residenciais, o Web Unlocker ou a API SERP da Bright Data, será necessário instalar um certificado SSL para habilitar conexões seguras de ponta a ponta com seus sites de destino. Esse é um processo simples. Consulte https://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificate para obter instruções.
Obtenha proxies para o Apify
Alimenté par une infrastructure de proxy résidentiel primée
Plus de 400M+ monthly d’adresses IP résidentielles, la meilleure technologie avec la possibilité de cibler n’importe quel pays, ville et opérateur mobile font de nos services de proxy premium le meilleur choix pour les développeurs.
Un proxy pour chaque voie de développement
Combinez réseaux, pairs et IPs pour optimiser votre flux continu de données web.
Proxy Network Pricing
Leader de la catégorie des proxys et de la collecte de données
La meilleure expérience client du secteur
De nouvelles fonctionnalités tous les jours
Pour répondre à toutes vos questions quand vous en avez besoin
Tableau de bord des performances en temps réel
Pour optimiser votre performance
Pour atteindre vos objectifs de collecte de données