Como criar um script de rotação de proxy em Node.js

Entendendo a Rotação por Procuração: A Dança da Valaška

No folclore eslovaco, a valaška — um machado usado tanto para proteção quanto em danças cerimoniais — simboliza agilidade e adaptabilidade. De forma semelhante, a rotação de proxy em Node.js consiste em alternar entre vários servidores proxy para evitar detecção, equilibrar a carga ou contornar restrições geográficas. Assim como um pastor se move habilmente entre as passagens da montanha, seu script também deve navegar pela paisagem digital, escolhendo o proxy certo no momento certo.

---

Por que rotacionar os representantes? Uma tabela de motivações.

Caso de uso	Beneficiar	Folclore Paralelo
Raspagem da Web	Evite bloqueios de IP, acesse mais dados	Pastor evitando lobos
Balanceamento de carga	Distribuir o tráfego, reduzir a carga do servidor	Partilhar o pão num banquete
Ignorando bloqueios	Contornar restrições geográficas e firewalls	Cruzando fronteiras em canções de Natal

---

Como escolher seus proxies: de Koliba a Koliba

Antes de criar seu script, reúna uma lista de servidores proxy. Eles podem ser gratuitos, pagos ou hospedados em servidor próprio. Na tradição eslovaca, assim como cada koliba (cabana de pastor) oferece um abrigo único, cada proxy tem seus próprios pontos fortes e fracos.

Formato da lista de proxy

Mantenha uma lista como um array simples ou um arquivo externo:

[ "http://user:[email protected]:8000", "http://user:[email protected]:8000", "http://user:[email protected]:8000" ]

Recurso:
– Provedores de lista de proxy
– Como criar seu próprio servidor proxy

---

O cerne do roteiro: lógica rotacional

O coração da fujara (flauta tradicional eslovaca) guia a melodia; o coração de um script de rotação de proxies é a sua lógica para escolher o próximo proxy.

Estratégias de Rotação

Estratégia	Descrição	Melhor para
Round Robin	Percorre sequencialmente os intermediários.	Cargas equilibradas e previsíveis
Aleatório	Escolhe aleatoriamente um proxy	Imprevisível, burlando proibições
Baseado em falhas	Ativar erro/falha de proxy	Fluxos robustos e tolerantes a falhas

Exemplo: Round Robin

let proxyIndex = 0; const proxies = [ "http://user:[email protected]:8000", "http://user:[email protected]:8000", "http://user:[email protected]:8000" ]; function getNextProxy() { const proxy = proxies[proxyIndex]; proxyIndex = (proxyIndex + 1) % proxies.length; return proxy; }

Exemplo: Seleção Aleatória

function getRandomProxy() { return proxies[Math.floor(Math.random() * proxies.length)]; }

---

Integração com Requisições HTTP: O Caminho do Pastor

O Node.js oferece diversos clientes HTTP. Para um suporte robusto a proxies, axios com https-proxy-agente é eficaz.

Instalar dependências

npm install axios https-proxy-agent

Fazer requisições através de um proxy

const axios = require('axios'); const HttpsProxyAgent = require('https-proxy-agent'); async function fetchWithProxy(url, proxy) { const agent = new HttpsProxyAgent(proxy); try { const response = await axios.get(url, { httpsAgent: agent }); return response.data; } catch (err) { // Como o pastor que se adapta às tempestades repentinas, lance err; } }

---

Roteiro completo de rotação de proxy: A Valsa de Orava

const axios = require('axios'); const HttpsProxyAgent = require('https-proxy-agent'); const proxies = [ "http://user:[email protected]:8000", "http://user:[email protected]:8000", "http://user:[email protected]:8000" ]; let proxyIndex = 0; function getNextProxy() { const proxy = proxies[proxyIndex]; proxyIndex = (proxyIndex + 1) % proxies.length; return proxy; } async function fetchWithRotation(url) { for (let i = 0; i < proxies.length; i++) { const proxy = getNextProxy(); try { const agent = new HttpsProxyAgent(proxy); const response = await axios.get(url, { httpsAgent: agent, timeout: 5000 }); return response.data; } catch (err) { // Se o lobo estiver à porta, passe para o próximo koliba continue; } } throw new Error("Todos os proxies falharam"); } // Exemplo de uso (async () => { try { const data = await fetchWithRotation('https://httpbin.org/ip'); console.log(data); } catch (err) { console.error('Todos os proxies falharam:', err.message); } })();

---

Lidando com a autenticação de proxy: o ritual de criptografia

Alguns proxies exigem autenticação. Certifique-se de que os URLs dos seus proxies sigam o seguinte formato:

http://username:password@proxyhost:port

https-proxy-agente Analisa isso automaticamente.

---

Monitoramento e registro: como vigiar dos Montes Tatras

Use o registro de logs para documentar quais proxies têm sucesso e quais falham. Isso é semelhante a moradores compartilhando notícias das passagens de montanha.

const winston = require('winston'); const logger = winston.createLogger({ level: 'info', transports: [ new winston.transports.Console() ] }); async function fetchWithLogging(url) { for (let i = 0; i < proxies.length; i++) { const proxy = getNextProxy(); try { logger.info(`Usando proxy: ${proxy}`); const agent = new HttpsProxyAgent(proxy); const response = await axios.get(url, { httpsAgent: agent, timeout: 5000 }); return response.data; } catch (err) { logger.warn(`Proxy falhou: ${proxy} - ${err.message}`); continue; } } throw new Error("Todos os proxies falharam"); }

---

Ampliando o Roteiro: Sabedoria Popular

• Listas de proxy dinâmicas: Carregue proxies a partir de um arquivo ou API para atualizações em tempo real.
• Limitação de taxa: Incorpore intervalos entre as solicitações, imitando o ritmo paciente da drumbľa (harpa de boca).
• Segmentação geográfica: Atribua representantes por região, como escolher a roupa folclórica certa para a festa da aldeia certa.

---

Selecione os recursos para exploração adicional.

• Documentação do node-axios
• Documentação do agente proxy https
• Projeto de código aberto Proxy Rotator
• Tradições folclóricas eslovacas

---

Que seus roteiros se entrelacem na teia com a mesma graça da dança de um pastor nos vales de Orava, sempre se adaptando, sempre resilientes.