O Que É a Indústria de Proxies e Por Que Existe

A indústria de proxies não foi construída para hackers. Descubra por que a limitação de taxa de IP levou empresas legítimas em direção à infraestrutura de proxies.

A indústria de proxies existe por causa de uma tensão simples que foi integrada à internet nas últimas duas décadas: sites querem controlar quem acessa seus dados e a que velocidade, e existe uma economia inteira de empresas legítimas que precisam acessar esses dados em uma escala para a qual os sites não foram projetados.

Para entender como chegamos aqui, é preciso voltar ao início da internet. Pelos padrões de hoje, os sites daquele tempo eram extremamente vulneráveis. Mas não era uma grande preocupação na época, porque o conhecimento necessário para atacá-los não era facilmente acessível. À medida que isso mudou, uma nova indústria nasceu para se defender: a cibersegurança.

O Surgimento das Defesas Cibernéticas

A cibersegurança começou focando principalmente em parar o básico. Ataques DoS eram usados para derrubar um site ou serviço concorrente. Violações como injeções SQL, vulnerabilidades IDOR e ataques tipo SSRF eram usados para extrair informações sensíveis de bancos de dados. Com o tempo, a indústria evoluiu, e as defesas também.

Um dos desenvolvimentos mais importantes foi a limitação de taxa baseada em IP. Uma vez que os sites começaram a limitar quantas solicitações um único IP podia fazer, ataques de máquina única deixaram de escalar. Os atacantes tinham outros motivos para se distribuir também, principalmente largura de banda bruta e remover um único ponto de falha, mas a limitação de taxa lhes deu mais um.

DoS cedeu lugar a DDoS (Negação de Serviço Distribuída); as grandes inundações iniciais, como Panix em 1996 e os ataques de fevereiro de 2000 contra Yahoo e eBay, foram impulsionadas principalmente por largura de banda e botnets. Força bruta de credenciais, onde atacantes testam combinações de email/senha roubadas contra sites de alto valor, também não poderia mais ser executada em escala de uma única máquina, e nunca parou: a Akamai ainda conta dezenas de bilhões de tentativas por mês.

Quem Mais Foi Apanhado no Fogo Cruzado

Essa é a parte da história que a maioria das pessoas conhece. Mas o que é menos discutido é quem mais foi apanhado no fogo cruzado.

Em paralelo a tudo isso, uma indústria inteiramente legítima estava crescendo rapidamente. As empresas precisavam:

Monitorar preços de concorrentes em milhares de sites de comércio eletrônico
Verificar se os anúncios estavam sendo exibidos corretamente em diferentes geos
Rastrear rankings de SEO em milhões de palavras-chave
Coletar dados disponíveis publicamente para entender tendências de consumo
Buscar preços de voos e hotéis em tempo real
Digitalizar em busca de falsificações e abuso de marcas

Nenhuma dessas atividades é um ataque. São empresas extraindo dados disponíveis publicamente em escala, para fins dos quais os sites em questão muitas vezes se beneficiam.

O problema é que os mecanismos defensivos que os sites implantam não distinguem entre um atacante malicioso e uma empresa de monitoramento de preços. Ambos parecem "um único IP fazendo muitas solicitações". Captchas, limites de taxa por IP e sistemas de detecção de bots os tratam da mesma forma.

Onde os Proxies Entram

Se seu negócio depende de ser capaz de fazer um alto volume de solicitações, e o site do outro lado está limitando por IP, a solução é distribuir essas solicitações por muitos IPs. Essa é toda a premissa. Você não está contornando a segurança para fins maliciosos; você está roteando tráfego legítimo por IPs suficientemente diferentes para não disparar limites projetados para parar um comportamento bem diferente.

A indústria de proxies existe nessa interseção. Foi necessária pelos avanços de cibersegurança que ajudaram a proteger sites contra atacantes reais, mas esses mesmos avanços também afetaram consumidores legítimos, pesquisadores e empresas de coleta de dados. A indústria de proxies é o que torna possível para essas operações legítimas continuarem funcionando em uma internet onde cada IP é tratado como suspeito até provar o contrário.

Essa é a história honesta de como essa indústria nasceu. Não como uma ferramenta para atacantes, mas como a infraestrutura que permite que a economia legítima de dados continue funcionando.

Se você quer entender exatamente como os proxies funcionam em nível técnico, o próximo artigo cobre isso completamente.

Publicado por Alon Levi, CEO da FlashProxy

Sobre o autor: Alon Levi é o CEO da FlashProxy e possui ampla experiência em infraestrutura de proxies, arquitetura de rede e tecnologias de roteamento de IP em larga escala.

Conecte-se no LinkedIn · Contato: [email protected]

Perguntas Frequentes

Usar um proxy é legal?

Sim. Proxies são ferramentas, e como qualquer ferramenta, sua legalidade depende de como você as usa. Três coisas que valem a pena separar.

Direito penal: nos EUA, fazer scraping de dados disponíveis publicamente geralmente não é uma violação da CFAA, após Van Buren v. United States (2021) e as decisões de hiQ v. LinkedIn.
Direito contratual: os Termos de Serviço de um site ainda podem vinculá-lo, e hiQ acabou perdendo exatamente nisso, pagando ao LinkedIn uma sentença de $500.000 (embora Meta v. Bright Data tenha chegado de outra forma em 2024 para dados públicos coletados enquanto desconectado).
Direito de proteção de dados: se você está coletando dados pessoais, GDPR e CCPA se aplicam independentemente do acima.

Nada disso é aconselhamento jurídico.

Quem usa proxies?

Empresas de comércio eletrônico, firmas de tecnologia publicitária, agregadores de viagens, pesquisadores de cibersegurança, plataformas de SEO e empresas de IA estão entre os usuários de proxies mais comuns.

Por que os sites bloqueiam proxies?

Os sites bloqueiam proxies principalmente para evitar tráfego automatizado excessivo que poderia sobrecarregar seus servidores. A mesma limitação de taxa que para ataques também afeta operações legítimas de coleta de dados.