Web Scraping

    Scraping iFood e Rappi: preços e disponibilidade

    Veja como organizar a coleta autorizada de preços e disponibilidade no iFood e Rappi, com proxy, limites de requisições e medição por GB no painel.

    04 de junho de 20267 min de leituraPostado por: Equipe RH7
    Capa do post “Scraping iFood e Rappi: preços e disponibilidade”, categoria Scraping, com identidade visual RH7.
    Compartilhar
    Sumário do artigo

    Para comparar produtos e preços, acesse a página principal de proxy para raspagem de dados. Este guia detalha a configuração específica do tema.

    Requisitos do acesso autorizado

    Use fontes próprias ou autorizadas e APIs documentadas quando disponíveis. Confirme as condições da fonte antes de coletar. Interrompa a tarefa se houver recusa de acesso ou verificação, respeite os limites e procure os canais oficiais em vez de trocar identidade para continuar. Registre localização, horário, escopo permitido e consumo de dados.

    A arquitetura de dados do iFood e Rappi

    Proxy residencial rotativa

    Teste com 1 GB

    R$ 9,90 por 1 GB

    Teste com 1 GB

    As plataformas de delivery operam com sistemas baseados em geolocalização. Isso significa que o conteúdo exibido - restaurantes disponíveis, taxas de entrega e promoções - muda drasticamente a cada poucos quilômetros. Para o desenvolvedor, isso significa que não basta acessar a URL; é preciso enviar as coordenadas de latitude e longitude corretas ou utilizar endereços validados via API.

    No iFood, os dados são geralmente carregados via requisições assíncronas para APIs internas que retornam JSON. O Rappi segue uma lógica similar, mas com uma estrutura de DOM (Document Object Model) que costuma ser mais pesada e dependente de renderização de JavaScript. Entender se você deve focar no parsing das requisições de rede (Network sniffing) ou na simulação de navegador (Headless Browsing) é o primeiro passo para o sucesso do projeto.

    O monitoramento de preços exige precisão cirúrgica. Um restaurante pode ter preços diferentes para o mesmo item dependendo da "bolha" de entrega em que o usuário está inserido. Portanto, o scraping deve ser segmentado por clusters de CEPs para garantir que a visão competitiva seja fidedigna à realidade do consumidor final.

    Requisitos do acesso autorizado

    Use fontes próprias ou autorizadas e APIs documentadas quando disponíveis. Confirme as condições da fonte antes de coletar. Interrompa a tarefa se houver recusa de acesso ou verificação, respeite os limites e procure os canais oficiais em vez de trocar identidade para continuar. Registre localização, horário, escopo permitido e consumo de dados.

    Requisitos do acesso autorizado

    Use fontes próprias ou autorizadas e APIs documentadas quando disponíveis. Confirme as condições da fonte antes de coletar. Interrompa a tarefa se houver recusa de acesso ou verificação, respeite os limites e procure os canais oficiais em vez de trocar identidade para continuar. Registre localização, horário, escopo permitido e consumo de dados.

    Coleta de cardápios e preços via Python e Selenium

    Abaixo, um exemplo conceitual de como estruturar uma requisição usando Selenium e uma infraestrutura de proxies para acessar dados públicos. Observe que a gestão de cookies é vital para manter a sessão ativa durante a navegação entre categorias de produtos.

    from selenium import webdriver
    from selenium.webdriver.chrome.options import Options
    
    def get_ifood_data(url, proxy_url):
        chrome_options = Options()
        chrome_options.add_argument(f'--proxy-server={proxy_url}')
        chrome_options.add_argument("--headless") # Opcional
        chrome_options.add_argument("user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/119.0.0.0 Safari/537.36")
    
        driver = webdriver.Chrome(options=chrome_options)
        
        try:
            driver.get(url)
            # Lógica para aguardar o carregamento e extrair elementos
            items = driver.find_elements(By.CSS_SELECTOR, ".item-card-container")
            for item in items:
                name = item.find_element(By.CSS_SELECTOR, ".item-card__description").text
                price = item.find_element(By.CSS_SELECTOR, ".item-card__price").text
                print(f"Produto: {name} - Preço: {price}")
        finally:
            driver.quit()
    

    Para validar se sua rota de proxy está funcionando corretamente antes de iniciar o script de scraping, você pode utilizar o proxy-tester para garantir que o IP de saída é, de fato, do Brasil.

    Manipulação de geolocalização e coordenadas

    O iFood armazena a localização do usuário em cookies e no localStorage. Ao fazer scraping, você deve primeiro "setar" o endereço. Isso pode ser feito enviando uma requisição POST com o CEP para o endpoint de geocodificação da plataforma ou manipulando as coordenadas geográficas diretamente no navegador.

    No Rappi, a estrutura de URLs muitas vezes contém a cidade ou o bairro, mas a validação final ocorre no lado do servidor com base no IP. Por isso, utilizar proxies mobile com segmentação por cidade é o "pulo do gato" para obter preços exatos de regiões específicas como São Paulo (Capital) ou Rio de Janeiro.

    Sempre verifique o seu IP atual em nível de script acessando meu-ip para confirmar que o vazamento de DNS (DNS Leak) não está ocorrendo, o que revelaria seu IP real de servidor para o WAF do iFood.

    Extração de tempo de entrega e taxas variáveis

    Um dos dados mais voláteis no scraping de delivery é o tempo de entrega. Ele muda minuto a minuto com base na quantidade de entregadores disponíveis e na demanda do restaurante. Para coletar essa informação com precisão:

    1. Frequência: As requisições devem ser feitas em intervalos regulares (ex: a cada 15 minutos) para capturar a curva de variação.
    2. Concorrência: Implemente threading ou processamento assíncrono para consultar múltiplas lojas simultaneamente.
    3. Tratamento de Erros: Se uma loja aparecer como "Fechada", verifique se o IP não está sofrendo throttling (limitação de taxa).

    Os dados de taxas de entrega geralmente são calculados no checkpoint final (carrinho) ou exibidos no cabeçalho da loja. Capturar o JSON de resposta da API de "fee-calculator" é muito mais eficiente do que tentar ler o texto renderizado na tela.

    Requisitos do acesso autorizado

    Use fontes próprias ou autorizadas e APIs documentadas quando disponíveis. Confirme as condições da fonte antes de coletar. Interrompa a tarefa se houver recusa de acesso ou verificação, respeite os limites e procure os canais oficiais em vez de trocar identidade para continuar. Registre localização, horário, escopo permitido e consumo de dados.

    Requisitos do acesso autorizado

    Use fontes próprias ou autorizadas e APIs documentadas quando disponíveis. Confirme as condições da fonte antes de coletar. Interrompa a tarefa se houver recusa de acesso ou verificação, respeite os limites e procure os canais oficiais em vez de trocar identidade para continuar. Registre localização, horário, escopo permitido e consumo de dados.

    Requisitos do acesso autorizado

    Use fontes próprias ou autorizadas e APIs documentadas quando disponíveis. Confirme as condições da fonte antes de coletar. Interrompa a tarefa se houver recusa de acesso ou verificação, respeite os limites e procure os canais oficiais em vez de trocar identidade para continuar. Registre localização, horário, escopo permitido e consumo de dados.

    Proxy residencial rotativa

    Teste com 1 GB

    R$ 9,90 por 1 GB

    Teste com 1 GB
    RH7 Proxys

    Sobre o autor

    Equipe RH7

    Equipe da RH7 Proxys: proxies residenciais, mobile e Rotativa CPA com suporte humano 24/7 em português.

    Gostou do conteúdo?

    Compartilhe este artigo com quem precisa ler.

    Newsletter RH7

    Quer mais conteúdo como esse?

    Receba 1 email por semana com cases, scripts e bastidores.

    Receba novos guias técnicos

    1 e-mail por semana, conteúdo prático sobre proxies, scraping e operações.