Ir para o conteúdo principal
Status da rede
Entrar
Piloterr
Voltar à biblioteca

API Website Crawler

Uma solução robusta para extrair eficientemente uma ampla gama de dados de páginas web através de crawling de alto desempenho em modo requisição.

Ativo1 crédito = 1 requisiçãoGET/v2/website/crawler
Experimente o endpoint grátisPiloterr

Visão Geral do Endpoint

Documentação detalhada, preços e exemplos de uso.

Visão geralLink to Visão geral

A API Website Crawler fornece dados de alto desempenho em modo requisição de qualquer página web pública, retornando o conteúdo HTML completo. Ao contrário da renderização baseada em navegador, opera sem execução de JavaScript, tornando-a extremamente rápida e econômica para páginas estáticas ou renderizadas no servidor.

Início rápidoLink to Início rápido

GET https://api.piloterr.com/v2/website/crawler?query=https://example.com

ParâmetrosLink to Parâmetros

Parâmetro Tipo Obrigatório Descrição
query string sim Uma URL de site com o protocolo http ou https
allow_redirects boolean não Se false, não segue redirecionamentos. true por padrão
return_page_source boolean não Se true, retorna o código-fonte HTML bruto. false por padrão

Campos de respostaLink to Campos de resposta

Campo Tipo Descrição
(corpo da resposta) string Conteúdo HTML completo da página web extraída

NotasLink to Notas

  • Para páginas com JavaScript intensivo, utilize Website Rendering ou Website WebUnlocker
  • Apenas respostas HTTP bem-sucedidas contam para o saldo de créditos

Casos de uso principaisLink to Casos de uso principais

  • Extrair páginas de produtos de e-commerce para obter preços, descrições e disponibilidade em escala
  • Monitorar sites concorrentes para detectar mudanças de conteúdo em tempo quase real
  • Extrair conteúdo estruturado de blogs, sites de notícias e diretórios para pipelines de agregação
  • Construir ferramentas de geração de leads rastreando páginas de empresas

APIs Relacionadas

Expanda suas capacidades de dados com essas ferramentas complementares.

Ver Todos
Website Email Phone Extractor/v2/website/email_phone_extractor

Extraia e-mails e números de telefone de sites para obter informações de contato abrangentes, incluindo perfis em mais de 12 plataformas sociais.

GET1 crédito = 1 requisiçãoAtivo
Website Rendering Instructions (POST)/v2/website/rendering

Execute instruções de automação do navegador (scroll, scroll_to_bottom) durante a renderização headless para acionar conteúdo em lazy loading, contornar a detecção de bots e extraer páginas carregadas dinamicamente.

POST2 créditos = 1 requisiçãoAtivo
Website Screenshot/v2/website/screenshot

Screenshot API com renderização tipo navegador: captura páginas em PNG/JPEG/WebP ou PDF para previews, QA, relatórios, monitoramento e arquivamento sem infra headless.

GET2 créditos = 1 requisiçãoAtivo
Website Technology/v2/website/technology

Identifique as tecnologias por trás de qualquer site CMS, frameworks, analytics, CDN, hospedagem — para análise de mercado competitiva e insights tecnológicos.

GET1 crédito = 1 requisiçãoAtivo
Website WebUnlocker/v2/website/webunlocker

WebUnlocker é um híbrido de renderização JS realista e crawling em modo requisição, projetado para contornar sistemas anti-bot avançados em sites com lista branca.

GET3 créditos = 1 requisiçãoAtivo

Pronto para começar?

Sua API de web scraping está a um clique. Comece com +500 créditos, sem infraestrutura para configurar, sem proxies para gerenciar e sem cartão de crédito necessário.

  • +500 créditos
  • Sem cartão de crédito
  • Todos os endpoints incluídos
Comece grátis (+500 créditos)PiloterrFale com um especialista em dados