Ir para o conteúdo principal
Piloterr
Voltar à biblioteca

API Website Crawler (POST)

Rastreie sites web e endpoints API por URL e obtenha respostas JSON estruturadas via POST.

Ativo1 crédito = 1 requisiçãoPOST/v2/website/crawler

Visão Geral do Endpoint

Documentação detalhada, preços e exemplos de uso.

Visão geralLink to Visão geral

A API Website Crawler (POST) obtém dados de qualquer URL de site web ou API e devolve a resposta como JSON estruturado. Envie um pedido POST com a URL alvo em query e receba o conteúdo parseado.

Ideal para monitorização de APIs, pipelines de dados e automatização sem infraestrutura própria de crawling.

Início rápidoLink to Início rápido

POST https://api.piloterr.com/v2/website/crawler
Content-Type: application/json

{"query": "https://www.example.com/api/data"}

ParâmetrosLink to Parâmetros

Parâmetro Tipo Obrigatório Descrição
query string sim URL alvo (site web ou endpoint API)

Apenas POST.

Casos de uso principaisLink to Casos de uso principais

  • Consultar APIs externas e sites web sem crawler próprio
  • Alimentar pipelines de monitorização com dados web ao vivo
  • Integração de dados a partir de endpoints não documentados
  • Prototipagem e análise de respostas de APIs web

APIs Relacionadas

Expanda suas capacidades de dados com essas ferramentas complementares.

Website Antibot/v2/website/antibot

Detecte qual proteção anti-bot protege um site antes de scrapear. Vendor, confiança e pistas em uma única consulta.

GET1 crédito = 1 requisiçãoAtivo
Website Crawler/v2/website/crawler

Fetch public pages with fast HTTP crawling (no JavaScript). Best first choice for static or server-rendered HTML; use Rendering or WebUnlocker when JS or anti-bot blocks you.

GET1 crédito = 1 requisiçãoAtivo
Website Email Phone Extractor/v2/website/email_phone_extractor

Extraia e-mails e números de telefone de sites para obter informações de contato abrangentes, incluindo perfis em mais de 12 plataformas sociais.

GET1 crédito = 1 requisiçãoAtivo
Website Rendering/v2/website/rendering

Render JavaScript-heavy pages in a headless browser and return post-render HTML. Use when Crawler returns empty DOM; escalate to WebUnlocker if bot protection blocks the session.

GET2 créditos = 1 requisiçãoAtivo
Website Rendering Instructions (POST)/v2/website/rendering

Execute instruções de automação do navegador (scroll, scroll_to_bottom) durante a renderização headless para acionar conteúdo em lazy loading, contornar a detecção de bots e extraer páginas carregadas dinamicamente.

POST2 créditos = 1 requisiçãoAtivo
Website Screenshot/v2/website/screenshot

Screenshot API com renderização tipo navegador: captura páginas em PNG/JPEG/WebP ou PDF para previews, QA, relatórios, monitoramento e arquivamento sem infra headless.

GET2 créditos = 1 requisiçãoAtivo
Website Technology/v2/website/technology

Identifique as tecnologias por trás de qualquer site CMS, frameworks, analytics, CDN, hospedagem: para análise de mercado competitiva e insights tecnológicos.

GET1 crédito = 1 requisiçãoAtivo
Website WebUnlocker/v2/website/webunlocker

Bypass advanced anti-bot systems (Cloudflare, DataDome, Akamai, PerimeterX) on whitelisted domains. Combines browser rendering and unlock tooling; use after Crawler and Rendering fail.

GET3 créditos = 1 requisiçãoAtivo
Website WebUnlocker (POST)/v2/website/webunlocker

Envie pedidos POST para sites ou APIs na lista branca através do WebUnlocker para contornar proteção anti-bot avançada e obter a resposta upstream.

POST3 créditos = 1 requisiçãoAtivo

Pronto para começar?

Sua API de web scraping está a um clique. Comece com +500 créditos, sem infraestrutura para configurar, sem proxies para gerenciar e sem cartão de crédito necessário.

  • +500 créditos
  • Sem cartão de crédito
  • Todos os endpoints incluídos