Aller au contenu principal
État du réseau
Se connecter
Piloterr
Retour à la bibliothèque

API Website WebUnlocker

Contournez les anti-bots avancés (Cloudflare, DataDome, Akamai, PerimeterX) sur domaines whitelistés. Combine rendu navigateur et unlock ; à utiliser après échec de Crawler et Rendering.

Actif3 crédits = 1 requêteGET/v2/website/webunlocker
Essayer l'endpoint gratuitementPiloterr

Vue d'ensemble de l'endpoint

Documentation détaillée, tarifs et exemples d'utilisation.

Choisir le bon endpointLink to Choisir le bon endpoint

Trois moteurs complémentaires permettent de récupérer une page publique. Prenez le plus léger qui fonctionne sur votre cible.

Endpoint Moteur Crédits Quand l'utiliser
Website Crawler Requête HTTP (sans JavaScript) 1 Le HTML utile est déjà dans la première réponse : blogs, docs, pages catalogue SSR, sitemaps.
Website Rendering Navigateur headless (JavaScript exécuté) 2 Le contenu n'apparaît qu'après JS : SPA React/Vue/Angular, listes lazy-load, besoin de wait_for ou de browser_instructions (POST).
Website WebUnlocker Navigateur + stack unlock 3 Website Rendering ou Website Crawler se heurtent à un anti-bot (Cloudflare, DataDome, Akamai, PerimeterX) et le domaine est sur Piloterr's approved whitelist.

Arbre de décision

  1. Commencez par Crawler si vous n'avez pas besoin de rendu client. C'est le plus rapide et le moins cher.
  2. Passez à Rendering si le DOM est vide, si les prix chargent en AJAX, ou si vous devez attendre un sélecteur / exécuter des actions navigateur.
  3. N'utilisez WebUnlocker que pour les domaines retail/marketplace verrouillés qui bloquent un navigateur classique. Whitelist obligatoire avant la prod.

Voir aussi : Website Scraping guide.

Vue d'ensembleLink to Vue d'ensemble

Website WebUnlocker est le niveau le plus élevé de la stack website. Il combine rendu headless et couche unlock calibrée pour les bot managers enterprise. À utiliser quand :

Whitelist obligatoire : le hostname cible doit être approuvé sur Piloterr's approved whitelist. Contact Piloterr support pour demander de nouveaux domaines.

Beta : comportement et domaines supportés susceptibles d'évoluer.

Coût : 3 crédits par appel réussi.

Démarrage rapideLink to Démarrage rapide

GET https://api.piloterr.com/v2/website/webunlocker?query=https://www.norauto.fr/t/pneu/w-185-h-55-r-14/ete-s/80-l-h-q.html

ParamètresLink to Paramètres

Paramètre Type Requis Description
query string oui URL publique (http/https). Domaine whitelisté
allow_redirects boolean non Suit les redirections si true (défaut)
return_page_source boolean non HTML brut si true. Défaut false

RéponseLink to Réponse

Champ Description
Corps de réponse HTML après contournement anti-bot

Endpoints liésLink to Endpoints liés

Situation Endpoint
Pas de mur anti-bot avancé Website Crawler ou Website Rendering (moins cher)
Tester quel moteur convient Website Antibot
Détecter la stack d'une URL Website Technology

Exemples de domaines whitelistés : mobile.de, leroymerlin.fr, norauto.fr.

NotesLink to Notes

  • Ne commencez pas par WebUnlocker : validez Crawler puis Rendering pour économiser des crédits.
  • Whitelist par domaine ; les sous-domaines peuvent nécessiter une approbation séparée.
  • Pour du rendu JS sans whitelist, utilisez Website Rendering.

Cas d'usageLink to Cas d'usage

  • Fiches produit sur retailers protégés DataDome ou Akamai
  • Marketplaces auto / bricolage sur domaines approuvés
  • Pipelines où Rendering renvoie systématiquement un challenge
  • Veille prix sur e-commerce durci

API associées

Étendez vos capacités data avec ces outils complémentaires.

Tout voir
Website Antibot/v2/website/antibot

Détectez quelle protection anti-bot protège un site avant de scraper. Obtenez le vendor, le niveau de confiance et les indices détectés en une requête.

GET1 crédit = 1 requêteActif
Website Crawler (POST)/v2/website/crawler

Explorez sites web et endpoints API par URL et obtenez des réponses JSON structurées via POST.

POST1 crédit = 1 requêteActif
Website Crawler/v2/website/crawler

Récupérez des pages publiques en crawl HTTP rapide (sans JavaScript). Premier choix pour le HTML statique ou SSR ; passez à Rendering ou WebUnlocker si le JS ou l'anti-bot bloque.

GET1 crédit = 1 requêteActif
Website Email Phone Extractor/v2/website/email_phone_extractor

Extrayez les e-mails et numéros de téléphone de n'importe quel site web pour obtenir des informations de contact complètes, y compris les profils sur 12+ plateformes sociales.

GET1 crédit = 1 requêteActif
Website Rendering/v2/website/rendering

Rendez les pages JavaScript dans un navigateur headless et récupérez le HTML post-rendu. À utiliser quand Crawler renvoie un DOM vide ; passez à WebUnlocker si l'anti-bot bloque la session.

GET2 crédits = 1 requêteActif
Website Rendering Instructions (POST)/v2/website/rendering

Exécutez des instructions d'automatisation navigateur (scroll, scroll_to_bottom) pendant le rendu headless pour déclencher le contenu en lazy loading, contourner la détection de bots et données des pages chargées dynamiquement.

POST2 crédits = 1 requêteActif
Website Screenshot/v2/website/screenshot

Extrayez des données Website Screenshot pour intégration en temps réel, analyse de marché et automatisation.

GET2 crédits = 1 requêteActif
Website Technology/v2/website/technology

Identifiez les technologies derrière n'importe quel site web CMS, frameworks, analytics, CDN, hébergement: pour une analyse de marché concurrentielle.

GET1 crédit = 1 requêteActif
Website WebUnlocker (POST)/v2/website/webunlocker

Envoyez des requêtes POST vers des sites ou APIs whitelistés via WebUnlocker pour contourner les protections anti-bot avancées et récupérer la réponse amont.

POST3 crédits = 1 requêteActif

Prêt à commencer ?

Votre API de scraping web est à un clic. Commencez avec +500 crédits, sans infrastructure à gérer, sans proxies à configurer, et sans carte bancaire.

  • +500 crédits
  • Aucune carte bancaire requise
  • Tous les endpoints inclus
Commencer gratuitement (+500 crédits)PiloterrParler à un expert