Passer au contenu principal
Web Unlocker est une API de scraping : vous envoyez une URL, elle renvoie le HTML entièrement rendu. Cette page présente les façons les plus courantes de l’utiliser.

Scraper une page vous-même

Le cas le plus simple : vous avez besoin du contenu d’une page web qui bloque les requêtes HTTP classiques.

Python

JavaScript

Pas de navigateur à lancer, pas de proxy à configurer. Un seul appel, et vous obtenez la page. Idéal pour :
  • Vérifier les prix sur le site d’un concurrent
  • Récupérer des offres d’emploi, des avis ou des données produit
  • Surveiller les modifications de pages
  • Créer des scripts de collecte de données ponctuels

Alimenter une IA avec du contenu

Web Unlocker renvoie du HTML brut. Transmettez-le à un LLM pour extraire des données structurées, résumer du contenu ou répondre à des questions sur la page, sans aucune logique d’analyse à écrire.
Pour envoyer moins de balisage au modèle, ajoutez format=markdown à la requête : vous obtiendrez la page en Markdown plutôt qu’en HTML.

Python + OpenAI

JavaScript + Anthropic

Idéal pour :
  • Extraire des données structurées (prix, noms, dates) sans écrire de parseurs
  • Résumer des articles ou des fiches produit
  • Comparer plusieurs pages et en tirer des conclusions
  • Créer des outils de recherche ou de veille basés sur l’IA

L’utiliser dans un agent IA

Donnez à votre agent IA un outil scrape reposant sur Web Unlocker. L’agent peut alors naviguer sur le web de façon autonome : récupérer des pages, lire leur contenu et agir, sans que vous ayez à écrire de logique de navigation.
L’agent décide quand scraper et quelle URL récupérer. Web Unlocker se charge de la récupération proprement dite. Idéal pour :
  • Les agents de recherche qui naviguent sur le web de manière autonome
  • Les bots de comparaison de prix ou de recherche de bonnes affaires
  • Les pipelines de veille concurrentielle
  • Tout agent ayant besoin de données web en temps réel

Scraper plusieurs pages à la fois

Lancez des requêtes en parallèle pour collecter les données de plusieurs URL simultanément.
Idéal pour :
  • Scraper des catalogues produits ou des pages de listing entiers
  • Collecter des données en masse pour constituer des jeux d’entraînement
  • Surveiller de nombreuses pages simultanément

L’utiliser depuis la CLI

Plus besoin d’écrire du code : utilisez la CLI Gologin Web Access pour les workflows de scraping courants :
Consultez Web Access CLI pour la référence complète des commandes.

Récapitulatif

Consultez le Démarrage rapide pour effectuer votre première requête.