Obtener clave de API

Scraping web dinámico para páginas que cargan sus datos después

Los feeds infinitos, los botones de "cargar más" y las páginas creadas con JavaScript devuelven una estructura vacía a una solicitud simple. Gologin Cloud Browser las carga como lo hace el navegador de una persona, así que tu script de Playwright o Puppeteer recoge todo lo que aparece.

Gratis para empezar, sin tarjeta. IP residenciales incluidas.

4.7 / 5 en G2según 79 reseñas

Scraping web dinámico: solicitud simple, Chrome headless o navegador en la nube

Una solicitud simple lee el HTML que envía el servidor. Las páginas dinámicas envían los datos después, mediante JavaScript, desplazamiento y clics. Esto es lo que obtiene cada enfoque.

Lo que obtienen de una página dinámica una solicitud HTTP simple, Chrome headless y Gologin Cloud Browser
Lo que obtienesGologinSolicitud HTTP simpleChrome headless
Contenido creado con JavaScriptSíNoSí
Scroll infinito y "cargar más"SíNoSí
Contenido que carga segundos despuésSíNoSí
IP residencial incluidaSíNoNo
La misma sesión en la siguiente ejecuciónSíNoNo
Servidores que mantenerNingunoNingunoLos tuyos

¿Solo necesitas la página renderizada, no una sesión? Web Unlocker la devuelve en una solicitud y solo cobra cuando tiene éxito.

Cómo hacer scraping de un sitio web dinámico con Playwright, Puppeteer o Python

Conecta tu script a Gologin Cloud Browser con una línea, espera al contenido y desplázate hasta que no aparezca nada nuevo. El código de abajo recogió las 100 citas de una página de prueba con scroll infinito.

  1. Paso 01

    Consigue tu token

    Regístrate con Google y copia tu clave desde el panel. Gratis, sin tarjeta.

  2. Paso 02

    Crea un perfil

    Un clic en el panel o una llamada a la API. El perfil guarda el dispositivo, la IP y el inicio de sesión.

  3. Paso 03

    Ejecuta el script

    Instala la biblioteca y ejecuta el script de abajo con tu token y el id de tu perfil. Se desplaza hasta que no cargan más citas y después recoge cada una con su autor. Más información en la guía de inicio.

Instalar
npm install playwright-core
Ejecutar
GOLOGIN_TOKEN=your_token GOLOGIN_PROFILE_ID=your_profile_id node scrape.mjs
Se conecta a
wss://cloudbrowser.gologin.com/connect?token=…&profile=…
import { chromium } from "playwright-core";

const token = process.env.GOLOGIN_TOKEN;
const profileId = process.env.GOLOGIN_PROFILE_ID;
const endpoint = `wss://cloudbrowser.gologin.com/connect?token=${token}&profile=${profileId}`;

const browser = await chromium.connectOverCDP(endpoint);
const page = await browser.contexts()[0].newPage();

await page.goto("http://quotes.toscrape.com/scroll");
await page.waitForSelector(".quote");

for (let i = 0; i < 30; i++) {
  const before = await page.locator(".quote").count();
  await page.evaluate(() => window.scrollTo(0, document.body.scrollHeight));
  try {
    await page.waitForFunction(
      (n) => document.querySelectorAll(".quote").length > n,
      before,
      { timeout: 3000 }
    );
  } catch {
    break;
  }
}

const quotes = await page.$$eval(".quote", (els) =>
  els.map((el) => ({
    text: el.querySelector(".text")?.textContent,
    author: el.querySelector(".author")?.textContent,
  }))
);
console.log(quotes.length, quotes[0]);

await page.close();
await browser.close();

Planes y precios

Todos los planes usan el mismo navegador, con IP residenciales incluidas. Los planes se diferencian en horas de navegador y sesiones en paralelo.

¿Necesitas más a la vez? Añade sesiones en paralelo a cualquier plan por $2 al mes cada una, tantas como necesites. El tráfico de proxy por encima de tu cuota cuesta $1/GB.

Custom

Desde 4 sesiones en paralelo, con un gestor de cuenta dedicado, un SLA premium y una incorporación a medida.

Reservar una demo

Parte de un stack tecnológico completo

Una cuenta, una red de proxies, un ecosistema. Elige el producto que necesita cada tarea.

Preguntas sobre scraping web dinámico

¿Qué es el scraping web dinámico?

Recoger datos de páginas que construyen su contenido en el navegador: feeds, resultados de búsqueda, precios o reseñas que aparecen después de cargar la página, al desplazarse o tras un clic. Necesitas un navegador real que ejecute la página antes de poder leerla.

¿Por qué mi scraper devuelve HTML vacío en sitios con JavaScript?

El servidor envía una estructura vacía y los datos llegan después mediante JavaScript. Una solicitud simple se queda en esa estructura, así que los datos nunca están ahí para analizarlos. Carga la página en un navegador y espera al elemento que necesitas, como hacen los scripts de arriba.

¿Necesito Cloud Browser o Web Unlocker?

Usa Web Unlocker cuando necesites la página renderizada a partir de una URL: una solicitud, que solo se cobra si tiene éxito. Usa Cloud Browser cuando la tarea necesite una sesión: desplazarse por un feed, hacer clic entre páginas o mantener la sesión iniciada entre ejecuciones.

¿Cómo hago scraping de un scroll infinito?

Desplázate hasta el final, espera a que aparezcan elementos nuevos y repite hasta que el número deje de crecer. Los scripts de arriba hacen exactamente eso y se detienen solos cuando no carga nada nuevo.

¿Puedo hacer scraping de páginas que requieren iniciar sesión?

Sí. Inicia sesión una vez en un perfil y la sesión se queda en él: vuelve a conectarte más tarde y seguirás con la sesión iniciada. ¿Necesitas un mismo inicio de sesión en varios navegadores? Consulta Navegador para scraping. Recoge solo datos a los que tengas permiso para acceder.

¿Puedo hacer scraping web dinámico con Python?

Sí. Playwright para Python se conecta a la misma dirección con connect_over_cdp, y la pestaña Python de arriba tiene el script completo. Instálalo con pip install playwright; no hace falta descargar un navegador local, porque el navegador funciona en la nube.

Extrae los datos que cargan después de la página.

Conecta tu script de Playwright o Puppeteer con una línea y recoge lo que ve un navegador real.

Gratis para empezar, sin tarjeta. IP residenciales incluidas.

4.7 / 5 en G2según 79 reseñas