跳转到主要内容
Web Unlocker 是一个通用的抓取 API。只需发送任意 URL,即可获得完整渲染后的 HTML,或 Markdown、JSON 格式的页面内容,无需自行管理浏览器或代理。 它取代了抓取方案中的浏览器和代理部分:渲染、代理管理和浏览器指纹都通过一次 API 调用完成。静态页面和大量使用 JavaScript 的网站都使用同一个端点。

它解决什么问题

现代网站很难抓取。直接使用 curl 或 requests 调用,往往只会得到空白响应或残缺的 HTML,因为内容是由 JavaScript 加载的。Web Unlocker 负责处理以下问题:
  • JavaScript 渲染 — 页面在真实浏览器中加载,并在完全执行后才抓取内容
  • 智能 IP 轮换 — 请求通过住宅 IP 发送,并带有逼真的浏览器指纹
  • 价格档位定向 — 根据目标网站,将请求路由到合适的代理档位

返回内容

请求成功后,会以一种格式返回页面。可通过 format 查询参数选择格式:

价格

Web Unlocker 采用按成功计费的方式,只有请求成功时才会收费,失败的尝试免费。 价格随用量递减: 如需定制大用量价格,请联系 webunlocker@gologin.com。

Web Unlocker 与自建代理对比

自行搭建代理基础设施成本高且不稳定。Web Unlocker 以托管服务的方式处理一切:

常见使用场景

  • 价格监控 — 追踪电商网站上的价格
  • 市场调研 — 大规模收集商品数据、评论或职位信息
  • 内容聚合 — 从没有 API 的网站构建新闻或数据源
  • AI 流水线 — 将渲染后的 HTML 输入 LLM,用于信息提取或摘要

工作原理

Web Unlocker 会为每个任务在云端运行一个真实的 Chromium 浏览器。当你发送一个 URL 时:
  1. 启动一个使用住宅 IP 和逼真浏览器指纹的浏览器
  2. 访问页面、执行 JavaScript,并加载动态内容
  3. 返回渲染后的 HTML;如果你通过 format 指定,则返回 Markdown 或 JSON
你无需管理任何基础设施:不用启动浏览器,不用维护代理列表,也不用构建渲染逻辑。Web Unlocker 用一次 HTTP 请求,取代了浏览器自动化框架和代理服务商。

使用方法

发送一个 GET 请求,并将目标 URL 作为查询参数。响应内容即为完整渲染后的 HTML。
如需获取 Markdown 或 JSON,请在查询中添加 format=markdown 或 format=json。 有关 Python 和 JavaScript 示例以及错误代码,请参阅快速入门;常见集成模式请参阅使用场景。

CLI 和 SDK

除了原始 HTTP API,Gologin 还提供了更高层的工具来配合 Web Unlocker 使用:
  • Web Unlocker SDK 和 CLI — 精简的 TypeScript SDK(gologin-webunlocker),提供带类型的方法和用于快速抓取的 CLI
  • Gologin Web Access CLI — 将 Web Unlocker 与 Cloud Browser 结合的统一 CLI,支持批量抓取、爬取、搜索、变更追踪和结构化提取
  • AI Skills — 适用于 Claude Code 智能体的即插即用技能

获取访问权限

如需获取 API 密钥,请填写 Web Unlocker 页面上的表单。你将在一个工作日内收到密钥,并获得免费请求额度,用于在你自己的目标网站上测试。无需绑定银行卡。