它解决什么问题
现代网站很难抓取。直接使用curl 或 requests 调用,往往只会得到空白响应或残缺的 HTML,因为内容是由 JavaScript 加载的。Web Unlocker 负责处理以下问题:
- JavaScript 渲染 — 页面在真实浏览器中加载,并在完全执行后才抓取内容
- 智能 IP 轮换 — 请求通过住宅 IP 发送,并带有逼真的浏览器指纹
- 价格档位定向 — 根据目标网站,将请求路由到合适的代理档位
返回内容
请求成功后,会以一种格式返回页面。可通过format 查询参数选择格式:
价格
Web Unlocker 采用按成功计费的方式,只有请求成功时才会收费,失败的尝试免费。 价格随用量递减:
如需定制大用量价格,请联系 webunlocker@gologin.com。
Web Unlocker 与自建代理对比
自行搭建代理基础设施成本高且不稳定。Web Unlocker 以托管服务的方式处理一切:常见使用场景
- 价格监控 — 追踪电商网站上的价格
- 市场调研 — 大规模收集商品数据、评论或职位信息
- 内容聚合 — 从没有 API 的网站构建新闻或数据源
- AI 流水线 — 将渲染后的 HTML 输入 LLM,用于信息提取或摘要
工作原理
Web Unlocker 会为每个任务在云端运行一个真实的 Chromium 浏览器。当你发送一个 URL 时:- 启动一个使用住宅 IP 和逼真浏览器指纹的浏览器
- 访问页面、执行 JavaScript,并加载动态内容
- 返回渲染后的 HTML;如果你通过
format指定,则返回 Markdown 或 JSON
使用方法
发送一个 GET 请求,并将目标 URL 作为查询参数。响应内容即为完整渲染后的 HTML。format=markdown 或 format=json。
有关 Python 和 JavaScript 示例以及错误代码,请参阅快速入门;常见集成模式请参阅使用场景。
CLI 和 SDK
除了原始 HTTP API,Gologin 还提供了更高层的工具来配合 Web Unlocker 使用:- Web Unlocker SDK 和 CLI — 精简的 TypeScript SDK(
gologin-webunlocker),提供带类型的方法和用于快速抓取的 CLI - Gologin Web Access CLI — 将 Web Unlocker 与 Cloud Browser 结合的统一 CLI,支持批量抓取、爬取、搜索、变更追踪和结构化提取
- AI Skills — 适用于 Claude Code 智能体的即插即用技能