メインコンテンツへスキップ
このガイドでは、Web Unlocker を使って最初の URL をスクレイピングする方法を説明します。

前提条件

  • Web Unlocker の API キー。Web Unlocker のページにあるフォームから取得できます。キーは1営業日以内に届き、ご自身の対象サイトで試せる無料リクエストが付いています。カードの登録は不要です。
  • Python 3.x、Node.js、または任意の HTTP クライアント

認証

すべてのリクエストで、apikey ヘッダーに API キーを指定する必要があります。
すべての API リクエストのベース URL は次のとおりです。

最初のリクエストを送信する

対象の URL をクエリパラメータに指定して GET リクエストを送信します。レスポンスには、ページの完全にレンダリングされた HTML が返されます。

cURL

Python

JavaScript (Node.js / Browser)


レスポンスの内容

レスポンスボディには、ブラウザーでその URL を開いたときに表示されるものと同じ、レンダリング済みの生の HTML が返されます。JSON でラップされることはなく、パース処理も不要です。

その他の形式

format クエリパラメータを追加すると、ページを別の形式で取得できます。

エラーの処理

レスポンスを処理する前に、HTTP ステータスコードを確認してください。 429 または 5xx のステータスが返された場合は、指数バックオフを使って再試行してください。

CLI でのクイックスタート

コードを書かなくても、Gologin の CLI ツールを使ってページをスクレイピングできます。

Web Unlocker CLI

Gologin Web Access CLI(統合版)

詳細は Web Unlocker SDK と CLI および Web Access CLI をご覧ください。