- Webを読み取る — JavaScriptを多用するページや保護されたサイトも、Web Unlockerを通じてスクレイピングできます
- Webを操作する — クラウドブラウザ(Cloud Browser)で実際のブラウザセッションを開き、クリック、入力、ページ移動、Cookieの永続化を行えます
- 検出を回避する — アンチディテクト(検出回避)フィンガープリント、レジデンシャルプロキシ、プロファイルベースのID管理を利用できます
連携オプション
MCPサーバー
GologinをClaude Desktop、Cursor、または任意のMCPクライアントに接続します。自然言語でプロファイルやセッションを管理できます。
AIスキル
Claude Code向けのプラグアンドプレイ拡張機能です。スキルをインストールするだけで、エージェントがWebスクレイピングとブラウザ自動化をすぐに使えるようになります。
CLIツール
AIエージェントが直接呼び出せるシェルコマンドです。スクレイピング、ブラウズ、操作をコードを書かずに実行できます。スクレイピング用とライブブラウザセッション用の2つのCLIがあり、後者はクラウドでもお使いのマシン上でも利用できます。
SDKとクラウドブラウザAPI
プログラムから完全に制御できます。Puppeteer/PlaywrightをGologinのクラウドブラウザ(Cloud Browser)に接続して、独自のエージェントツールを構築できます。
どのツールを選ぶか
全体の構成
- Web Unlockerは、ステートレスな読み取りとデータ抽出を担当します。URLを送信すると、レンダリング済みのHTMLが返されます
- クラウドブラウザは、ステートフルな操作を担当します。セッションを開き、クリック、入力、ページ移動を行い、Cookieを永続化します
- ローカルのOrbitaは、永続的なローカルプロファイルを担当します。Agent Browser CLIのローカルランタイムを通じて、ウォームアップ、ログインフロー、ソーシャルメディアやマーケットプレイスでの操作を行います
活用例
リサーチと競合分析
数十のWebサイトにわたる競合の価格、新製品の発売、コンテンツの変更を、毎日自動で監視するAIエージェントです。エージェントはWeb Unlockerを通じて競合のページをスクレイピングし、構造化データを抽出して前日のスナップショットと比較し、日次のダイジェストを作成します。ブラウザセッションは不要で、大規模なステートレス抽出だけで実現できます。リード獲得とデータ拡充
公開されているビジネスディレクトリやレビューサイトをスクレイピングし、そのHTMLをClaudeに渡して、企業名、カテゴリ、評価、企業規模、技術スタックを抽出します。AIエージェントのループ内でツールとして動作します。エージェントがスクレイピングするページを決め、ツールを呼び出し、構造化データを受け取ります。複数アカウントの管理
50以上のSNSアカウント、広告アカウント、マーケットプレイスの販売者アカウントを、それぞれ個別のブラウザプロファイル、フィンガープリント、プロキシ、Cookieで運用します。Agent Browser CLIのローカルランタイムがプロファイルを管理し、ランブックでウォームアップを行い、エージェントの呼び出しをまたいでセッションを維持します。プロファイルとランブックのコマンドは、追加のフラグなしでローカルで実行されます。フォーム入力とデータ入力の自動化
社内ダッシュボードにログインし、フォームに入力し、レポートを送信し、エクスポートをダウンロードするAIエージェントです。すべて実際のクラウドブラウザセッションで行われます。エージェントはページをスナップショットとして読み取り、参照(ref)で適切なフィールドを見つけて値を入力し、送信ボタンをクリックして、結果を確認します。コンテンツの監視とアラート
政府の規制ページ、競合のブログ、求人サイトなど、ビジネスに関わるあらゆるページの変更を追跡します。cronやスケジュール実行のエージェントで毎日実行し、前回のバージョンとの差分を取り、重要な変更があればアラートを出します。AIを活用したWebスクレイピングパイプライン
ドキュメントサイトをクロールし、Markdownに変換して、要約やQ&Aのために LLMに渡す、エンドツーエンドのパイプラインを構築できます。抽出にはCLIを使い、LLMの部分はご自身のコードで実装します。地域別テストとローカライズQA
国ごとにWebサイトの見え方を確認します。異なる地域のプロキシを設定したプロファイルで同じURLを開き、スクリーンショットを撮って比較します。クイックスタートの例
ページをスクレイピングする(CLI)
クラウドブラウザを開く(CLI)
AIスキルをインストールする(Claude Code)
MCPを接続する(Claude Desktop)
claude_desktop_config.jsonに次の内容を追加します。