Jaki problem rozwiązuje
Współczesne strony internetowe trudno scrapować. Zwykłe wywołaniecurl lub requests często zwraca pustą odpowiedź albo uszkodzony kod HTML, ponieważ treść jest ładowana przez JavaScript. Web Unlocker zajmuje się następującymi kwestiami:
- Renderowanie JavaScript — strony są ładowane w prawdziwej przeglądarce, a ich skrypty są w pełni wykonywane, zanim treść zostanie pobrana
- Inteligentna rotacja IP — żądania są kierowane przez rezydencyjne adresy IP z realistycznymi odciskami przeglądarki
- Dobór poziomu cenowego — żądania są kierowane przez odpowiedni poziom proxy dla danej witryny
Co otrzymujesz w odpowiedzi
Udane żądanie zwraca stronę w jednym formacie. Wybierzesz go za pomocą parametru zapytaniaformat:
Cennik
Web Unlocker stosuje rozliczenie za skuteczne żądania — opłata jest naliczana tylko wtedy, gdy żądanie zakończy się powodzeniem. Nieudane próby są bezpłatne. Cennik jest skalowany wraz z wolumenem:
Aby uzyskać indywidualną wycenę dla większego wolumenu, napisz na adres webunlocker@gologin.com.
Web Unlocker a własne serwery proxy
Utrzymywanie własnej infrastruktury proxy jest drogie i zawodne. Web Unlocker obsługuje wszystko jako usługa zarządzana:Typowe zastosowania
- Monitorowanie cen — śledzenie cen w sklepach internetowych
- Badania rynku — zbieranie na dużą skalę danych o produktach, opinii lub ofert pracy
- Agregacja treści — tworzenie kanałów z wiadomościami lub danymi ze stron bez API
- Pipeline’y AI — przekazywanie wyrenderowanego HTML do modeli LLM w celu ekstrakcji lub streszczania
Jak to działa
Web Unlocker uruchamia w chmurze prawdziwą przeglądarkę Chromium dla każdego zadania. Gdy wysyłasz adres URL:- Uruchamiana jest przeglądarka z rezydencyjnym adresem IP i realistycznym odciskiem przeglądarki
- Przeglądarka otwiera stronę, wykonuje JavaScript i ładuje treści dynamiczne
- Zwracany jest wyrenderowany kod HTML albo Markdown lub JSON, jeśli zażądasz tego za pomocą
format
Jak z tego korzystać
Wyślij żądanie GET z docelowym adresem URL jako parametrem zapytania. Odpowiedzią jest w pełni wyrenderowany kod HTML.format=markdown lub format=json.
Przykłady w Pythonie i JavaScript oraz kody błędów znajdziesz w Quickstart, a typowe wzorce integracji w sekcji Use Cases.
CLI i SDK
Oprócz surowego API HTTP Gologin udostępnia narzędzia wyższego poziomu do pracy z Web Unlocker:- Web Unlocker SDK and CLI — minimalistyczne SDK w TypeScript (
gologin-webunlocker) z typowanymi metodami oraz CLI do szybkiego scrapingu - Gologin Web Access CLI — ujednolicone CLI łączące Web Unlocker z Cloud Browser, które dodaje scraping wsadowy, crawling, wyszukiwanie, śledzenie zmian i ustrukturyzowaną ekstrakcję danych
- AI Skills — gotowe do użycia umiejętności dla agentów Claude Code