Dane Web

Zbieraj publiczne treści Web z kontekstem potrzebnym do ich wykorzystania

Przejdź od URL do czytelnej treści, końcowego miejsca docelowego, widocznych technologii, kategorii i sygnałów URL.

Dla deweloperów, badaczy i twórców agentów

Korzystaj ze skoncentrowanych API, gdy produkt lub przepływ potrzebuje aktualnych dowodów publicznej strony w ustrukturyzowanej odpowiedzi.

Zacznij od potrzebnego wyniku

Zbieraj treść do analizy, śledź miejsce docelowe przed przejściem lub wzbogacaj stronę o kontekst technologii i kategorii.

Dane wejściowe

URLDomena

Wyniki

ZbierajOceniajOdkrywajWzbogacajWeryfikujPorównuj

Wybierz najwęższy produkt odpowiadający na pytanie

Używaj Scrape do treści strony. Dodawaj Redirects, Technology Detection, Website Categorization lub URL Intelligence tylko wtedy, gdy kontekst zmienia decyzję.

Scraping stron internetowych

Pobieraj publiczne strony internetowe i dokumenty jako HTML, Markdown, tekst gotowy dla LLM lub zwykły tekst, pojedynczo, wsadowo lub przez przeszukanie całej witryny.

Wybierz, gdy: Wybierz, gdy potrzebujesz czystego HTML, tekstu lub Markdown z publicznych stron, plików PDF albo arkuszy kalkulacyjnych, od jednej strony po całą witrynę, a renderowania lub zbierania asynchronicznego tylko przy wsparciu i konieczności.

Dane wejściowe
URL
Wyniki
Zbieraj
Kredyty
0-20
SynchroniczneAsynchroniczneRESTMCPSDK

Łańcuch przekierowań

Śledź pełny łańcuch przekierowań dla adresu URL.

Wybierz, gdy: Wybierz, gdy miejsce docelowe i łańcuch przekierowań są ważniejsze niż treść strony.

Dane wejściowe
URL, Domena
Wyniki
Zbieraj, Oceniaj
Kredyty
2
SynchroniczneRESTMCPSDKNarzędzie interaktywne

Stos techniczny Detection

Wykryj stos technologiczny używany przez witrynę, w tym CMS, frameworki i usługi.

Wybierz, gdy: Wybierz, gdy potrzebujesz dowodów ujawnionych frameworków, platform, analityki lub technologii infrastruktury.

Dane wejściowe
URL, Domena
Wyniki
Odkrywaj, Wzbogacaj, Oceniaj
Kredyty
0-9
SynchroniczneMasoweAsynchroniczneRESTMCPSDKNarzędzie interaktywne

API robots.txt

Analizuj robots.txt, testuj dowolnego robota i ścieżkę oraz sprawdzaj, które roboty AI są blokowane.

Wybierz, gdy: Wybierz, aby odczytać plik robots.txt witryny, sprawdzić, czy robot może pobrać daną ścieżkę, i zobaczyć, którym robotom AI wolno wchodzić, a które są blokowane.

Dane wejściowe
URL, Domena
Wyniki
Weryfikuj, Oceniaj
Kredyty
1
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API audytu map witryny XML

Znajdź i sprawdź mapy witryny XML: liczba adresów URL, aktualność lastmod i błędy protokołu.

Wybierz, gdy: Wybierz, aby znaleźć mapy witryny XML i sprawdzić liczbę adresów URL, aktualność lastmod oraz błędy protokołu w ramach stałego limitu plików.

Dane wejściowe
URL, Domena
Wyniki
Odkrywaj, Weryfikuj, Oceniaj
Kredyty
2
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API audytu SEO na stronie

Audyt tytułów, znaczników meta, nagłówków, linków, obrazów i danych strukturalnych z wynikiem SEO.

Wybierz, gdy: Wybierz to, aby przeprowadzić audyt jednej strony pod kątem SEO na stronie, od znaczników meta i nagłówków po linki, obrazy i dane strukturalne, z renderowaniem JavaScript lub bez.

Dane wejściowe
URL, Domena
Wyniki
Weryfikuj, Oceniaj
Kredyty
2-6
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API sprawdzania renderowania JavaScript SEO

Porównaj surowy i wyrenderowany HTML, aby zobaczyć, które sygnały SEO zależą od JavaScript.

Wybierz, gdy: Wybierz to, aby sprawdzić, które sygnały SEO strony istnieją dopiero po wykonaniu JavaScript, porównując jej surowy i wyrenderowany HTML.

Dane wejściowe
URL, Domena
Wyniki
Porównuj, Oceniaj
Kredyty
7
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API walidacji danych strukturalnych

Wyodrębnianie i walidacja znaczników JSON-LD, Microdata i RDFa schema.org.

Wybierz, gdy: Wybierz to, aby wyodrębnić JSON-LD, Microdata i RDFa ze strony i sprawdzić je według reguł schema.org dla popularnych typów wyników rozszerzonych.

Dane wejściowe
URL, Domena
Wyniki
Weryfikuj, Oceniaj
Kredyty
2-6
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API gęstości słów kluczowych

Znajdź najczęstsze słowa kluczowe i frazy na stronie wraz z procentową gęstością.

Wybierz, gdy: Wybierz to, aby zmierzyć częstotliwość słów i fraz na stronie oraz sprawdzić, gdzie pojawiają się docelowe słowa kluczowe.

Dane wejściowe
URL, Domena
Wyniki
Oceniaj
Kredyty
2-6
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API linków na stronie i wyszukiwania uszkodzonych linków

Wylistuj linki na stronie i znajdź uszkodzone dzięki ograniczonym kontrolom statusu.

Wybierz, gdy: Wybierz to, aby wylistować linki na stronie i znaleźć uszkodzone, przy czym zablokowane kontrole pozostają nieznane.

Dane wejściowe
URL, Domena
Wyniki
Odkrywaj, Weryfikuj
Kredyty
2-6
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API walidacji hreflang

Waliduj kody hreflang, x-default, odwołania do samej strony i linki zwrotne.

Wybierz, gdy: Wybierz to, aby zwalidować tagi hreflang strony i potwierdzić, że alternatywne wersje językowe linkują z powrotem.

Dane wejściowe
URL, Domena
Wyniki
Weryfikuj, Oceniaj
Kredyty
3
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API do testowania pliku robots.txt

Testuj wiele adresów URL i robotów na wklejonym lub działającym pliku robots.txt.

Wybierz, gdy: Wybierz to, aby przetestować wiele adresów URL i robotów naraz na wklejonym lub działającym pliku robots.txt.

Dane wejściowe
URL, Domena
Wyniki
Weryfikuj, Oceniaj
Kredyty
1
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API walidacji ads.txt i sellers.json

Waliduj rekordy ads.txt i app-ads.txt oraz potwierdzaj sprzedawców w sellers.json.

Wybierz, gdy: Wybierz to, aby zwalidować ads.txt lub app-ads.txt witryny i potwierdzić autoryzowanych sprzedawców w sellers.json.

Dane wejściowe
URL, Domena
Wyniki
Weryfikuj, Oceniaj
Kredyty
2-5
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API sprawdzania duplikatów treści

Porównuj strony pod kątem duplikatów treści, tytułów i opisów meta.

Wybierz, gdy: Wybierz to, aby porównać do 10 stron pod kątem duplikatów treści oraz powtarzających się tytułów, opisów meta i nagłówków H1.

Dane wejściowe
URL, Domena
Wyniki
Porównuj, Oceniaj
Kredyty
5
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API audytu witryny i crawlera SEO

Przeskanuj do 50 stron i znajdź uszkodzone linki, duplikaty i problemy na stronie.

Wybierz, gdy: Wybierz to, aby przeskanować do 50 stron witryny i znaleźć uszkodzone linki, duplikaty i problemy SEO na stronie w jednym raporcie.

Dane wejściowe
URL, Domena
Wyniki
Odkrywaj, Oceniaj
Kredyty
10-35
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API zrzutów ekranu stron

Zapisz dowolną stronę jako obraz lub PDF w wersji na komputer lub telefon.

Wybierz, gdy: Wybierz to, aby zapisać stronę jako PNG, JPEG, WebP lub PDF w wersji na komputer lub telefon.

Dane wejściowe
URL, Domena
Wyniki
Odkrywaj, Weryfikuj
Kredyty
10
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API audytu dostępności

Przeprowadź automatyczny audyt WCAG z naruszeniami, dotkniętymi elementami i wynikiem.

Wybierz, gdy: Wybierz to, aby przeprowadzić automatyczny audyt WCAG strony z naruszeniami według wpływu i dotkniętymi elementami.

Dane wejściowe
URL, Domena
Wyniki
Weryfikuj, Oceniaj
Kredyty
8
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API skanera cookie i trackerów

Wyświetl pliki cookie, trackery i menedżera zgód widoczne przed zgodą.

Wybierz, gdy: Wybierz to, aby zobaczyć pliki cookie, trackery i menedżera zgód, które strona ładuje przed jakąkolwiek zgodą.

Dane wejściowe
URL, Domena
Wyniki
Odkrywaj, Oceniaj
Kredyty
8
SynchroniczneRESTMCPSDKNarzędzie interaktywne

API wagi strony i zasobów

Mierz bajty strony, żądania, podmioty trzecie i czasy ładowania.

Wybierz, gdy: Wybierz to, aby zmierzyć bajty strony, żądania, podmioty trzecie, zasoby blokujące renderowanie i czasy.

Dane wejściowe
URL, Domena
Wyniki
Oceniaj
Kredyty
6
SynchroniczneRESTMCPSDKNarzędzie interaktywne

Website Kategoryzacja

Kategoryzuj witrynę wg branży, typu zawartości i tematów.

Wybierz, gdy: Wybierz, gdy potrzebujesz ogólnej kategorii treści lub działalności do routingu, badań lub analizy.

Dane wejściowe
URL, Domena
Wyniki
Wzbogacaj, Oceniaj
Kredyty
0-3
SynchroniczneMasoweRESTMCPSDKNarzędzie interaktywne

Ujednolicona analiza URL

Pobieraj z adresu URL znormalizowane metadane strony, pola podglądu, dane strukturalne i sygnały publicznej tożsamości.

Wybierz, gdy: Wybierz, gdy przed głębszym zbieraniem potrzebujesz znormalizowanej struktury URL i sygnałów ryzyka URL.

Dane wejściowe
URL
Wyniki
Zbieraj, Wzbogacaj
Kredyty
2
SynchroniczneMasoweRESTMCPSDK

Przepływy pracy

Sprawdź URL, zbierz stronę jako Markdown, a następnie dodaj dowody kategorii lub technologii wymagane przez zadanie agenta.

Od strony do kontekstu gotowego dla agenta

Sprawdź URL, zbierz stronę jako Markdown, a następnie dodaj dowody kategorii lub technologii wymagane przez zadanie agenta.

Migawka badania witryny

Zbierz reprezentatywną stronę, rozwiąż jej końcowe miejsce docelowe i połącz treść z kategorią witryny oraz sygnałami technologii.

Zbierz publiczną stronę jako Markdown

Wyślij publiczny URL do POST /v1/scrape z wyjściem Markdown. Najpierw użyj trybu standardowego, a renderowanie wybierz tylko, gdy strona wymaga JavaScript.

Przykładowe żądanie
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'
Przykładowa odpowiedź
{
  "data": {
    "url": "https://example.com",
    "outcome": "success",
    "content": "# Example Domain",
    "truncated": false
  },
  "billing": { "credits_charged": 1, "credits_refunded": 0 }
}

Najpierw synchronicznie, zadania gdy wymaga tego obciążenie

Zbieraj jedną stronę synchronicznie lub wyślij od 1 do 100 publicznych URL do płatnego asynchronicznego zadania Scrape. Wykrywanie technologii obsługuje także ścieżki zbiorcze i zadaniowe produktu.

SynchroniczneMasoweAsynchroniczneRESTMCPSDKNarzędzie interaktywne

Ograniczone zbieranie publicznych stron

Zbieranie ma ograniczenia przekierowań, rozmiaru odpowiedzi, współbieżności i trybów przetwarzania. Dostęp do każdej strony nie jest gwarantowany.

Zacznij od jednej strony, potem dodaj tylko potrzebny kontekst

Poznaj pięć produktów danych Web lub wykonaj pierwsze żądanie Scrape z dokumentacji.