Dla deweloperów, badaczy i twórców agentów
Korzystaj ze skoncentrowanych API, gdy produkt lub przepływ potrzebuje aktualnych dowodów publicznej strony w ustrukturyzowanej odpowiedzi.
Spróbuj wyszukać produkt, rezultat, ścieżkę endpointu lub temat związany z API.
Dane Web
Przejdź od URL do czytelnej treści, końcowego miejsca docelowego, widocznych technologii, kategorii i sygnałów URL.
Korzystaj ze skoncentrowanych API, gdy produkt lub przepływ potrzebuje aktualnych dowodów publicznej strony w ustrukturyzowanej odpowiedzi.
Zbieraj treść do analizy, śledź miejsce docelowe przed przejściem lub wzbogacaj stronę o kontekst technologii i kategorii.
Używaj Scrape do treści strony. Dodawaj Redirects, Technology Detection, Website Categorization lub URL Intelligence tylko wtedy, gdy kontekst zmienia decyzję.
Pobieraj publiczne strony internetowe i dokumenty jako HTML, Markdown, tekst gotowy dla LLM lub zwykły tekst, pojedynczo, wsadowo lub przez przeszukanie całej witryny.
Wybierz, gdy: Wybierz, gdy potrzebujesz czystego HTML, tekstu lub Markdown z publicznych stron, plików PDF albo arkuszy kalkulacyjnych, od jednej strony po całą witrynę, a renderowania lub zbierania asynchronicznego tylko przy wsparciu i konieczności.
Śledź pełny łańcuch przekierowań dla adresu URL.
Wybierz, gdy: Wybierz, gdy miejsce docelowe i łańcuch przekierowań są ważniejsze niż treść strony.
Wykryj stos technologiczny używany przez witrynę, w tym CMS, frameworki i usługi.
Wybierz, gdy: Wybierz, gdy potrzebujesz dowodów ujawnionych frameworków, platform, analityki lub technologii infrastruktury.
Analizuj robots.txt, testuj dowolnego robota i ścieżkę oraz sprawdzaj, które roboty AI są blokowane.
Wybierz, gdy: Wybierz, aby odczytać plik robots.txt witryny, sprawdzić, czy robot może pobrać daną ścieżkę, i zobaczyć, którym robotom AI wolno wchodzić, a które są blokowane.
Znajdź i sprawdź mapy witryny XML: liczba adresów URL, aktualność lastmod i błędy protokołu.
Wybierz, gdy: Wybierz, aby znaleźć mapy witryny XML i sprawdzić liczbę adresów URL, aktualność lastmod oraz błędy protokołu w ramach stałego limitu plików.
Audyt tytułów, znaczników meta, nagłówków, linków, obrazów i danych strukturalnych z wynikiem SEO.
Wybierz, gdy: Wybierz to, aby przeprowadzić audyt jednej strony pod kątem SEO na stronie, od znaczników meta i nagłówków po linki, obrazy i dane strukturalne, z renderowaniem JavaScript lub bez.
Porównaj surowy i wyrenderowany HTML, aby zobaczyć, które sygnały SEO zależą od JavaScript.
Wybierz, gdy: Wybierz to, aby sprawdzić, które sygnały SEO strony istnieją dopiero po wykonaniu JavaScript, porównując jej surowy i wyrenderowany HTML.
Wyodrębnianie i walidacja znaczników JSON-LD, Microdata i RDFa schema.org.
Wybierz, gdy: Wybierz to, aby wyodrębnić JSON-LD, Microdata i RDFa ze strony i sprawdzić je według reguł schema.org dla popularnych typów wyników rozszerzonych.
Znajdź najczęstsze słowa kluczowe i frazy na stronie wraz z procentową gęstością.
Wybierz, gdy: Wybierz to, aby zmierzyć częstotliwość słów i fraz na stronie oraz sprawdzić, gdzie pojawiają się docelowe słowa kluczowe.
Wylistuj linki na stronie i znajdź uszkodzone dzięki ograniczonym kontrolom statusu.
Wybierz, gdy: Wybierz to, aby wylistować linki na stronie i znaleźć uszkodzone, przy czym zablokowane kontrole pozostają nieznane.
Waliduj kody hreflang, x-default, odwołania do samej strony i linki zwrotne.
Wybierz, gdy: Wybierz to, aby zwalidować tagi hreflang strony i potwierdzić, że alternatywne wersje językowe linkują z powrotem.
Testuj wiele adresów URL i robotów na wklejonym lub działającym pliku robots.txt.
Wybierz, gdy: Wybierz to, aby przetestować wiele adresów URL i robotów naraz na wklejonym lub działającym pliku robots.txt.
Waliduj rekordy ads.txt i app-ads.txt oraz potwierdzaj sprzedawców w sellers.json.
Wybierz, gdy: Wybierz to, aby zwalidować ads.txt lub app-ads.txt witryny i potwierdzić autoryzowanych sprzedawców w sellers.json.
Porównuj strony pod kątem duplikatów treści, tytułów i opisów meta.
Wybierz, gdy: Wybierz to, aby porównać do 10 stron pod kątem duplikatów treści oraz powtarzających się tytułów, opisów meta i nagłówków H1.
Przeskanuj do 50 stron i znajdź uszkodzone linki, duplikaty i problemy na stronie.
Wybierz, gdy: Wybierz to, aby przeskanować do 50 stron witryny i znaleźć uszkodzone linki, duplikaty i problemy SEO na stronie w jednym raporcie.
Zapisz dowolną stronę jako obraz lub PDF w wersji na komputer lub telefon.
Wybierz, gdy: Wybierz to, aby zapisać stronę jako PNG, JPEG, WebP lub PDF w wersji na komputer lub telefon.
Przeprowadź automatyczny audyt WCAG z naruszeniami, dotkniętymi elementami i wynikiem.
Wybierz, gdy: Wybierz to, aby przeprowadzić automatyczny audyt WCAG strony z naruszeniami według wpływu i dotkniętymi elementami.
Wyświetl pliki cookie, trackery i menedżera zgód widoczne przed zgodą.
Wybierz, gdy: Wybierz to, aby zobaczyć pliki cookie, trackery i menedżera zgód, które strona ładuje przed jakąkolwiek zgodą.
Mierz bajty strony, żądania, podmioty trzecie i czasy ładowania.
Wybierz, gdy: Wybierz to, aby zmierzyć bajty strony, żądania, podmioty trzecie, zasoby blokujące renderowanie i czasy.
Kategoryzuj witrynę wg branży, typu zawartości i tematów.
Wybierz, gdy: Wybierz, gdy potrzebujesz ogólnej kategorii treści lub działalności do routingu, badań lub analizy.
Pobieraj z adresu URL znormalizowane metadane strony, pola podglądu, dane strukturalne i sygnały publicznej tożsamości.
Wybierz, gdy: Wybierz, gdy przed głębszym zbieraniem potrzebujesz znormalizowanej struktury URL i sygnałów ryzyka URL.
Sprawdź URL, zbierz stronę jako Markdown, a następnie dodaj dowody kategorii lub technologii wymagane przez zadanie agenta.
Sprawdź URL, zbierz stronę jako Markdown, a następnie dodaj dowody kategorii lub technologii wymagane przez zadanie agenta.
Zbierz reprezentatywną stronę, rozwiąż jej końcowe miejsce docelowe i połącz treść z kategorią witryny oraz sygnałami technologii.
Wyślij publiczny URL do POST /v1/scrape z wyjściem Markdown. Najpierw użyj trybu standardowego, a renderowanie wybierz tylko, gdy strona wymaga JavaScript.
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'
{
"data": {
"url": "https://example.com",
"outcome": "success",
"content": "# Example Domain",
"truncated": false
},
"billing": { "credits_charged": 1, "credits_refunded": 0 }
}
Zbieraj jedną stronę synchronicznie lub wyślij od 1 do 100 publicznych URL do płatnego asynchronicznego zadania Scrape. Wykrywanie technologii obsługuje także ścieżki zbiorcze i zadaniowe produktu.
Zbieranie ma ograniczenia przekierowań, rozmiaru odpowiedzi, współbieżności i trybów przetwarzania. Dostęp do każdej strony nie jest gwarantowany.
Wybierz najniższy wystarczający tryb zbierania, zachowaj dowody miejsca docelowego i wzbogacaj wynik tylko wtedy, gdy wymaga tego przepływ.
Dowiedz się więcejPozwól agentowi zebrać stronę, zrozumieć stojącą za nią domenę i żądać głębszych dowodów tylko wtedy, gdy wymaga tego zadanie.
Dowiedz się więcejZbieraj publiczne strony i łącz je z kontekstem domeny, firmy, technologii, DNS i infrastruktury.
Dowiedz się więcejPoznaj pięć produktów danych Web lub wykonaj pierwsze żądanie Scrape z dokumentacji.