Webdaten

Öffentliche Webinhalte mit dem nötigen Nutzungskontext sammeln

Gehen Sie von einer URL zu lesbaren Inhalten, dem endgültigen Ziel, sichtbaren Technologien, der Kategorie und URL-Signalen.

Für Entwickler, Forscher und Agentenbauer

Nutzen Sie fokussierte APIs, wenn ein Produkt oder Workflow aktuelle Belege einer öffentlichen Seite in strukturierter Form benötigt.

Beginnen Sie mit dem benötigten Ergebnis

Sammeln Sie Inhalte zur Analyse, verfolgen Sie ein Ziel, bevor Sie es aufrufen, oder reichern Sie eine bekannte Seite mit Technologie- und Kategorie-Kontext an.

Eingaben

URLDomain

Ergebnisse

ErfassenBewertenEntdeckenAnreichernVerifizierenVergleichen

Wählen Sie das engste Produkt, das die Frage beantwortet

Nutzen Sie Scrape für Seiteninhalte. Ergänzen Sie Redirects, Technology Detection, Website Categorization oder URL Intelligence nur, wenn dieser Kontext die Entscheidung verändert.

Web-Scraping

Rufe öffentliche Webseiten und Dokumente als HTML, Markdown, LLM-fähigen Text oder Klartext ab, einzeln, im Batch oder als Crawl einer ganzen Website.

Wählen Sie dies, wenn: Wählen Sie dies, wenn Sie sauberes HTML, Text oder Markdown aus öffentlichen Seiten, PDFs oder Tabellen benötigen, von einer einzelnen Seite bis zu einer ganzen Website, mit Rendering oder asynchroner Sammlung nur, wenn dies unterstützt und erforderlich ist.

Eingaben
URL
Ergebnisse
Erfassen
Credits
0-20
SynchronAsynchronRESTMCPSDK

Weiterleitungskette

Verfolgen Sie die vollständige Weiterleitungskette für eine URL.

Wählen Sie dies, wenn: Wählen Sie dies, wenn Ziel und Weiterleitungskette wichtiger sind als der Seiteninhalt.

Eingaben
URL, Domain
Ergebnisse
Erfassen, Bewerten
Credits
2
SynchronRESTMCPSDKInteraktives Tool

Tech-Stack-Erkennung

Erkennen Sie den von einer Website verwendeten Tech-Stack, einschließlich CMS, Frameworks und Diensten.

Wählen Sie dies, wenn: Wählen Sie dies, wenn Sie Belege für offengelegte Frameworks, Plattformen, Analysen oder Infrastrukturtechnologien benötigen.

Eingaben
URL, Domain
Ergebnisse
Entdecken, Anreichern, Bewerten
Credits
0-9
SynchronStapelverarbeitungAsynchronRESTMCPSDKInteraktives Tool

Robots.txt-API

Robots.txt auswerten, beliebige Crawler und Pfade testen und sehen, welche KI-Crawler gesperrt sind.

Wählen Sie dies, wenn: Wählen Sie dies, um die robots.txt einer Website zu lesen, zu testen, ob ein Crawler einen Pfad abrufen darf, und zu sehen, welche KI-Crawler erlaubt oder blockiert sind.

Eingaben
URL, Domain
Ergebnisse
Verifizieren, Bewerten
Credits
1
SynchronRESTMCPSDKInteraktives Tool

API für XML-Sitemap-Audits

XML-Sitemaps finden und prüfen, mit URL-Anzahl, lastmod-Aktualität und Protokollproblemen.

Wählen Sie dies, wenn: Wählen Sie dies, um die XML-Sitemaps einer Website zu finden und URL-Anzahl, lastmod-Aktualität und Protokollprobleme innerhalb eines festen Dateibudgets zu prüfen.

Eingaben
URL, Domain
Ergebnisse
Entdecken, Verifizieren, Bewerten
Credits
2
SynchronRESTMCPSDKInteraktives Tool

API für On-Page-SEO-Audits

Titel, Meta-Tags, Überschriften, Links, Bilder und strukturierte Daten mit einem SEO-Score prüfen.

Wählen Sie dies, wenn: Wählen Sie dies, um eine Seite auf On-Page-SEO zu prüfen, von Meta-Tags und Überschriften bis zu Links, Bildern und strukturierten Daten, mit oder ohne JavaScript-Rendering.

Eingaben
URL, Domain
Ergebnisse
Verifizieren, Bewerten
Credits
2-6
SynchronRESTMCPSDKInteraktives Tool

API für JavaScript-SEO-Rendering-Prüfungen

Rohes und gerendertes HTML vergleichen, um zu sehen, welche SEO-Signale von JavaScript abhängen.

Wählen Sie dies, wenn: Wählen Sie dies, um zu sehen, welche SEO-Signale einer Seite erst nach der Ausführung von JavaScript existieren, indem das rohe und das gerenderte HTML verglichen werden.

Eingaben
URL, Domain
Ergebnisse
Vergleichen, Bewerten
Credits
7
SynchronRESTMCPSDKInteraktives Tool

API zur Validierung strukturierter Daten

schema.org-Markup in JSON-LD, Microdata und RDFa extrahieren und validieren.

Wählen Sie dies, wenn: Wählen Sie dies, um JSON-LD, Microdata und RDFa aus einer Seite zu extrahieren und anhand der schema.org-Regeln für gängige Rich-Result-Typen zu prüfen.

Eingaben
URL, Domain
Ergebnisse
Verifizieren, Bewerten
Credits
2-6
SynchronRESTMCPSDKInteraktives Tool

Keyword-Density-API

Die häufigsten Keywords und Phrasen einer Seite mit Dichteprozenten finden.

Wählen Sie dies, wenn: Wählen Sie dies, um die Wort- und Phrasenhäufigkeit auf einer Seite zu messen und zu prüfen, wo Ziel-Keywords vorkommen.

Eingaben
URL, Domain
Ergebnisse
Bewerten
Credits
2-6
SynchronRESTMCPSDKInteraktives Tool

API für Seitenlinks und Broken-Link-Prüfung

Seitenlinks auflisten und defekte mit begrenzten Statusprüfungen finden.

Wählen Sie dies, wenn: Wählen Sie dies, um die Links einer Seite aufzulisten und defekte zu finden, wobei blockierte Prüfungen als unknown bleiben.

Eingaben
URL, Domain
Ergebnisse
Entdecken, Verifizieren
Credits
2-6
SynchronRESTMCPSDKInteraktives Tool

Hreflang-Validierungs-API

hreflang-Codes, x-default, Selbstreferenzen und Rückverweise validieren.

Wählen Sie dies, wenn: Wählen Sie dies, um die hreflang-Tags einer Seite zu validieren und zu bestätigen, dass alternative Sprachseiten zurückverweisen.

Eingaben
URL, Domain
Ergebnisse
Verifizieren, Bewerten
Credits
3
SynchronRESTMCPSDKInteraktives Tool

Robots.txt-Tester-API

Testen Sie viele URLs und Crawler gegen eine eingefügte oder Live-robots.txt.

Wählen Sie dies, wenn: Wählen Sie dies, um viele URLs und Crawler auf einmal gegen eine eingefügte oder Live-robots.txt zu testen.

Eingaben
URL, Domain
Ergebnisse
Verifizieren, Bewerten
Credits
1
SynchronRESTMCPSDKInteraktives Tool

API zur Validierung von ads.txt und sellers.json

ads.txt- und app-ads.txt-Einträge prüfen und Verkäufer anhand von sellers.json bestätigen.

Wählen Sie dies, wenn: Wählen Sie dies, um die ads.txt oder app-ads.txt einer Website zu prüfen und autorisierte Verkäufer anhand von sellers.json zu bestätigen.

Eingaben
URL, Domain
Ergebnisse
Verifizieren, Bewerten
Credits
2-5
SynchronRESTMCPSDKInteraktives Tool

API zur Prüfung auf Duplicate Content

Seiten auf doppelte Inhalte, Titel und Meta-Beschreibungen vergleichen.

Wählen Sie dies, wenn: Wählen Sie dies, um bis zu 10 Seiten auf doppelte Inhalte sowie wiederholte Titel, Meta-Beschreibungen und H1 zu vergleichen.

Eingaben
URL, Domain
Ergebnisse
Vergleichen, Bewerten
Credits
5
SynchronRESTMCPSDKInteraktives Tool

Site Audit und SEO-Crawler API

Bis zu 50 Seiten crawlen und defekte Links, Duplikate und On-Page-Probleme finden.

Wählen Sie dies, wenn: Wählen Sie dies, um bis zu 50 Seiten einer Website zu crawlen und defekte Links, Duplikate und On-Page-SEO-Probleme in einem Bericht zu finden.

Eingaben
URL, Domain
Ergebnisse
Entdecken, Bewerten
Credits
10-35
SynchronRESTMCPSDKInteraktives Tool

Website-Screenshot-API

Jede Seite als Bild oder PDF auf Desktop oder Mobilgerät erfassen.

Wählen Sie dies, wenn: Wählen Sie dies, um eine Seite auf Desktop oder Mobilgerät als PNG, JPEG, WebP oder PDF zu erfassen.

Eingaben
URL, Domain
Ergebnisse
Entdecken, Verifizieren
Credits
10
SynchronRESTMCPSDKInteraktives Tool

Accessibility Audit API

Automatisiertes WCAG-Audit mit Verstößen, betroffenen Elementen und einem Score durchführen.

Wählen Sie dies, wenn: Wählen Sie dies, um ein automatisiertes WCAG-Audit einer Seite mit Verstößen nach Auswirkung und betroffenen Elementen durchzuführen.

Eingaben
URL, Domain
Ergebnisse
Verifizieren, Bewerten
Credits
8
SynchronRESTMCPSDKInteraktives Tool

Cookie- und Tracker-Scanner-API

Cookies, Tracker und Consent-Manager vor der Einwilligung auflisten.

Wählen Sie dies, wenn: Wählen Sie dies, um die Cookies, Tracker und den Consent-Manager zu sehen, die eine Seite vor jeder Einwilligung lädt.

Eingaben
URL, Domain
Ergebnisse
Entdecken, Bewerten
Credits
8
SynchronRESTMCPSDKInteraktives Tool

Page Weight und Ressourcen API

Seitengröße, Anfragen, Drittanbieter und Ladezeiten messen.

Wählen Sie dies, wenn: Wählen Sie dies, um Bytes, Anfragen, Drittanbieter, renderblockierende Ressourcen und Ladezeiten einer Seite zu messen.

Eingaben
URL, Domain
Ergebnisse
Bewerten
Credits
6
SynchronRESTMCPSDKInteraktives Tool

Website-Kategorisierung

Kategorisieren Sie eine Website nach Branche, Inhaltstyp und Themen.

Wählen Sie dies, wenn: Wählen Sie dies, wenn Sie eine allgemeine Inhalts- oder Geschäftskategorie für Routing, Forschung oder Prüfung benötigen.

Eingaben
URL, Domain
Ergebnisse
Anreichern, Bewerten
Credits
0-3
SynchronStapelverarbeitungRESTMCPSDKInteraktives Tool

Einheitliche URL-Intelligence

Extrahieren Sie normalisierte Seitenmetadaten, Vorschaufelder, strukturierte Daten und öffentliche Identitätssignale aus einer URL.

Wählen Sie dies, wenn: Wählen Sie dies, wenn Sie vor einer tieferen Sammlung eine normalisierte URL-Struktur und risikoorientierte URL-Signale benötigen.

Eingaben
URL
Ergebnisse
Erfassen, Anreichern
Credits
2
SynchronStapelverarbeitungRESTMCPSDK

Workflows

Prüfen Sie die URL, sammeln Sie die Seite als Markdown und ergänzen Sie die für die Agentenaufgabe benötigten Kategorie- oder Technologiebelege.

Von der Seite zum agentenbereiten Kontext

Prüfen Sie die URL, sammeln Sie die Seite als Markdown und ergänzen Sie die für die Agentenaufgabe benötigten Kategorie- oder Technologiebelege.

Momentaufnahme der Website-Recherche

Sammeln Sie eine repräsentative Seite, lösen Sie ihr endgültiges Ziel auf und verbinden Sie Inhalte mit Kategorie- und Technologie-Signalen.

Eine öffentliche Seite als Markdown sammeln

Übermitteln Sie eine öffentliche URL per POST /v1/scrape mit Markdown-Ausgabe. Nutzen Sie zuerst den Standardmodus und wählen Sie Rendering nur bei JavaScript-Abhängigkeit.

Beispielanfrage
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'
Beispielantwort
{
  "data": {
    "url": "https://example.com",
    "outcome": "success",
    "content": "# Example Domain",
    "truncated": false
  },
  "billing": { "credits_charged": 1, "credits_refunded": 0 }
}

Zuerst synchron, Jobs bei Bedarf

Scrapen Sie eine Seite synchron oder übermitteln Sie 1 bis 100 öffentliche URLs an einen kostenpflichtigen asynchronen Scrape-Job. Technology Detection unterstützt ebenfalls produktspezifische Batch- und Job-Pfade.

SynchronStapelverarbeitungAsynchronRESTMCPSDKInteraktives Tool

Begrenzte Sammlung öffentlicher Seiten

Die Sammlung nutzt begrenzte Weiterleitungen, Antwortgrößen, Parallelität und Verarbeitungsmodi. Der Zugriff auf jede Seite wird nicht versprochen.

Beginnen Sie mit einer Seite und ergänzen Sie nur den benötigten Kontext

Prüfen Sie die fünf Webdaten-Produkte oder stellen Sie Ihre erste Scrape-Anfrage über die Dokumentation.