Für Entwickler, Forscher und Agentenbauer
Nutzen Sie fokussierte APIs, wenn ein Produkt oder Workflow aktuelle Belege einer öffentlichen Seite in strukturierter Form benötigt.
Webdaten
Öffentliche Webinhalte mit dem nötigen Nutzungskontext sammeln
Gehen Sie von einer URL zu lesbaren Inhalten, dem endgültigen Ziel, sichtbaren Technologien, der Kategorie und URL-Signalen.
Beginnen Sie mit dem benötigten Ergebnis
Sammeln Sie Inhalte zur Analyse, verfolgen Sie ein Ziel, bevor Sie es aufrufen, oder reichern Sie eine bekannte Seite mit Technologie- und Kategorie-Kontext an.
Eingaben
URLDomain
Ergebnisse
ErfassenBewertenEntdeckenAnreichern
Wählen Sie das engste Produkt, das die Frage beantwortet
Nutzen Sie Scrape für Seiteninhalte. Ergänzen Sie Redirects, Technology Detection, Website Categorization oder URL Intelligence nur, wenn dieser Kontext die Entscheidung verändert.
Web-Scraping
Rufe öffentliche Webseiten als HTML, Markdown oder Text ab, mit synchronen und asynchronen Optionen.
Wählen Sie dies, wenn: Wählen Sie dies, wenn Sie HTML, Text oder Markdown einer öffentlichen Seite benötigen, mit Rendering oder asynchroner Sammlung nur, wenn dies unterstützt und erforderlich ist.
- Eingaben
- URL
- Ergebnisse
- Erfassen
- Credits
- 0-20
SynchronAsynchronRESTMCPSDK
Weiterleitungskette
Verfolgen Sie die vollständige Weiterleitungskette für eine URL.
Wählen Sie dies, wenn: Wählen Sie dies, wenn Ziel und Weiterleitungskette wichtiger sind als der Seiteninhalt.
- Eingaben
- URL, Domain
- Ergebnisse
- Erfassen, Bewerten
- Credits
- 2
SynchronRESTMCPSDKInteraktives Tool
Tech-Stack-Erkennung
Erkennen Sie den von einer Website verwendeten Tech-Stack, einschließlich CMS, Frameworks und Diensten.
Wählen Sie dies, wenn: Wählen Sie dies, wenn Sie Belege für offengelegte Frameworks, Plattformen, Analysen oder Infrastrukturtechnologien benötigen.
- Eingaben
- URL, Domain
- Ergebnisse
- Entdecken, Anreichern, Bewerten
- Credits
- 0-9
SynchronStapelverarbeitungAsynchronRESTMCPSDKInteraktives Tool
Website-Kategorisierung
Kategorisieren Sie eine Website nach Branche, Inhaltstyp und Themen.
Wählen Sie dies, wenn: Wählen Sie dies, wenn Sie eine allgemeine Inhalts- oder Geschäftskategorie für Routing, Forschung oder Prüfung benötigen.
- Eingaben
- URL, Domain
- Ergebnisse
- Anreichern, Bewerten
- Credits
- 0-3
SynchronStapelverarbeitungRESTMCPSDKInteraktives Tool
Einheitliche URL-Intelligence
Extrahieren Sie normalisierte Seitenmetadaten, Vorschaufelder, strukturierte Daten und öffentliche Identitätssignale aus einer URL.
Wählen Sie dies, wenn: Wählen Sie dies, wenn Sie vor einer tieferen Sammlung eine normalisierte URL-Struktur und risikoorientierte URL-Signale benötigen.
- Eingaben
- URL
- Ergebnisse
- Erfassen, Anreichern
- Credits
- 2
SynchronStapelverarbeitungRESTMCPSDK
Workflows
Prüfen Sie die URL, sammeln Sie die Seite als Markdown und ergänzen Sie die für die Agentenaufgabe benötigten Kategorie- oder Technologiebelege.
Von der Seite zum agentenbereiten Kontext
Prüfen Sie die URL, sammeln Sie die Seite als Markdown und ergänzen Sie die für die Agentenaufgabe benötigten Kategorie- oder Technologiebelege.
Momentaufnahme der Website-Recherche
Sammeln Sie eine repräsentative Seite, lösen Sie ihr endgültiges Ziel auf und verbinden Sie Inhalte mit Kategorie- und Technologie-Signalen.
Eine öffentliche Seite als Markdown sammeln
Übermitteln Sie eine öffentliche URL per POST /v1/scrape mit Markdown-Ausgabe. Nutzen Sie zuerst den Standardmodus und wählen Sie Rendering nur bei JavaScript-Abhängigkeit.
Beispielanfrage
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'Beispielantwort
{
"data": {
"url": "https://example.com",
"outcome": "success",
"content": "# Example Domain",
"truncated": false
},
"billing": { "credits_charged": 1, "credits_refunded": 0 }
}Zuerst synchron, Jobs bei Bedarf
Scrapen Sie eine Seite synchron oder übermitteln Sie 1 bis 100 öffentliche URLs an einen kostenpflichtigen asynchronen Scrape-Job. Technology Detection unterstützt ebenfalls produktspezifische Batch- und Job-Pfade.
SynchronStapelverarbeitungAsynchronRESTMCPSDKInteraktives Tool
Begrenzte Sammlung öffentlicher Seiten
Die Sammlung nutzt begrenzte Weiterleitungen, Antwortgrößen, Parallelität und Verarbeitungsmodi. Der Zugriff auf jede Seite wird nicht versprochen.
Verwandte Lösungen
Öffentliche Webseiten in einer für Ihre Anwendung nutzbaren Form sammeln
Wählen Sie den niedrigsten ausreichenden Sammlungsmodus, bewahren Sie Zielbelege und reichern Sie das Ergebnis nur bei Bedarf an.
Geben Sie Agenten aktuellen Webkontext mit klaren Grenzen
Lassen Sie einen Agenten eine Seite sammeln, die dahinterliegende Domain verstehen und tiefere Belege nur bei Bedarf anfordern.
Erstellen Sie einen wiederholbaren öffentlichen Belegdatensatz für Wettbewerberdomains
Sammeln Sie öffentliche Seiten und verbinden Sie sie mit Domain-, Unternehmens-, Technologie-, DNS- und Infrastrukturkontext.
Beginnen Sie mit einer Seite und ergänzen Sie nur den benötigten Kontext
Prüfen Sie die fünf Webdaten-Produkte oder stellen Sie Ihre erste Scrape-Anfrage über die Dokumentation.