Webbdata · DomScan-produkt

Webbskrapning API-referens

Hämta offentliga webbsidor som HTML, Markdown eller text med synkrona och asynkrona alternativ.

Det här får du

Hämta offentliga webbsidor som HTML, Markdown eller text med synkrona och asynkrona alternativ.

SynkrontAsynkrontRESTMCPSDK

Välj denna produkt när

Vem är det till för?

Använd fokuserade API:er när en produkt eller ett arbetsflöde behöver aktuella bevis från en offentlig sida i ett strukturerat svar.

Välj denna produkt när

Välj detta när du behöver HTML, text eller Markdown från en offentlig sida, med rendering eller asynkron insamling endast när det stöds och behövs.

Det här får du

Hämta offentliga webbsidor som HTML, Markdown eller text med synkrona och asynkrona alternativ.

Endpoints

Granska stödda operationer, indata, utdata, körningslägen och svarsbegränsningar innan du integrerar.

POST /v1/scrape Visa API-referens
POST /v1/scrape/jobs Visa API-referens
GET /v1/scrape/jobs/:job_id Visa API-referens
GET /v1/scrape/jobs/:job_id/results Visa API-referens

Credits och autentisering

0-20 Autentisering krävs. Se operationsreferensen för exakt kostnad och eventuell prissättning per objekt.

Exempel på operation

Använd dokumenterade operationer för att samla in, bedöma, berika, verifiera, jämföra, skydda eller övervaka offentliga bevis.

POST /v1/scrape

Brödtextparametrar

Parameter Typ obligatorisk
url string obligatorisk
mode string
Tillåtna värden standardresilientrenderedrendered_resilient
Standard standard
valfri
output string
Tillåtna värden htmltextmarkdown
Standard html
valfri

Svarsfält

Fält Typ
data object
data.url string
data.final_url string
data.status integer | null
data.outcome string
data.content_type string | null
data.content string
data.bytes integer
data.truncated boolean
data.redirect_count integer
data.attempt_count integer
data.duration_ms integer
data.fetched_at string
data.headers object
data.rendered boolean
billing object
billing.credits_charged integer
billing.credits_refunded integer
billing.credits_per_item integer
billing.credits_net integer
billing.policy string

Exempelbegäran

curl -X POST "https://domscan.net/v1/scrape" \
  -H "Content-Type: application/json" \
  -H "X-API-Key: $DOMSCAN_API_KEY" \
  -d '{
  "url": "https://example.com/",
  "mode": "standard",
  "output": "markdown"
}'

Exempelsvar

{
  "data": {
    "url": "https://example.com",
    "final_url": "https://example.com",
    "status": 1,
    "outcome": "success",
    "content_type": "domain",
    "content": "example",
    "bytes": 1,
    "truncated": false,
    "redirect_count": 1,
    "attempt_count": 1,
    "duration_ms": 1,
    "fetched_at": "2026-08-27T12:00:00Z",
    "headers": {},
    "rendered": false
  },
  "billing": {
    "credits_charged": 1,
    "credits_refunded": 1,
    "credits_per_item": 1,
    "credits_net": 1,
    "policy": "effort_based"
  }
}

Begränsningar och bevisgränser

Produkten utvärderar endast offentliga indata och offentligt observerbara bevis.
Täckningen begränsas av dokumenterade indata, budgetar, källor och svarsbegränsningar.
Asynkrona jobb returnerar en identifierare för statuspollning och senare hämtning av resultat.
Bulkoperationer behandlar flera stödda indata och bevarar dokumenterade resultat per objekt.
Partiellt betyder att vissa begärda objekt eller komponenter slutfördes medan andra inte gjorde det.
Cachat innebär att lagrade bevis användes. Granska metadata för aktualitet när den finns.

Granskad 2026-08-22

Vanliga frågor

Var hittar jag request- och response-referensen för Webbskrapning?

Använd API-referensen för Webbskrapning för att granska parametrar, svarsfält, exempel, statuskoder och stödda körningslägen.

Hur ska jag tolka okända eller ofullständiga resultat från Webbskrapning?

Okända eller partiella resultat betyder att de begärda bevisen inte kunde fastställas helt. Behåll resultatstatus, konfidens, aktualitet och begränsningar i efterföljande beslut.

Hur prissätts Webbskrapning?

Priset beror på operation och körningsläge. Se endpointreferensen för aktuell creditkostnad, autentiseringskrav och regler per objekt.

Används av människor på fantastiska företag

InstantOutseerMongoDBRespondentSage Expense ManagementInstantlyD.R. HortonWhatConvertsAdobeMotionElementsLLM Pulse