بيانات الويب · منتج DomScan

API الخاص بـ استخراج بيانات الويب

اجلب صفحات الويب العامة والمستندات بصيغة HTML أو Markdown أو نص جاهز لـ LLM أو نص عادي، صفحة تلو الأخرى أو على دفعات أو عبر الزحف إلى موقع كامل.

ما الذي تحصل عليه

اجلب صفحات الويب العامة والمستندات بصيغة HTML أو Markdown أو نص جاهز لـ LLM أو نص عادي، صفحة تلو الأخرى أو على دفعات أو عبر الزحف إلى موقع كامل.

متزامنغير متزامنRESTMCPSDK

اختر هذا المنتج عندما

لمن صُمم هذا المنتج

استخدم واجهات API المركّزة عندما يحتاج المنتج أو سير العمل إلى دليل حديث عن صفحة عامة في استجابة منظمة.

اختر هذا المنتج عندما

اختره عندما تحتاج إلى HTML أو نص أو Markdown نظيف من صفحات عامة أو ملفات PDF أو جداول بيانات، من صفحة واحدة وحتى موقع كامل، مع استخدام العرض أو الجمع غير المتزامن فقط عند دعمه وضرورته.

ما الذي تحصل عليه

اجلب صفحات الويب العامة والمستندات بصيغة HTML أو Markdown أو نص جاهز لـ LLM أو نص عادي، صفحة تلو الأخرى أو على دفعات أو عبر الزحف إلى موقع كامل.

نقاط النهاية

اطّلع على ما تقبله كل نقطة نهاية وما تعيده وأوضاعها وحدودها قبل التكامل.

POST /v1/scrape عرض مرجع API
POST /v1/scrape/jobs عرض مرجع API
GET /v1/scrape/jobs/:job_id عرض مرجع API
GET /v1/scrape/jobs/:job_id/results عرض مرجع API
POST /v1/crawl/jobs عرض مرجع API
GET /v1/crawl/jobs/:job_id عرض مرجع API
GET /v1/crawl/jobs/:job_id/results عرض مرجع API

الوحدات والمصادقة

0-20 المصادقة مطلوبة. راجع مرجع API لمعرفة التكلفة الدقيقة، بما في ذلك أي تسعير لكل عنصر.

مثال على عملية

استخدم العمليات الموثقة لجمع الأدلة العامة أو تقييمها أو إثرائها أو التحقق منها أو مقارنتها أو حمايتها أو مراقبتها.

POST /v1/scrape الرصيد: 1-20/item

معاملات متن الطلب

المعامل النوع مطلوب
url string مطلوب
mode string
القيم المسموحة standardresilientrenderedrendered_resilient
الافتراضي standard
اختياري
output string
القيم المسموحة htmltextmarkdownllm
الافتراضي html
اختياري
only_main_content boolean
الافتراضي false
اختياري
include_selectors string[] اختياري
exclude_selectors string[] اختياري
links boolean
الافتراضي false
اختياري
headers object اختياري
cookies object اختياري

حقول الرد

الحقل النوع
data object
data.url string
data.final_url string
data.status integer | null
data.outcome string
data.content_type string | null
data.content string
data.bytes integer
data.truncated boolean
data.redirect_count integer
data.attempt_count integer
data.duration_ms integer
data.fetched_at string
data.headers object
data.rendered boolean
data.links[] object[]
data.links[] object
data.links[].url string
data.links[].text string
data.document object
data.document.kind string
data.document.title string | null
data.document.pages integer | null
data.document.sheets[] string[]
data.document.truncated boolean
data.document.error string
data.depth integer
data.forwarded object
data.forwarded.header_names[] string[]
data.forwarded.cookie_names[] string[]
data.forwarded.scope string
billing object
billing.credits_charged integer
billing.credits_refunded integer
billing.credits_per_item integer
billing.credits_net integer
billing.policy string

طلب مثال

curl -X POST "https://domscan.net/v1/scrape" \
  -H "Content-Type: application/json" \
  -H "X-API-Key: $DOMSCAN_API_KEY" \
  -d '{
  "url": "https://example.com/",
  "mode": "standard",
  "output": "markdown"
}'
const response = await fetch("https://domscan.net/v1/scrape", {
  method: "POST",
  headers: { "X-API-Key": process.env.DOMSCAN_API_KEY, "Content-Type": "application/json" },
  body: JSON.stringify({
    "url": "https://example.com/",
    "mode": "standard",
    "output": "markdown"
  }),
});
const data = await response.json();
console.log(data);
import os
import requests

response = requests.post(
    "https://domscan.net/v1/scrape",
    headers={"X-API-Key": os.environ["DOMSCAN_API_KEY"]},
    json={
        "url": "https://example.com/",
        "mode": "standard",
        "output": "markdown",
    },
)
print(response.json())
package main

import (
	"fmt"
	"io"
	"net/http"
	"os"
	"strings"
)

func main() {
	body := strings.NewReader(`{
	  "url": "https://example.com/",
	  "mode": "standard",
	  "output": "markdown"
	}`)
	req, err := http.NewRequest(http.MethodPost, "https://domscan.net/v1/scrape", body)
	if err != nil {
		panic(err)
	}
	req.Header.Set("X-API-Key", os.Getenv("DOMSCAN_API_KEY"))
	req.Header.Set("Content-Type", "application/json")

	resp, err := http.DefaultClient.Do(req)
	if err != nil {
		panic(err)
	}
	defer resp.Body.Close()

	data, err := io.ReadAll(resp.Body)
	if err != nil {
		panic(err)
	}
	fmt.Println(resp.Status, string(data))
}
require "json"
require "net/http"

uri = URI("https://domscan.net/v1/scrape")
request = Net::HTTP::Post.new(uri)
request["X-API-Key"] = ENV.fetch("DOMSCAN_API_KEY")
request["Content-Type"] = "application/json"
request.body = JSON.generate({
  "url" => "https://example.com/",
  "mode" => "standard",
  "output" => "markdown"
})

response = Net::HTTP.start(uri.hostname, uri.port, use_ssl: true) do |http|
  http.request(request)
end
puts JSON.pretty_generate(JSON.parse(response.body))

مثال الرد

{
  "data": {
    "url": "https://example.com",
    "final_url": "https://example.com",
    "status": 1,
    "outcome": "success",
    "content_type": "domain",
    "content": "example",
    "bytes": 1,
    "truncated": false,
    "redirect_count": 1,
    "attempt_count": 1,
    "duration_ms": 1,
    "fetched_at": "2026-08-27T12:00:00Z",
    "headers": {},
    "rendered": false,
    "links": [
      {
        "url": "https://example.com",
        "text": "example"
      }
    ],
    "document": {
      "kind": "pdf",
      "title": "example",
      "pages": 1,
      "sheets": [
        "example"
      ],
      "truncated": false,
      "error": "DOCUMENT_UNREADABLE"
    },
    "depth": 1,
    "forwarded": {
      "header_names": [
        "example"
      ],
      "cookie_names": [
        "example"
      ],
      "scope": "requested_origin"
    }
  },
  "billing": {
    "credits_charged": 1,
    "credits_refunded": 1,
    "credits_per_item": 1,
    "credits_net": 1,
    "policy": "effort_based"
  }
}

رموز حالة HTTP

  • 200 OK
  • 400 طلب غير صالح
  • 401 غير مصرح
  • 402 الدفع مطلوب
  • 403 محظور
  • 409 HTTP 409
  • 422 HTTP 422
  • 429 طلبات كثيرة جداً
  • 503 الخدمة غير متاحة

الأسئلة الشائعة

أين أجد مرجع طلب واستجابة استخراج بيانات الويب؟

استخدم مرجع API الخاص بـ استخراج بيانات الويب لمراجعة المعاملات وحقول الاستجابة والأمثلة ورموز الحالة وأنماط التشغيل المدعومة.

كيف أفسر النتائج غير المعروفة أو غير المكتملة من استخراج بيانات الويب؟

غير معروف أو جزئي يعني أننا لم نتمكن من تأكيد النتيجة بالكامل. ضع الحالة ومستوى الثقة وحداثة البيانات وأي حدود في اعتبارك عند التصرف بناءً عليها.

كيف يتم احتساب سعر استخراج بيانات الويب؟

يعتمد السعر على الفحص والوضع الذي تختاره. يعرض مرجع API تكلفة الأرصدة الحالية، وما إذا كنت تحتاج إلى مفتاح API، وأي تسعير لكل عنصر.

يستخدمه أشخاص في هذه الشركات

InstantOutseerMongoDBRespondentSage Expense ManagementInstantlyD.R. HortonWhatConvertsAdobeLLM Pulse