بيانات الويب

اجمع محتوى الويب العام مع السياق اللازم لاستخدامه

انتقل من URL إلى محتوى مقروء ووجهته النهائية والتقنيات الظاهرة والفئة والإشارات على مستوى URL.

للمطورين والباحثين وبناة الوكلاء

استخدم واجهات API المركّزة عندما يحتاج المنتج أو سير العمل إلى دليل حديث عن صفحة عامة في استجابة منظمة.

ابدأ بالمخرجات التي تحتاج إليها

اجمع المحتوى للتحليل، وتتبع الوجهة قبل متابعتها، أو أضف سياق التقنية والفئة إلى صفحة معروفة.

المدخلات

URLالنطاق

النتائج

جمعتقييماكتشافإثراء

اختر أضيق منتج يجيب عن السؤال

استخدم Scrape لمحتوى الصفحة. أضف Redirects أو Technology Detection أو Website Categorization أو URL Intelligence فقط عندما يغيّر ذلك القرار.

استخراج بيانات الويب

اجلب صفحات الويب العامة بصيغة HTML أو Markdown أو نص، مع خيارات متزامنة وغير متزامنة.

اختر هذا عندما: اختره عندما تحتاج إلى HTML أو نص أو Markdown من صفحة عامة، مع استخدام العرض أو الجمع غير المتزامن فقط عند دعمه وضرورته.

المدخلات
URL
النتائج
جمع
الأرصدة
0-20
متزامنغير متزامنRESTMCPSDK

سلسلة إعادة التوجيه

تتبع سلسلة إعادة التوجيه الكاملة لعنوان URL.

اختر هذا عندما: اختره عندما تكون الوجهة وسلسلة إعادة التوجيه أهم من نص الصفحة.

المدخلات
URL, النطاق
النتائج
جمع, تقييم
الأرصدة
2
متزامنRESTMCPSDKأداة تفاعلية

كشف مجموعة التقنيات

اكتشف مجموعة التقنيات المستخدمة من قبل موقع ويب بما في ذلك CMS والأطر والخدمات.

اختر هذا عندما: اختره عندما تحتاج إلى دليل على أطر العمل أو المنصات أو التحليلات أو تقنيات البنية التحتية المكشوفة.

المدخلات
URL, النطاق
النتائج
اكتشاف, إثراء, تقييم
الأرصدة
0-9
متزامندفعيغير متزامنRESTMCPSDKأداة تفاعلية

تصنيف موقع الويب

صنّف موقع ويب حسب الصناعة ونوع المحتوى والمواضيع.

اختر هذا عندما: اختره عندما تحتاج إلى فئة عامة للمحتوى أو الأعمال من أجل التوجيه أو البحث أو المراجعة.

المدخلات
URL, النطاق
النتائج
إثراء, تقييم
الأرصدة
0-3
متزامندفعيRESTMCPSDKأداة تفاعلية

استخبارات URL موحّدة

استخرج بيانات تعريف الصفحة الموحّدة وحقول المعاينة والبيانات المنظّمة وإشارات الهوية العامة من URL.

اختر هذا عندما: اختره عندما تحتاج إلى بنية URL مطبّعة وإشارات URL موجهة للمخاطر قبل الجمع الأعمق.

المدخلات
URL
النتائج
جمع, إثراء
الأرصدة
2
متزامندفعيRESTMCPSDK

سير العمل

افحص URL، واجمع الصفحة بصيغة Markdown، ثم أضف دليل الفئة أو التقنية المطلوب لمهمة الوكيل.

من الصفحة إلى سياق جاهز للوكيل

افحص URL، واجمع الصفحة بصيغة Markdown، ثم أضف دليل الفئة أو التقنية المطلوب لمهمة الوكيل.

لقطة بحث عن موقع

اجمع صفحة ممثلة، وحل وجهتها النهائية، واجمع المحتوى مع إشارات فئة الموقع والتقنيات المكشوفة.

اجمع صفحة عامة واحدة بصيغة Markdown

أرسل URL عامًا إلى POST /v1/scrape مع مخرجات Markdown. استخدم الوضع standard أولًا، ثم اختر العرض فقط عندما تتطلب الصفحة JavaScript.

طلب مثال
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'
مثال الرد
{
  "data": {
    "url": "https://example.com",
    "outcome": "success",
    "content": "# Example Domain",
    "truncated": false
  },
  "billing": { "credits_charged": 1, "credits_refunded": 0 }
}

ابدأ بالتنفيذ المتزامن، واستخدم المهام عند الحاجة

اجمع صفحة واحدة بشكل متزامن أو أرسل من 1 إلى 100 URL عامًا إلى مهمة Scrape غير متزامنة مدفوعة. يدعم Technology Detection أيضًا مسارات الدُفعات والمهام الخاصة بالمنتج.

متزامندفعيغير متزامنRESTMCPSDKأداة تفاعلية

جمع صفحات عامة ضمن حدود

يستخدم الجمع حدودًا لإعادة التوجيه وحجم الاستجابة والتزامن وأوضاع المعالجة. ولا يضمن الوصول إلى كل صفحة.

ابدأ بصفحة واحدة ثم أضف السياق الذي تحتاج إليه فقط

راجع منتجات بيانات الويب الخمسة أو أنشئ طلب Scrape أولًا من المستندات.