للمطورين والباحثين وبناة الوكلاء
استخدم واجهات API المركّزة عندما يحتاج المنتج أو سير العمل إلى دليل حديث عن صفحة عامة في استجابة منظمة.
انتقل من URL إلى محتوى مقروء ووجهته النهائية والتقنيات الظاهرة والفئة والإشارات على مستوى URL.
استخدم واجهات API المركّزة عندما يحتاج المنتج أو سير العمل إلى دليل حديث عن صفحة عامة في استجابة منظمة.
اجمع المحتوى للتحليل، وتتبع الوجهة قبل متابعتها، أو أضف سياق التقنية والفئة إلى صفحة معروفة.
استخدم Scrape لمحتوى الصفحة. أضف Redirects أو Technology Detection أو Website Categorization أو URL Intelligence فقط عندما يغيّر ذلك القرار.
اجلب صفحات الويب العامة بصيغة HTML أو Markdown أو نص، مع خيارات متزامنة وغير متزامنة.
اختر هذا عندما: اختره عندما تحتاج إلى HTML أو نص أو Markdown من صفحة عامة، مع استخدام العرض أو الجمع غير المتزامن فقط عند دعمه وضرورته.
تتبع سلسلة إعادة التوجيه الكاملة لعنوان URL.
اختر هذا عندما: اختره عندما تكون الوجهة وسلسلة إعادة التوجيه أهم من نص الصفحة.
اكتشف مجموعة التقنيات المستخدمة من قبل موقع ويب بما في ذلك CMS والأطر والخدمات.
اختر هذا عندما: اختره عندما تحتاج إلى دليل على أطر العمل أو المنصات أو التحليلات أو تقنيات البنية التحتية المكشوفة.
صنّف موقع ويب حسب الصناعة ونوع المحتوى والمواضيع.
اختر هذا عندما: اختره عندما تحتاج إلى فئة عامة للمحتوى أو الأعمال من أجل التوجيه أو البحث أو المراجعة.
استخرج بيانات تعريف الصفحة الموحّدة وحقول المعاينة والبيانات المنظّمة وإشارات الهوية العامة من URL.
اختر هذا عندما: اختره عندما تحتاج إلى بنية URL مطبّعة وإشارات URL موجهة للمخاطر قبل الجمع الأعمق.
افحص URL، واجمع الصفحة بصيغة Markdown، ثم أضف دليل الفئة أو التقنية المطلوب لمهمة الوكيل.
افحص URL، واجمع الصفحة بصيغة Markdown، ثم أضف دليل الفئة أو التقنية المطلوب لمهمة الوكيل.
اجمع صفحة ممثلة، وحل وجهتها النهائية، واجمع المحتوى مع إشارات فئة الموقع والتقنيات المكشوفة.
أرسل URL عامًا إلى POST /v1/scrape مع مخرجات Markdown. استخدم الوضع standard أولًا، ثم اختر العرض فقط عندما تتطلب الصفحة JavaScript.
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'
{
"data": {
"url": "https://example.com",
"outcome": "success",
"content": "# Example Domain",
"truncated": false
},
"billing": { "credits_charged": 1, "credits_refunded": 0 }
}
اجمع صفحة واحدة بشكل متزامن أو أرسل من 1 إلى 100 URL عامًا إلى مهمة Scrape غير متزامنة مدفوعة. يدعم Technology Detection أيضًا مسارات الدُفعات والمهام الخاصة بالمنتج.
يستخدم الجمع حدودًا لإعادة التوجيه وحجم الاستجابة والتزامن وأوضاع المعالجة. ولا يضمن الوصول إلى كل صفحة.
اختر أقل وضع جمع كافٍ، واحتفظ بأدلة الوجهة، وأثرِ النتيجة فقط عندما يحتاج سير العمل إلى ذلك.
اسمح للوكيل بجمع صفحة وفهم النطاق الذي يقف وراءها، وطلب أدلة أعمق فقط عندما تتطلب المهمة ذلك.
اجمع الصفحات العامة واربطها بسياق النطاق والشركة والتقنية وDNS والبنية التحتية.
راجع منتجات بيانات الويب الخمسة أو أنشئ طلب Scrape أولًا من المستندات.