للمطورين وفرق البيانات والباحثين وبناة الوكلاء
استخدم سير العمل هذا لجمع الصفحات المحدد، واستخراج المحتوى، ومدخلات البحث، وسياق الصفحات العامة.
حل لجمع البيانات
اجمع صفحات الويب العامة بصيغة يمكن لتطبيقك استخدامها
اختر أقل وضع جمع كافٍ، واحتفظ بأدلة الوجهة، وأثرِ النتيجة فقط عندما يحتاج سير العمل إلى ذلك.
محتوى صفحة قابل للاستخدام مع سياق الجمع
استلم HTML أو نصًا أو Markdown مع أدلة الوجهة النهائية والمعالجة لكل طلب مدعوم.
عنوان URL وحده ليس سجل محتوى موثوقًا
قد تعيد الصفحة التوجيه، أو تتطلب JavaScript، أو تتجاوز حجم الاستجابة المحدد، أو تكشف جزءًا فقط من السياق الذي يحتاج إليه تطبيقك.
الجمع محدد والوصول غير مضمون
لا يتجاوز DomScan المصادقة أو جدران الدفع أو ضوابط الوصول أو قيود الهدف، ولا يَعِد بإمكانية جمع كل عنوان URL عام.
سير العمل
استلم HTML أو نصًا أو Markdown مع أدلة الوجهة النهائية والمعالجة لكل طلب مدعوم.
افحص عنوان URL الهدف وطَبّعه
استخدم URL Intelligence أو Redirects عندما ينبغي فحص إشارات الوجهة أو مخاطر URL قبل الجمع.
اجمع باستخدام أقل وضع كافٍ
ابدأ بـ Scrape القياسي، واختر سلوك إعادة المحاولة المرن فقط عند فائدته، واستخدم العرض للمحتوى المعتمد على JavaScript فقط.
أضف سياقًا منظمًا عندما يغيّر القرار
اطلب Website Categorization أو Technology Detection بعد الجمع عندما تحتاج المهمة اللاحقة إلى تلك الإشارات.
اجمع مقالًا عامًا بصيغة Markdown
أرسل عنوان URL للمقال في الوضع القياسي، واحتفظ بعنوان URL النهائي، وأضف دليل الفئة فقط إذا كان التطبيق يستخدمه.
طلب مثال
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'مثال الرد
{
"data": {
"url": "https://example.com",
"outcome": "success",
"content": "# Example Domain",
"truncated": false
},
"billing": { "credits_charged": 1, "credits_refunded": 0 }
}المنتجات في سير العمل هذا
استلم HTML أو نصًا أو Markdown مع أدلة الوجهة النهائية والمعالجة لكل طلب مدعوم.
استخراج بيانات الويب
اجلب صفحات الويب العامة بصيغة HTML أو Markdown أو نص، مع خيارات متزامنة وغير متزامنة.
اختر هذا عندما: اجلب صفحات الويب العامة بصيغة HTML أو Markdown أو نص، مع خيارات متزامنة وغير متزامنة.
- المدخلات
- URL
- النتائج
- جمع
- الأرصدة
- 0-20
متزامنغير متزامنRESTMCPSDK
استخبارات URL موحّدة
استخرج بيانات تعريف الصفحة الموحّدة وحقول المعاينة والبيانات المنظّمة وإشارات الهوية العامة من URL.
اختر هذا عندما: استخرج بيانات تعريف الصفحة الموحّدة وحقول المعاينة والبيانات المنظّمة وإشارات الهوية العامة من URL.
- المدخلات
- URL
- النتائج
- جمع, إثراء
- الأرصدة
- 2
متزامندفعيRESTMCPSDK
تصنيف موقع الويب
صنّف موقع ويب حسب الصناعة ونوع المحتوى والمواضيع.
اختر هذا عندما: صنّف موقع ويب حسب الصناعة ونوع المحتوى والمواضيع.
- المدخلات
- URL, النطاق
- النتائج
- إثراء, تقييم
- الأرصدة
- 0-3
متزامندفعيRESTMCPSDKأداة تفاعلية
دفعات API غير المتزامنة
ضع العديد من طلبات API المدعومة في قائمة انتظار واجمع نتائجها من دون إبقاء اتصال العميل مفتوحاً.
اختر هذا عندما: ضع العديد من طلبات API المدعومة في قائمة انتظار واجمع نتائجها من دون إبقاء اتصال العميل مفتوحاً.
- المدخلات
- النطاق, URL, عنوان البريد الإلكتروني
- النتائج
- أتمتة
- الأرصدة
- 0
غير متزامنRESTMCPSDK
اختر سير العمل هذا عندما
اختر هذا عندما
تحتاج إلى محتوى صفحة عامة محدد مع سياق صريح للوجهة والوضع والمعالجة.
غير مخصص لـ
لا تستخدمه لتجاوز ضوابط الوصول أو الزحف إلى موقع غير محدود أو ضمان جمع كل هدف.
حِزم منتجات ذات صلة
محتوى صفحة قابل للاستخدام مع سياق الجمع
اختر أقل وضع جمع كافٍ، واحتفظ بأدلة الوجهة، وأثرِ النتيجة فقط عندما يحتاج سير العمل إلى ذلك.