Веб-данные · Продукт DomScan

API Веб-скрейпинг

Получайте общедоступные веб-страницы в формате HTML, Markdown или текста с синхронным и асинхронным режимами.

Что вы получите

Получайте общедоступные веб-страницы в формате HTML, Markdown или текста с синхронным и асинхронным режимами.

СинхронныйАсинхронныйRESTMCPSDK

Выберите этот продукт, если

Для кого этот продукт

Используйте специализированные API, когда продукту или процессу нужны актуальные данные открытой страницы в структурированном ответе.

Выберите этот продукт, если

Выбирайте, если нужны HTML, текст или Markdown общедоступной страницы, используя рендеринг или асинхронный сбор только при поддержке и необходимости.

Что вы получите

Получайте общедоступные веб-страницы в формате HTML, Markdown или текста с синхронным и асинхронным режимами.

Конечные точки

Перед интеграцией изучите поддерживаемые операции, входные и выходные данные, режимы выполнения и ограничения ответа.

GET /v1/scrape/jobs/:job_id Открыть справочник API
GET /v1/scrape/jobs/:job_id/results Открыть справочник API

Кредиты и аутентификация

0-20 Требуется аутентификация. Точную стоимость и правила оплаты каждого элемента см. в справочнике операции.

Пример операции

Используйте документированные операции для сбора, оценки, обогащения, проверки, сравнения, защиты или мониторинга открытых данных.

POST /v1/scrape

Параметры тела запроса

Параметр Тип обязателен
url string обязателен
mode string
Допустимые значения standardresilientrenderedrendered_resilient
По умолчанию standard
опционально
output string
Допустимые значения htmltextmarkdown
По умолчанию html
опционально

Поля ответа

Поле Тип
data object
data.url string
data.final_url string
data.status integer | null
data.outcome string
data.content_type string | null
data.content string
data.bytes integer
data.truncated boolean
data.redirect_count integer
data.attempt_count integer
data.duration_ms integer
data.fetched_at string
data.headers object
data.rendered boolean
billing object
billing.credits_charged integer
billing.credits_refunded integer
billing.credits_per_item integer
billing.credits_net integer
billing.policy string

Пример запроса

curl -X POST "https://domscan.net/v1/scrape" \
  -H "Content-Type: application/json" \
  -H "X-API-Key: $DOMSCAN_API_KEY" \
  -d '{
  "url": "https://example.com/",
  "mode": "standard",
  "output": "markdown"
}'

Пример ответа

{
  "data": {
    "url": "https://example.com",
    "final_url": "https://example.com",
    "status": 1,
    "outcome": "success",
    "content_type": "domain",
    "content": "example",
    "bytes": 1,
    "truncated": false,
    "redirect_count": 1,
    "attempt_count": 1,
    "duration_ms": 1,
    "fetched_at": "2026-08-27T12:00:00Z",
    "headers": {},
    "rendered": false
  },
  "billing": {
    "credits_charged": 1,
    "credits_refunded": 1,
    "credits_per_item": 1,
    "credits_net": 1,
    "policy": "effort_based"
  }
}

Ограничения и границы доказательств

Продукт оценивает только открытые входные данные и публично наблюдаемые свидетельства.
Точность охвата ограничена документированными входными данными, бюджетами, источниками и пределами ответа.
Асинхронные задачи возвращают идентификатор для опроса состояния и последующего получения результатов.
Пакетные операции обрабатывают несколько входных данных, сохраняя документированные результаты по каждому элементу.
Частичный результат означает, что часть элементов или компонентов выполнена, а часть нет.
Кэшированный результат использует сохранённые данные; при наличии проверяйте сведения об актуальности.

Проверено 2026-08-22

Часто задаваемые вопросы

Где найти справочник запросов и ответов для Веб-скрейпинг?

В справочнике API для Веб-скрейпинг описаны параметры, поля ответа, примеры, коды состояния и поддерживаемые режимы выполнения.

Как интерпретировать неизвестные или неполные результаты Веб-скрейпинг?

Неизвестный или частичный результат означает, что запрошенные данные не удалось определить полностью. Учитывайте состояние результата, уверенность, актуальность и ограничения при дальнейших решениях.

Как рассчитывается цена Веб-скрейпинг?

Цена зависит от операции и режима выполнения. Текущую стоимость кредита, требования к аутентификации и правила оплаты каждого элемента см. в справочнике операции.

Используется сотрудниками известных компаний

InstantOutseerMongoDBRespondentSage Expense ManagementInstantlyD.R. HortonWhatConvertsAdobeMotionElementsLLM Pulse