개발자, 연구자 및 에이전트 빌더를 위해
제품이나 워크플로가 구조화된 응답에서 최신 공개 페이지 증거를 필요로 할 때 집중형 API를 사용하세요.
웹 데이터
활용에 필요한 컨텍스트와 함께 공개 웹 콘텐츠를 수집하세요
URL에서 읽을 수 있는 콘텐츠, 최종 목적지, 노출된 기술, 카테고리 및 URL 수준 신호로 이동하세요.
필요한 출력부터 시작하세요
분석을 위해 콘텐츠를 수집하고, 따라가기 전에 목적지를 추적하거나, 알려진 페이지에 기술 및 카테고리 컨텍스트를 추가하세요.
입력
URL도메인
결과
수집평가발견보강
질문에 답하는 가장 좁은 제품을 선택하세요
페이지 콘텐츠에는 Scrape를 사용하세요. 결정이 달라질 때만 Redirects, Technology Detection, Website Categorization 또는 URL Intelligence를 추가하세요.
웹 스크래핑
공개 웹페이지를 HTML, Markdown 또는 텍스트로 가져오며 동기 및 비동기 옵션을 제공합니다.
다음과 같은 경우 선택: 공개 페이지에서 HTML, 텍스트 또는 Markdown이 필요할 때 선택하세요. 렌더링이나 비동기 수집은 지원되고 필요한 경우에만 사용합니다.
- 입력
- URL
- 결과
- 수집
- 크레딧
- 0-20
동기식비동기식RESTMCPSDK
리다이렉트 체인
URL의 전체 리다이렉트 체인을 추적합니다.
다음과 같은 경우 선택: 페이지 본문보다 목적지와 리디렉션 체인이 중요할 때 선택하세요.
- 입력
- URL, 도메인
- 결과
- 수집, 평가
- 크레딧
- 2
동기식RESTMCPSDK인터랙티브 도구
기술 스택 탐지
CMS, 프레임워크 및 서비스를 포함한 웹사이트에서 사용하는 기술 스택을 탐지합니다.
다음과 같은 경우 선택: 노출된 프레임워크, 플랫폼, 분석 도구 또는 인프라 기술의 증거가 필요할 때 선택하세요.
- 입력
- URL, 도메인
- 결과
- 발견, 보강, 평가
- 크레딧
- 0-9
동기식대량비동기식RESTMCPSDK인터랙티브 도구
웹사이트 분류
산업, 콘텐츠 유형 및 주제별 웹사이트를 분류합니다.
다음과 같은 경우 선택: 라우팅, 조사 또는 검토를 위해 넓은 콘텐츠 또는 비즈니스 카테고리가 필요할 때 선택하세요.
- 입력
- URL, 도메인
- 결과
- 보강, 평가
- 크레딧
- 0-3
동기식대량RESTMCPSDK인터랙티브 도구
통합 URL 인텔리전스
URL에서 정규화된 페이지 메타데이터, 미리보기 필드, 구조화된 데이터 및 공개 식별 신호를 추출합니다.
다음과 같은 경우 선택: 심층 수집 전에 정규화된 URL 구조와 위험 중심 URL 신호가 필요할 때 선택하세요.
- 입력
- URL
- 결과
- 수집, 보강
- 크레딧
- 2
동기식대량RESTMCPSDK
워크플로
URL을 검사하고 페이지를 Markdown으로 수집한 다음 에이전트 작업에 필요한 카테고리 또는 기술 증거를 추가하세요.
페이지에서 에이전트가 바로 사용할 컨텍스트로
URL을 검사하고 페이지를 Markdown으로 수집한 다음 에이전트 작업에 필요한 카테고리 또는 기술 증거를 추가하세요.
웹사이트 조사 스냅샷
대표 페이지를 수집하고 최종 목적지를 확인한 다음 콘텐츠를 웹사이트 카테고리 및 노출된 기술 신호와 결합하세요.
공개 페이지 하나를 Markdown으로 수집
Markdown 출력을 사용해 공개 URL을 POST /v1/scrape로 제출하세요. 먼저 standard 모드를 사용하고, 페이지에 JavaScript가 필요할 때만 렌더링을 선택하세요.
예제 요청
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'예제 응답
{
"data": {
"url": "https://example.com",
"outcome": "success",
"content": "# Example Domain",
"truncated": false
},
"billing": { "credits_charged": 1, "credits_refunded": 0 }
}먼저 동기 실행, 필요한 경우 작업 사용
페이지 하나를 동기적으로 수집하거나 1개에서 100개의 공개 URL을 유료 비동기 Scrape 작업에 제출하세요. Technology Detection도 제품별 대량 및 작업 경로를 지원합니다.
동기식대량비동기식RESTMCPSDK인터랙티브 도구
제한된 공개 페이지 수집
수집에는 리디렉션, 응답 크기, 동시성 및 처리 모드 제한이 적용됩니다. 모든 페이지에 대한 접근을 보장하지 않습니다.
페이지 하나로 시작한 다음 필요한 컨텍스트만 추가하세요
5개의 웹 데이터 제품을 검토하거나 문서에서 첫 Scrape 요청을 만들어 보세요.