Para desenvolvedores, pesquisadores e construtores de agentes
Use APIs focadas quando um produto ou fluxo precisar de evidências atuais de uma página pública em uma resposta estruturada.
Tente um produto, objetivo, caminho de endpoint ou tópico de API.
Dados Web
Passe de uma URL para conteúdo legível, seu destino final, tecnologias visíveis, categoria e sinais no nível da URL.
Use APIs focadas quando um produto ou fluxo precisar de evidências atuais de uma página pública em uma resposta estruturada.
Colete conteúdo para análise, rastreie um destino antes de segui-lo ou enriqueça uma página conhecida com contexto de tecnologia e categoria.
Use Scrape para conteúdo de página. Adicione Redirects, Technology Detection, Website Categorization ou URL Intelligence somente quando esse contexto mudar a decisão.
Busque páginas públicas da web e documentos como HTML, Markdown, texto pronto para LLM ou texto simples, uma página por vez, em lotes ou rastreando um site inteiro.
Escolha quando: Escolha quando precisar de HTML, texto ou Markdown limpos de páginas públicas, PDFs ou planilhas, de uma única página até um site inteiro, usando renderização ou coleta assíncrona somente quando houver suporte e necessidade.
Rastreie a cadeia de redirecionamento completa para um URL.
Escolha quando: Escolha quando o destino e a cadeia de redirecionamentos forem mais importantes que o corpo da página.
Detecte a pilha tecnológica utilizada por um website incluindo CMS, frameworks e serviços.
Escolha quando: Escolha quando precisar de evidências de frameworks, plataformas, análises ou tecnologias de infraestrutura expostas.
Analise o robots.txt, teste qualquer crawler e caminho e veja que crawlers de IA estão bloqueados.
Escolha quando: Escolha para ler o robots.txt de um site, testar se um rastreador pode acessar um caminho e ver quais rastreadores de IA estão permitidos ou bloqueados.
Encontre e audite sitemaps XML com número de URL, atualização do lastmod e problemas de protocolo.
Escolha quando: Escolha para encontrar os sitemaps XML de um site e verificar a contagem de URLs, a atualidade do lastmod e problemas de protocolo dentro de um orçamento fixo de arquivos.
Audite títulos, meta tags, cabeçalhos, links, imagens e dados estruturados com uma pontuação de SEO.
Escolha quando: Escolha esta opção para auditar uma página quanto a SEO on-page, desde meta tags e cabeçalhos até links, imagens e dados estruturados, com ou sem renderização de JavaScript.
Compare o HTML original e o renderizado para ver que sinais de SEO dependem de JavaScript.
Escolha quando: Escolha esta opção para ver que sinais de SEO de uma página só existem depois de o JavaScript ser executado, comparando o HTML original e o renderizado.
Extraia e valide a marcação schema.org em JSON-LD, Microdata e RDFa.
Escolha quando: Escolha esta opção para extrair JSON-LD, Microdata e RDFa de uma página e verificá-los com as regras do schema.org para os tipos de resultados enriquecidos mais comuns.
Encontre as palavras-chave e expressões mais frequentes de uma página com percentagens de densidade.
Escolha quando: Escolha esta opção para medir a frequência de palavras e expressões numa página e verificar onde aparecem as palavras-chave alvo.
Liste os links de uma página e encontre os quebrados com verificações de estado limitadas.
Escolha quando: Escolha esta opção para listar os links de uma página e encontrar os quebrados, mantendo as verificações bloqueadas como desconhecidas.
Valide códigos hreflang, x-default, autorreferências e links de retorno.
Escolha quando: Escolha esta opção para validar as tags hreflang de uma página e confirmar que as páginas de idiomas alternativos ligam de volta.
Teste muitos URLs e rastreadores contra um robots.txt colado ou em direto.
Escolha quando: Escolha esta opção para testar muitos URLs e rastreadores em simultâneo contra um robots.txt colado ou em direto.
Valide registos de ads.txt e app-ads.txt e confirme os vendedores com o sellers.json.
Escolha quando: Escolha esta opção para validar o ads.txt ou o app-ads.txt de um site e confirmar os vendedores autorizados com o sellers.json.
Compare páginas à procura de conteúdo, títulos e meta descrições duplicados.
Escolha quando: Escolha esta opção para comparar até 10 páginas à procura de conteúdo duplicado e de títulos, meta descrições e H1 repetidos.
Rastreie até 50 páginas e encontre links quebrados, duplicados e problemas on-page.
Escolha quando: Escolha esta opção para rastrear até 50 páginas de um site e encontrar links quebrados, duplicados e problemas de SEO on-page num único relatório.
Capture qualquer página como imagem ou PDF em computador ou telemóvel.
Escolha quando: Escolha esta opção para capturar uma página como PNG, JPEG, WebP ou PDF em computador ou telemóvel.
Execute uma auditoria WCAG automatizada com violações, elementos afetados e uma pontuação.
Escolha quando: Escolha esta opção para executar uma auditoria WCAG automatizada de uma página com violações por impacto e elementos afetados.
Liste os cookies, os rastreadores e o gestor de consentimento detetados antes do consentimento.
Escolha quando: Escolha esta opção para ver os cookies, os rastreadores e o gestor de consentimento que uma página carrega antes de qualquer consentimento.
Meça os bytes, os pedidos, os terceiros e os tempos de carregamento de uma página.
Escolha quando: Escolha esta opção para medir os bytes, os pedidos, os terceiros, os recursos que bloqueiam a renderização e os tempos de uma página.
Categorize um website por indústria, tipo de conteúdo e tópicos.
Escolha quando: Escolha quando precisar de uma categoria ampla de conteúdo ou negócio para roteamento, pesquisa ou análise.
Extraia de uma URL metadados normalizados da página, campos de pré-visualização, dados estruturados e sinais públicos de identidade.
Escolha quando: Escolha quando precisar de estrutura de URL normalizada e sinais de risco da URL antes de uma coleta mais profunda.
Inspecione a URL, colete a página em Markdown e adicione as evidências de categoria ou tecnologia exigidas pela tarefa do agente.
Inspecione a URL, colete a página em Markdown e adicione as evidências de categoria ou tecnologia exigidas pela tarefa do agente.
Colete uma página representativa, resolva seu destino final e combine conteúdo com sinais de categoria e tecnologia exposta.
Envie uma URL pública a POST /v1/scrape com saída em Markdown. Use primeiro o modo padrão e selecione renderização apenas quando a página exigir JavaScript.
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'
{
"data": {
"url": "https://example.com",
"outcome": "success",
"content": "# Example Domain",
"truncated": false
},
"billing": { "credits_charged": 1, "credits_refunded": 0 }
}
Faça Scrape de uma página de forma síncrona ou envie de 1 a 100 URLs públicas a uma tarefa assíncrona paga. A detecção de tecnologia também oferece caminhos de lote e tarefas específicos do produto.
A coleta usa limites de redirecionamentos, tamanho de resposta, concorrência e modos de processamento. Ela não promete acesso a todas as páginas.
Escolha o modo de coleta suficiente mais simples, preserve evidências do destino e enriqueça o resultado somente quando o fluxo precisar.
Saiba MaisPermita que um agente colete uma página, entenda o domínio por trás dela e solicite evidências mais profundas somente quando a tarefa exigir.
Saiba MaisColete páginas públicas e conecte-as ao contexto de domínio, empresa, tecnologia, DNS e infraestrutura.
Saiba MaisRevise os cinco produtos de dados Web ou faça sua primeira solicitação Scrape pela documentação.