Per sviluppatori, ricercatori e costruttori di agenti
Usa API focalizzate quando un prodotto o un flusso richiede prove aggiornate da pagine pubbliche in una risposta strutturata.
Passa da un URL a contenuti leggibili, alla destinazione finale, alle tecnologie visibili, alla categoria e ai segnali a livello di URL.
Usa API focalizzate quando un prodotto o un flusso richiede prove aggiornate da pagine pubbliche in una risposta strutturata.
Raccogli contenuti per l’analisi, traccia una destinazione prima di seguirla oppure arricchisci una pagina nota con contesto tecnologico e di categoria.
Usa Scrape per il contenuto della pagina. Aggiungi Redirects, Technology Detection, Website Categorization o URL Intelligence solo quando quel contesto cambia la decisione.
Recupera pagine web pubbliche in HTML, Markdown o testo con opzioni sincrone e asincrone.
Sceglilo quando: Sceglilo quando ti servono HTML, testo o markdown da una pagina pubblica, con rendering o raccolta asincrona solo quando supportati e necessari.
Traccia la catena di reindirizzamento completa per un URL.
Sceglilo quando: Sceglilo quando contano più la destinazione e la catena di redirect che il corpo della pagina.
Rileva lo stack tecnologico utilizzato da un sito web inclusi CMS, framework e servizi.
Sceglilo quando: Sceglilo quando ti servono prove di framework, piattaforme, strumenti di analisi o tecnologie infrastrutturali esposti.
Categorizza un sito web per settore, tipo di contenuto e argomenti.
Sceglilo quando: Sceglilo quando ti serve un’ampia categoria di contenuto o attività per routing, ricerca o revisione.
Estrai da un URL metadati normalizzati della pagina, campi di anteprima, dati strutturati e segnali di identità pubblici.
Sceglilo quando: Sceglilo quando ti servono struttura normalizzata dell’URL e segnali orientati al rischio prima di una raccolta più approfondita.
Ispeziona l’URL, raccogli la pagina in markdown, poi aggiungi le prove di categoria o tecnologia richieste dall’attività dell’agente.
Ispeziona l’URL, raccogli la pagina in markdown, poi aggiungi le prove di categoria o tecnologia richieste dall’attività dell’agente.
Raccogli una pagina rappresentativa, risolvi la destinazione finale e combina contenuti con segnali di categoria del sito e tecnologie esposte.
Invia un URL pubblico a POST /v1/scrape con output markdown. Usa prima la modalità standard, poi seleziona il rendering solo quando la pagina richiede JavaScript.
curl -X POST "https://domscan.net/v1/scrape" -H "X-API-Key: $DOMSCAN_API_KEY" -H "Content-Type: application/json" -d '{"url":"https://example.com","output":"markdown"}'
{
"data": {
"url": "https://example.com",
"outcome": "success",
"content": "# Example Domain",
"truncated": false
},
"billing": { "credits_charged": 1, "credits_refunded": 0 }
}
Esegui Scrape sincronicamente su una pagina oppure invia da 1 a 100 URL pubblici a un job Scrape asincrono a pagamento. Technology Detection supporta anche percorsi bulk e job specifici del prodotto.
La raccolta usa limiti definiti per redirect, dimensioni delle risposte, concorrenza e modalità di elaborazione. Non promette l’accesso a ogni pagina.
Scegli la modalità di raccolta sufficiente più economica, conserva le prove della destinazione e arricchisci il risultato solo quando il flusso lo richiede.
Permetti a un agente di raccogliere una pagina, comprendere il dominio che la ospita e richiedere prove più approfondite solo quando l’attività lo richiede.
Raccogli pagine pubbliche e collegale al contesto di dominio, azienda, tecnologia, DNS e infrastruttura.
Esamina i cinque prodotti Dati web oppure effettua una prima richiesta Scrape dalla documentazione.