Dane internetowe

API sprawdzania duplikatów treści

Porównaj od 2 do 10 stron w jednym żądaniu. Otrzymaj wynik podobieństwa dla każdej pary stron na podstawie ich treści głównej, grupy niemal duplikatów oraz powtarzające się tytuły, opisy meta i nagłówki H1.

Kategoria Dane internetowe
Punkty końcowe 1
Kluczowe funkcje 4
Często zadawane pytania 4

Używany przez ludzi w tych firmach

InstantOutseerMongoDBRespondentSage Expense ManagementInstantlyD.R. HortonWhatConvertsAdobeLLM Pulse

Sygnały zaufania przed integracją

Przejrzysta dokumentacja, uwierzytelnione żądania i widoczne informacje o niezawodności ułatwiają ocenę DomScan przed wdrożeniem.

Aktywna Status usługi

Przed integracją sprawdź bieżący stan usługi i udokumentowane odpowiedzi na błędy.

OpenAPI Materiały API

Linki OpenAPI, Swagger, Postman, CLI, SDK i MCP są dostępne jednym kliknięciem.

Klucze API Chroniony dostęp

Uwierzytelnione endpointy używają kluczy API z jasnymi kosztami kredytów przed wywołaniem.

10,000 Darmowy limit

Zacznij od 10 000 kredytów miesięcznie i przejdź wyżej dopiero, gdy użycie wzrośnie.

Co ta API pomaga wdrożyć

Użyj tej strony jako briefu produkcyjnego: endpointy, przykłady, kształt odpowiedzi i elementy workflow potrzebne do podłączenia DomScan do produktu.

Workflow produktu

Osadzaj sprawdzanie domen, DNS intelligence, sygnały ryzyka lub enrichment w onboardingu, wyszukiwarce i narzędziach wewnętrznych.

Automatyzacja analityków

Zastąp powtarzalne ręczne lookupy zadaniami cyklicznymi, alertami i odtwarzalnymi krokami dochodzenia.

Czyste dane JSON

Używaj przewidywalnych pól, udokumentowanych kodów statusu i kosztów kredytów zamiast scrapować strony dostawców.

AI i narzędzia ops

Zasilaj agentów, dashboardy, playbooki SOAR i CRMy przez OpenAPI, SDK, Postman lub MCP.

Workflow integracji

Prosta ścieżka od pierwszego requestu do powtarzalnego użycia produkcyjnego.

1
Uwierzytelnij raz

Wyślij klucz API w udokumentowanym nagłówku i utrzymuj spójne requesty między usługami.

2
Odpytuj z przykładami

Zacznij od przykładów curl i HTTP, potem zmapuj parametry w kodzie aplikacji.

3
Operuj i monitoruj

Używaj kodów statusu, kosztów kredytów i pól odpowiedzi do retries, logów i alertów.

Zestaw developerski

Przejdź z tej strony do dokumentacji machine-readable, kolekcji requestów, SDK lub narzędzi agentowych.

Mapa parametrów i odpowiedzi

Przejrzyj inputy, pola outputu i kody statusu przed podłączeniem endpointu do klienta.

Parametry requestu

Parametr

urls
Pola odpowiedzi

Przykładowa odpowiedź

statuspairsclustersduplicatesduplicates.titlesduplicates.meta_descriptionsduplicates.h1
Zakres statusów

Kody statusu HTTP

200400401402429

Punkty końcowe

GET /v1/duplicate-content
Kredyty: 5Uwierzytelnianie: Uwierzytelnienie required

Sygnały zaufania przed integracją

Przejrzysta dokumentacja, uwierzytelnione żądania i widoczne informacje o niezawodności ułatwiają ocenę DomScan przed wdrożeniem.

Status usługi Materiały API

Linki OpenAPI, Swagger, Postman, CLI, SDK i MCP są dostępne jednym kliknięciem.

Klucze API Chroniony dostęp

Uwierzytelnione endpointy używają kluczy API z jasnymi kosztami kredytów przed wywołaniem.

Darmowy limit Zarejestruj się bezpłatnie

Zacznij od 10 000 kredytów miesięcznie i przejdź wyżej dopiero, gdy użycie wzrośnie.

Aktywny Przykładowe żądanie

Zacznij od przykładów curl i HTTP, potem zmapuj parametry w kodzie aplikacji.

Kluczowe funkcje

Tylko treść główna

Nagłówki, nawigacja, stopki, paski boczne i formularze są usuwane przed porównaniem, więc wspólne szablony nie zawyżają wyniku.

Podobieństwo i zawieranie

Podobieństwo mierzy zakres wspólnej treści dwóch stron; zawieranie pokazuje, jaka część krótszej strony występuje w dłuższej.

Uwzględnia canonical

Pary, w których jedna strona już deklaruje drugą jako canonical, są oznaczane, więc możesz skupić się na nierozwiązanych duplikatach.

Duplikaty metadanych

Powtarzające się tytuły, opisy meta i nagłówki H1 są grupowane wraz z adresami URL, które je współdzielą.

Przykładowe żądanie

GET /v1/duplicate-content?urls=example.com/a,example.com/b,example.com/c bash
curl -H "X-API-Key: $DOMSCAN_API_KEY" "https://domscan.net/v1/duplicate-content?urls=example.com/a,example.com/b,example.com/c"

Przykładowa odpowiedź

200 OK json
{
  "status": "ok",
  "pairs": [
    { "a": "https://example.com/a", "b": "https://example.com/b", "similarity": 0.91, "containment": 0.96, "near_duplicate": true, "canonicalized": false }
  ],
  "clusters": [["https://example.com/a", "https://example.com/b"]],
  "duplicates": {
    "titles": [{ "value": "trail running shoes", "urls": ["https://example.com/a", "https://example.com/b"] }],
    "meta_descriptions": [],
    "h1": []
  }
}

Często zadawane pytania

Kiedy dwie strony są niemal duplikatami?

Gdy ich podobieństwo wynosi 0,8 lub więcej. Strony powyżej tego poziomu zwykle konkurują ze sobą w wyszukiwarce.

Jak obliczane jest podobieństwo?

Główny tekst każdej strony jest dzielony na nakładające się pięciowyrazowe sekwencje, a wynik to odsetek sekwencji wspólnych dla obu stron.

Co jeśli nie można odczytać strony?

Jest wymieniana wraz z przyczyną i pomijana we wszystkich porównaniach. Jeśli można odczytać mniej niż dwie strony, wynik jest nieznany, a kredyty są zwracane.

Ile kredytów kosztuje?

Pięć kredytów za żądanie dla maksymalnie 10 adresów URL.

Narzędzia pokrewne i zasoby

Kody statusu HTTP

Oto kody statusu HTTP, które należy obsługiwać, aby odróżnić udane odpowiedzi, problemy z uwierzytelnianiem, kredyty, limity żądań, brakujące dane i błędy usług nadrzędnych.

OK 200

Żądanie zakończone pomyślnie

Nieprawidłowe żądanie 400

Nieprawidłowe parametry

Nieautoryzowany 401

Brakuje klucza API lub sesji albo są one nieprawidłowe.

Wymagana płatność 402

Za mało kredytów, aby wykonać to żądanie.

Zbyt wiele żądań 429

Przekroczono limit żądań