Ověřte, zda IP adresa a User-Agent skutečně patří Googlebotu, Bingbotu, OpenAI SearchBotu, Yahoo, Seznamu, Meta (Facebook), Qwantu, DuckDuckGo a dalším hlavním crawlerům.
Automatické blokování podvržených botů v Nginx/WAF.
Vyloučení návštěv crawlerů z provozu.
Ověření procházení vyhledávačů.
Detekce scraperů vydávajících se za boty.
Lookup Result
Raw JSON
Často kladené otázky
JSON feedy poskytovatelů jsou uloženy v mezipaměti 12 h; Yandex a Seznam používají statické oficiální CIDR.
Skutečným důkazem je IP adresa: crawler je považován za důvěryhodný pouze tehdy, když jeho IP spadá do oficiálních CIDR rozsahů publikovaných poskytovatelem. User-Agent může pomoci, ale lze jej snadno podvrhnout; scrapeři často kopírují UA řetězce a přicházejí z náhodných sítí. Pokud IP není v rozsahu poskytovatele, označíme požadavek bez ohledu na to, co UA říká.
Ano, sítě IPv4 i IPv6 jsou plně podporovány.
Každý požadavek z rozhraní živé ukázky spotřebuje stejný počet kreditů jako přímé volání API.