KorzaroBot – robot Korzara
Našli jste v logu serveru KorzaroBot/1.0? Váš web prochází Korzaro, aplikace, která majitelům e-shopů hlídá jejich web a přímou konkurenci.
Co robot dělá
Čte veřejné stránky stejně jako návštěvník: nadpisy, popisy, odkazy a dostupnost stránek. Nepřihlašuje se, neodesílá formuláře a nic nenakupuje.
Web e-shopu, který Korzaro používá, prochází zpravidla jednou za noc. Weby přímých konkurentů prochází jen tehdy, když je zákazník potvrdí, a mezi požadavky na ně čeká nejméně 2 sekundy.
Jak robota omezit
Robot dodržuje pravidla v souboru robots.txt pro všechny roboty (User-agent: *) i pro sebe (User-agent: KorzaroBot). Na webech konkurentů respektuje i Crawl-delay.
Celý web před ním uzavřete dvěma řádky: User-agent: KorzaroBot a pod ním Disallow: /.
Kontakt
Máte dotaz k robotovi? Napište na [email protected].