Přesně tak, vyhledávač se snaží zátěž rozdělovat rovnoměrně, aby nevznikaly zátěžové špičky. Mimo to ještě ví, že s výjimkou serverů, u kterých mu to někdo ze správců explicitně povolil, nesmí přistupovat na jeden server častěji než jednou za pár sekund.
Cetnost lze jednoduse sledovat, kdyz si nechate napr. pristupy a HOST adresu zdroje ukladat treba do mysql/txt a hned je videt, jak casto vyhledavace cmuchaji.
Podle mě to znamená to, že si nevyžádá 100 stránek během desetiny sekundy, ale rozloží požadavky do delšího časového úseku. Navíc pokud si stáhne 50 nebo 500 stránek je mě víceméně jedno. Pokud by se snažil stahovat i multimediální obsah už by to bylo trochu jiné, ale...
Pravdepodobne to znamena, ze se cetnost dotazu ani radove nepriblizi k urovni, ktera by nejak vyrazne omezovala procesorovy cas venovany skutecnym uzivatelum (resp. uzivatelum ruznym od holmes bota). Tzn. se vas nezepta vickrat nez rekneme parkrat do sekundy.
Vliv na bandwidth tam ale pochopitelne bude, nevidim duvod, proc by to nekoho melo trapit (jestli mi robot stahne 500 HTML zdrojaku za den nebo 1000 je mne jedno, jestli vam ne, zakazte indexovani). Tak jako tak, to bude urcite udelane nejak inteligentne, takze se budou stahovat jen casto menene soubory...
