Někdo - jako třeba já - naopak nechce, aby mu roboti (i přes zákazy) neustále celou sobotu a neděli zbytečně zatěžovali server.
Dá se říci, že občas dosahuji i částečného úspěchu. Prokazatelně ale se chování robotů řídí podstatným způsobem také obsahem http-hlaviček, o čemž jsem zde zmínku žádnou nenašel.
Proto se nemohu ubránit dojmu, že všechny uváděné poznatky jsou značně spekulativní a plynou jen z toho, co mohli autor i diskutující "vyzkoumat s pomocí MSIE".