Poškozuje vyhledávač Cuil dostupnost webových stránek?

Kontroverzní vyhledávač Cuil, který se proslavil zejména svojí ambicí vyrovnat se Googlu, vyslal do světa robota jménem Twiceler, ten údajně poškozuje webové stránky. Cuil při indexování stránek používá příliš agresivní metody. Robot Twiceler je schopen navštívit jedinou stránku třeba i 70000 krát v průběhu pár dní, a tak ji zcela zahltit. James Akers z Cuilu reagoval na stížnosti vlastníků stránek vysvětlením, že v případě Twicelera se jedná o experimentální crawler. Pokud majitelé stránek nechtějí, aby měl tento crawler k jejich stránkám přístup, mohou požádat o zařazení své stránky do seznamu zakázaných. Také však prý existuje mnoho crawlerů, které se za Twicelera pouze vydávají, a poškození majitelé stránek by proto měli nejprve nahlédnout do seznamu IP adres, aby zjistili, jestli je domnělým škůdcem skutečně Cuil. (Techcrunch)