Vlákno názorů k článku Je Google demokratický? od hm - Me by zajimalo, kdy jyxo bot bude indexovat...

Me by zajimalo, kdy jyxo bot bude indexovat halonoviny.cz? Uz tp bude par mesicu co jsem mu poseptal pres formular pridat stranku a stale nic.

He, i když s Jyxem nemám nic společného, troufám si tvrdit že neindexování toho webu bude souviset s obsahem souboru robots.txt:

User-agent: *
Disallow: /

a takhle vznikají fámy o tom, že někdo něco úmyslně ignoruje :)

myslel jsem, ze se na to jiz dnes nehraje, ale mate pravdu a mel jsem se podivat do info, kde jyxo pise, ze robots.txt respekuje

Na to hraje snad každý prohlížeč a drtivá většina jiných robotů...

Ja bejt jyxem, tak je ignoruju a jsem na to hrdy :-)

ano, i Microsoft je hrdy na to, ze ignoruje standardy a doporuceni. on to tak sice neformuluje, on rika, ze je 'vylepsuje' ;-)

Povazuje-li nekdo halonoviny za standard, mel by mu nekdo pomoct. Alespon jeho nejblizsi okoli, pac je to nebezpecny stav :-)

Presne takove reakce jsem cekal, jen ne zrovna od Vas, ale co uz. Mimochodem v te dobe jsem pracoval take s ostatnimi servery, ktere se mohly tykat hledaneho tematu jako je napr. ods.cz ale i mnohe dalsi..

No jo, jde o totalitni noviny, ktere nechteji, aby nahodou nekdo vedel, jak se jejich web vyviji. A google a jyxo ma cache stranek z doby indexace. Tyto noviny ovsem nestoji o to, aby nekdo porovnaval veci, ktere jsou na siti nyni, a ktere tam byly pred casem. Zabranit tomu nemuzou, ale kazde omezeni je pro ne dobre.

Pro ty, co se divi, ze nekdo robots.txt dodrzuje - zkuste si zalozit libovolny site, dat na nej par linku, a budete koukat, kolik hitu budete mit na robots.txt.

o duvodech proc tam roboty maji nezadouci nic nevim, ale k informacim z nich se dokazu dostat i jinak vct. elektronickych placenych archivu, takze tento duvod mi pripada nepravdepodobny

Pravdepodobne slovem "informace" chapeme kazdy neco zcela jineho.
Ja neco, co se da zmerit na bity, obvykle hodnotou nenulovou :-)

Ve fulltextovych vyhledavacich jsou cca. 2 moznosti
a) vyradit v indexaci (proste to robot preskoci)
b) upravit rank stranky (page rank pouzivaji stejne
vsechny vyhledavace) a to nahoru nebo dolu.

Pokud na stranku odkazuje male mnozstvi jinych stranek tak
je v podstate neviditelna (ma velmi nizkou prioritu)