Existuje nejaky dokument (RFC?, ktery by rikal, jake hlavicky maji webboti posilat?
Jyxobot/Goglebot/msnbot/Openbot ... Je jich spousta, a tak se chci zeptat, jestli staci testovat zda prvni slovo indentifikatoru konci na "bot". Dekuji
Upozorníme vás na články, které by vám neměly uniknout (maximálně 2x týdně).