Google Bot si ale nezaloží falešný účet a nebude vyzobávat informace dostupné jen po přihlášení.
A ten 27 953 bajtů velký robots.txt je co?
# Notice: If you would like to crawl LinkedIn,
# please email whitelistcrawl@linkedin.com to apply
# for white listing.
User-agent: Googlebot
Disallow: /addContacts*
Disallow: /addressBookExport*
Disallow: /analytics/
Disallow: /answers*
Disallow: /cap/
Disallow: /companyDir*
Disallow: /connections*
Disallow: /csp/
Disallow: /edurec*
Disallow: /endorsements
Disallow: /find/
Disallow: /groupAnswers*
Disallow: /groupSharingMsg*
Disallow: /inviteFromProfile*
Disallow: /inviteMany*
to je vlivem toho ze google bor ma specialni opravneni, nebo rovnou vytvorenej uvet...
vacsinou diskusne fora google bota pustia na zaklade user agenta. Ked potom na tu stranku ides ty, vyzaduju prihlasenie. Nic nove.
No jo, robots.txt maji. Takze beru zpet, ze je Google nevinen, resp. nevim co odpovida tem adresarum v robots.txt, takze ani netvrdim, ze je Google vinen, protoze mohl pouzit neco, co tu neni vyjmenovane.
Uživatel LinkedIn může svůj profil označit jako veřejný, aby jej vyhledávače viděly. V nastavení "Manage public profile settings" se dá určit, co má být veřejně vidět. Jde si zvolit i URL za lomítkem, aby se na profil dalo odkazovat smysluplným textem.
Pak asi má smysl, aby tam Google chodil...
Je to Google, ale nedělá nic nekalého, protože Linkedin roboty nezakazuje - nevidím meta tag ROBOT s hodnotou noindex ve zdrojovém html kódu stránky Linkedin.
Obdobně může jejich stránky scanovat kdokoliv jiný, ale určitě sem patří Google a ten si musí stránky nebo části stránek uložit, jinak by nezaindexoval.
Měl jsem dojem, že falešné účty Google běžně dělá, protože se mi stává, že mi najde něco na co když kliknu, tak se musím registrovat a přihlásit, abych si to přečetl. V náhledu u linku ten text již má.