Kaip sulaikyti Google? :)

Sveiki,

Yra svetainė, kurioje reikia prisijungti su vartotojo vardu ir slaptažodžiu.

Prisijungus matoma, tik tam vartotojui skirta informacija kaip pavyzdžiui: "Sveiki prisijungę: Andrius Mamontovas".

Atrodo viskas gerai, bet ...

Nusprendžiau pagooglinti to žmogaus pavardę ir vardą "Andrius Mamontovas" ir kas įdomiausia rezultatuose radau suindeksuotą svetainę su anksčiau minėtu sakiniu "Sveiki prisijungę: Andrius Mamontovas". O tai reiškia, kad googlo robotas kažkokiais būdais indeksavo svetainę to žmogaus aplinkoje.

Klausimai:

Kaip googlas sugebėjo suindeksuoti svetainės turinį prisijungusio žmogaus (kaip galėjo gauti jo sesiją)?

Ir kaip butų galima nuo to apsisaugoti, nes dabar klientai kurie dažnai prisijunginėja jau yra suindeksuoti?

Tam reikalui naudojamas robots.txt, dedamas į pradinę tinklapio direktoriją, jame rašom kažką panašaus:

User-agent: *
Disallow: /user/
Disallow: /cache/
Disallow: /tmp/

Žodžiu sritys, kurių nenorim kad indeksuotų ;)

Naudok Google Webmaster tools, galėsi daugiau dalykų valdyt.

Teisingai. Pražiopsojau smarty cache.