google webmasters robots.txt

tai va man iskilo tokia problema kai ikeliau svetaine i google webmasters pamaciau kad "Analyze robots.txt" puslapyje rodomos blogas robots.txt failas

User-agent: *

Disallow: /

nors robots.txt net neegzistavo. pamates tai saite sukuriau robots.txt su turiniu

User-agent: *

Allow: /

bet siandien pamaciau kad googlej atsiet atnaujinus robots.txt (Last downloaded 3 hours ago) jo turinys nepasikeite. Tai gal zinot kas cia per velnias google webmasters klaida, o gal google banas ?

Nežinau, kas čia tavo atveju, bet šiaip tas Google Webmasters yra vienas iš pačių nereikalingiausių Google įrankių - neradau jokios naudos, kai kokį pusmetį mėginau juo naudotis. Nei Google greičiau ar daugiau ar geriau indeksuoja, nei į kažką ten atsižvelgia. Gali ten rašyt visas savo nuorodas ar kokius tik nori nustatymus - jei Googlei tavo svetainė nepatiks, niekuo geriau nebus. O jei tiks, sėkmingai indeksuos ir be jokių Webmaster Tools.

O šiaip robots failas išvis nereikalingas, jei nenori kažko drausti.

Nežinau, kas čia tavo atveju, bet šiaip tas Google Webmasters yra vienas iš pačių nereikalingiausių Google įrankių - neradau jokios naudos, kai kokį pusmetį mėginau juo naudotis. Nei Google greičiau ar daugiau ar geriau indeksuoja, nei į kažką ten atsižvelgia. Gali ten rašyt visas savo nuorodas ar kokius tik nori nustatymus - jei Googlei tavo svetainė nepatiks, niekuo geriau nebus. O jei tiks, sėkmingai indeksuos ir be jokių Webmaster Tools.

O šiaip robots failas išvis nereikalingas, jei nenori kažko drausti.

:) Webmasters center tavo tinklapio i pirma vieta nepastatys, o zmogui ismananciam kam kiekvienas irankis skirtas tikrai pades pajudeti savo darba is vietos ir pasiekti tikslesnia auditorija.

terabite, paziurek savo tvs'a gal jis automatiskai sukuria robots.txt , o siap tai rasyk

User-agent: *

Disallow: /folderis kur list nereikia

Geras pavyzdys cia.

nes zinau kad ten buvo bet dabar viskas gerai robots.txt rodo toki koks jis yra :)