Klausimas del Robots.txt

Sendien sugalvojau paziuret ar esu itrauktas i web.archive.org nueinu paziuret ir matau tai:

 

Robots.txt Query Exclusion.

 

We're sorry, access to http://www.n-series.us has been blocked by the site owner via robots.txt.

Read more about robots.txt

See the site's robots.txt file.

Try another request or click here to search for all pages on n-series.us/

 

Kazkas blogai su robots.txt o jis atrodo taip n-series.us robots.txt

Tai reikia kazka pakeisti? Gal ten uzdraudes turiu ar kaip? Nelabai gaudausi as su tuo robots.txt

Redagavo Rugpjūčio 17, 2007 Bosxs

Pas mane tas pats :-/

 

mano robots.txt failas Kas negerai?

Pas mane tas pats :-/

 

mano robots.txt failas Kas negerai?

Tas pats ir tau http://web.archive.org/web/*/http://www.dailyfacts.org/ irgi neskaito tavo puslapio :)

As ta koda kopinau nuo INferno http://www.uzdarbis.lt/index.php?showtopic...obots\.txt , gal ten kas negerai buvo, nu ziuresim gal rasim zmogu kas pades :)

Redagavo Rugpjūčio 17, 2007 Bosxs

Tas pats ir tau http://web.archive.org/web/*/http://www.dailyfacts.org/ irgi neskaito tavo puslapio :)

As ta koda kopinau nuo INferno blog, gal ten kas negerai buvo, nu ziuresim gal rasim zmogu kas pades :)

Tai jo, jo, aš irgi kažkur iš šio forumo kopinau, dar akim permečiau, kad nebūtų nesąmonių, bet lig ir viskas gerai buvo, o dabar va... :-/ Tikėkimės atsiras išmanančių.

Tiesiog uždrausta archyvuoti:

User-agent: ia_archiver
Disallow: /

Jei norit, kad archyvuotų, ištrinkit šias dvi eilutes. :)

Tiesiog uždrausta archyvuoti:

User-agent: ia_archiver
Disallow: /

Jei norit, kad archyvuotų, ištrinkit šias dvi eilutes. :)

As kaip tik ir ziurejau i tas eilutes :) dekui tau T-Mix

 

O toks klausimas iskilo, kodel kiti blokuoja? Tai kai suprantu INrefno blokuoja archive.org

Tiesiog uždrausta archyvuoti:

User-agent: ia_archiver
Disallow: /

Jei norit, kad archyvuotų, ištrinkit šias dvi eilutes. :)

Dėkui.

As kaip tik ir ziurejau i tas eilutes :) dekui tau T-Mix

 

O toks klausimas iskilo, kodel kiti blokuoja? Tai kai suprantu INrefno blokuoja archive.org

Nežinau, gal turi savų priežasčių.

Gal nenori, kad Google suindeksuotų jau suarchyvuotus puslapius iš to archive.org ir užskaitytų kaip Double Content? Nors abejoju, kad taip galėtų atsitikti, kadangi pats Archive.org Google's bot'ui per robots.txt neleidžia indeksuoti tų tinklapių kopijų.

Bet gal jis turi kokią priežastį...

Jis kopijavo man rodos iš čia ir tiek -> http://www.askapache.com/seo/wordpress-robotstxt-seo.html

Jis kopijavo man rodos iš čia ir tiek -> http://www.askapache.com/seo/wordpress-robotstxt-seo.html

Vat taip ir būna, kad kai aklai iš kur nors kopijuoja, tai š#das ir gaunasi. :)

Reikia visada pasikliauti savo galva arba bent jau įsigilinti į pateiktą tekstą ir jį koreguoti savo galva pagal savo poreikius. :)

Nežinau, gal turi savų priežasčių.

Gal nenori, kad Google suindeksuotų jau suarchyvuotus puslapius iš to archive.org ir užskaitytų kaip Double Content? Nors abejoju, kad taip galėtų atsitikti, kadangi pats Archive.org Google's bot'ui per robots.txt neleidžia indeksuoti tų tinklapių kopijų.

Bet gal jis turi kokią priežastį...

 

 

butent... dublicated contento bijau kaip velnio... o archive.org robots.txt neziurejau...

pripazystu - mano klaida.

Jūs su tuo dublicated perdedat gerokai, niekas ten super rimtai į tai nežiūri, pas mane jo pilna bet google indexuoja kuo puikiausiai ir normaliose vietose, aišku dar naujas blogas, bet va po 3 savaičių jau 15-20 lankytojų per dieną gaunu vien iš google.

as tai irgi nesuprantu ko jus to dublicated content bijot? :)