Pereiti prie turinio

Ar blokuojat Bad-bots su robots.txt?


Rekomenduojami pranešimai

Radau kelis tokius įrašus, kad yra tokių botų kuriuos galima tiesiog užblokuot https://github.com/mitchellkrogza/apache-ultimate-bad-bot-blocker/blob/master/robots.txt/robots.txt

http://tab-studio.com/en/blocking-robots-on-your-page/

Ar Jūs blokuojat? Nes paskutiniu serverį apkrauna neaiškūs IP visokie ir galvoju ar čia negali būti tai? :) Kas esat susidūrę?

 

Nuoroda į pranešimą
Dalintis kituose puslapiuose

O ką tie bad bots tau padarys?

 

Kitas dalykas: robots.txt tik informuoja botus kaip jie turėtų elgtis. Jei robotas tikrai blogas - jis paprasčiausiai ignoruos tavo robots.txt. Taip, kad mano nuomone nevarta žaisti. Geriau užsiimk rimtesniais dalykais.

 

Ar tu bijai kad jie tau visą traffic'ą išnaudos?

Nuoroda į pranešimą
Dalintis kituose puslapiuose

Du atsakymai, dvi skirtingos nuomonės :)

 

Aš ir link to, kad blokuot, nes srauto vistiek tie crawleriai neduoda ir neduos. Bet dar norėčiau kažkokių argumentų :)

Yandex nereikalingas taip pat, lankytojai iš RU nelabai perka (bent jau man)

 

Kažkada blokavau robotus bet...

Geriau blokuoti IP ir jei naudoji wordpress CMS yra toks pluginas

https://wordpress.org/plugins/iq-block-country/

 

Galima nustatymuose pasidaryti iš kokių šalių leisti patekti į backend ir frontend svetainę, galima redirectinti vartotojus kur tik nori.

Screenshot prie to pačio ;)

post-36730-0-06699100-1535308513_thumb.jpg

Redagavo mantas666
Nuoroda į pranešimą
Dalintis kituose puslapiuose

Yandex nereikalingas taip pat, lankytojai iš RU nelabai perka (bent jau man)

 

Kažkada blokavau robotus bet...

Geriau blokuoti IP ir jei naudoji wordpress CMS yra toks pluginas

https://wordpress.org/plugins/iq-block-country/

 

Galima nustatymuose pasidaryti iš kokių šalių leisti patekti į backend ir frontend svetainę, galima redirectinti vartotojus kur tik nori.

Screenshot prie to pačio ;)

 

NIEKADA neblokuok IP.

 

1. IP keičiasi pakankamai dažnai pas crawlerius ir gali būti, kad bus tiesiog klientų praradimas

2. IP crawlinimui yra šimtai tūkstančių, tu tiesiog prisidarysiu daug daugiau problemų su serverio FW nei naudos iš to gausi.

Nuoroda į pranešimą
Dalintis kituose puslapiuose

NIEKADA neblokuok IP.

 

1. IP keičiasi pakankamai dažnai pas crawlerius ir gali būti, kad bus tiesiog klientų praradimas

2. IP crawlinimui yra šimtai tūkstančių, tu tiesiog prisidarysiu daug daugiau problemų su serverio FW nei naudos iš to gausi.

pasižiūrėjus į log'us atrodo kitaip, kai kažkas bando jungtis prie admin dashboard iš Kinijos ar Nigerijos.

 

man tiesa sakant nesvarbu, kad google.pl *.de *.no ar dar kas nors mano svetainės neindeksuos. Man svarbu, kad indeksuotų .com *.ca ir tik tie kas man reikalingi.

 

man nereikalingas lankytojų srautas iš Indijos, Pakistano, ir t.t. nes tie žmonės 99,999999% niekada nieko nenupirks, net jei užsiprenumeruos naujienlaiškį, tai būtų tik resursų švaistymas.

Nuoroda į pranešimą
Dalintis kituose puslapiuose

Prisijunkite prie diskusijos

Jūs galite rašyti dabar, o registruotis vėliau. Jeigu turite paskyrą, prisijunkite dabar, kad rašytumėte iš savo paskyros.

Svečias
Parašykite atsakymą...

×   Įdėta kaip raiškusis tekstas.   Atkurti formatavimą

  Only 75 emoji are allowed.

×   Nuorodos turinys įdėtas automatiškai.   Rodyti kaip įprastą nuorodą

×   Jūsų anksčiau įrašytas turinys buvo atkurtas.   Išvalyti redaktorių

×   You cannot paste images directly. Upload or insert images from URL.

Įkraunama...
  • Dabar naršo   0 narių

    Nei vienas registruotas narys šiuo metu nežiūri šio puslapio.

  • Prisijunk prie bendruomenės dabar!

    Uždarbis.lt nariai domisi verslo, IT ir asmeninio tobulėjimo temomis, kartu sprendžia problemas, dalinasi žiniomis ir idėjomis, sutinka būsimus verslo partnerius ir dalyvauja gyvuose susitikimuose.

    Užsiregistruok dabar ir galėsi:

    ✔️ Dalyvauti diskusijose;

    ✔️ Kurti naujas temas;

    ✔️ Rašyti atsakymus;

    ✔️ Vertinti kitų žmonių pranešimus;

    ✔️ Susisiekti su bet kuriuo nariu asmeniškai;

    ✔️ Naudotis tamsia dizaino versija;

    ir dar daugiau.

    Registracija trunka ~30 sek. ir yra visiškai nemokama.

  • Naujausios temos

  • Karštos temos

×
×
  • Pasirinkite naujai kuriamo turinio tipą...