skystis

yra kazkokia medziaga nez tirpaliukas lombarduose naudoja juos pawadinimo nepamenu

Henrikas Daktaras "Išlikti žmogumi".

Aš už žmogaus prigimtinę laisvę, įsitikinimus, bet tokio mėšlo internetui nereikia. Ir taip šiukšlių pilna...
Prisižiūrėję vaikai visokių youtube klipų, kur keikiasi visiški dalbajobai nebemoka kultūringai kalbėti neįterpdami į paprastą sakinį keiksmažodžių. Užaugsit ir suprasit ką aš turiu galvoje.

Aš už žmogaus prigimtinę laisvę, įsitikinimus, bet tokio mėšlo internetui nereikia. Ir taip šiukšlių pilna...
Prisižiūrėję vaikai visokių youtube klipų, kur keikiasi visiški dalbajobai nebemoka kultūringai kalbėti neįterpdami į paprastą sakinį keiksmažodžių. Užaugsit ir suprasit ką aš turiu galvoje.

Yra kažkur nesenai padarė tau reikia prisijungt kaip adminui ir tada rašant ten ieškok post as...

Nueini į savo kurtą puslapį, ir dešinėj pusėj spaudi "Prisijungti kaip puslapio pavadinimas"

Kad tu paprastų lygčių neišsprendi, ką jau kalbėt apie strategijas kažkokias. :) O šiaip, už šantažą/reketą gali sėst į belangę.

Gali bandyti su užslėptu divu

<div style="display:none"><a target="_blank" href="http://www.hey.lt/details.php?id=puslapis"><img width=88 height=31 border=0 src="//www.hey.lt/count.php?id=puslapis" alt="Hey.lt - Nemokamas lankytojų skaitliukas"></a></div>
arba tiesiog nustatyk, kad skaitliuko paveikslėlis būto 0x0 px dydžio ir be nuorodos

<img width=0 height=0 border=0 src="//www.hey.lt/count.php?id=puslapis" alt="Hey.lt - Nemokamas lankytojų skaitliukas">
 
Beje hey.lt taisyklės draudžia slėpti skaitliukus ar naikinti nuorodas į statistiką.

<a target="_blank" href="http://www.hey.lt/details.php?id=puslapis"><img width=1 height=1 border=0 src="//www.hey.lt/count.php?id=puslapis" alt="Hey.lt - Nemokamas lankytojų skaitliukas"></a>
skaitikliukas bux 1x1 pixelio(matisis tik jeigu zinosi kur jis yra, ir specialiai jieskosi).

Yra 2 budai: skaitliuką padaryti tos pačios spalvos kaip foną arba "visibility:hidden;" (css):
 

<div style="visibility:hidden;"><a target="_blank" href="http://www.hey.lt/details.php?id=puslapis"><img width=88 height=31 border=0 src="//www.hey.lt/count.php?id=puslapis" alt="Hey.lt - Nemokamas lankytojų skaitliukas"></a></div>

<img style="position: fixed; top: -100px; left: -100px" src="http://www.hey.lt/count.php?id=puslapis" />
 
 

yra pilna dalių, patys pasižiūrėkit.

Sveiki uždarbiečiai, jau vienur prisižadėjau, kad parašysiu šiek tiek apie web scrapping. Tai pirmas mano straipsnis šiame forume, todėl nemaišykit su žemėmis be pagrindo. Konstruktyvi kritika visada laukiama, o šiaip ir pasiginčyti galiu, jeigu atsiras žmonių, manančių, kad mano pateikti programinio kodo pavyzdžiai yra neteisingi ar, kad galima padaryti kažką geriau. Pats esu gana dar jaunas ir daug ko nemoku, tačiau trokštu išmokti. Iš savo, ir kitų mano artimųjų patirties galiu pasakyti, kad srities specialistu tampi mokydamas kitus.
 
Pradedant, norėčiau apžvelgti kam web scrapping gali būti panaudojamas. Šį metodą programuotojai naudoja tada, kuomet reikia gauti informacijos iš kitos svetainės ir nenorima dirbti "copy->paste" principu. Web scrapping tai padarys už jus. Kadangi daugiausia teko programuoti PHP programavimo kalba, tai tik ja galėsiu pateikti pavyzdžių.
 
Vogti/skolintis/pasiimti informaciją PHP pagalba iš kitų interneto svetainių galima keletu būdų. Tačiau aprašysiu tik du - vieną, kuris nepatogus ir jį naudojant gali prasidėti rimtas "galvos skausmas", ir antrą - kurį pats naudoju ir rekomenduoju naudoti kitiems.
 
Pirmasis būdas. Jame naudojama curl biblioteka, preg_match_all funkcija. Blogiausia šio metodo savybė - reikia rašyti regexp išraiškas. Man (spėju ir kitiems programuotojams) tai yra "pain in the ######". Šis metodas turi ir pliusų - juo parašyti script'ai veikia šiek tiek greičiau negu antruoju.
 
Daug netuščiažodžiaujant, štai kodo pavyzdys (ačiū Sauliui):
 

<?php function rasti_turini( $pradzia, $galas, $url ) { $pradzia = str_replace('/', '\/', $pradzia); $galas = str_replace('/', '\/', $galas); $regexp = '/' . $pradzia . '(.+?)' . $galas . '/'; preg_match_all($regexp, $url, $atitike); return $atitike[0]; } function curl( $url ) { $ch = curl_init(); curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); $result = curl_exec($ch); curl_close($ch); return $result; } //magic (: $url = curl( 'http://www.orai.lt/lt/prognozes/vilnius' ); $orai = rasti_turini( '<td class="oraiTableRow">', '</td>', $url ); //atvaizduojame antrąjį masyvo elementą echo $orai[1]; //jeigu norite pažiūrėti, kaip atrodo gautas masyvas, atkomentuokite sekančias 3 eilutes //echo '<pre>'; //print_r( $orai ); //echo '</pre>'; ?>
 
 
Antrasis būdas. Tai mano mėgstamiausias, ir mano nuomone geriausias būdas gauti informaciją iš kito tinklalapio. Kaip taip padaryti? Ogi pasitelkti simple html DOM biblioteką. :) Jos pagalba galima rašyti elementų select'orius jQuery stiliumi.
 
Pvz.:

$html->find('table.bioTableAlt tbody tr');
 
Argi gali būti patogiau ir greičiau? :rolleyes:
 
Tarkim turime užduotį, mums reikia gauti visą geriausių teniso žaidėjų sąrašą iš šitos svetainės. Taip, visą 1000 :) Atkreipkite dėmesį, kad lentelė atnaujinama kiekvieną pirmadienį. Kad šis kodas veiktų, jums prireiks parsisiųsti simple html dom klasę.
 
Kodas:

<?php //nuimame laiko limita set_time_limit(0); //simple html dom include('simple_html_dom.php'); //------------------------------------------------------------------------------ // Nuorodos //------------------------------------------------------------------------------ //paskutinio pirmadienio data $date = date('d.m.Y', strtotime('last monday')); //užkomentuokit dali nuorodu, jeigu norit greiciau pamatyti rezultata $urls = array(); $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=1'; $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=101'; $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=201'; $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=301'; $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=401'; $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=501'; $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=601'; $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=701'; $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=801'; $urls[] = 'http://www.atpworldtour.com/Rankings/Singles.aspx?d='.$date.'&c=&r=901'; //inicijuojam masyvą $zaidejai $zaidejai = array(); //praskanuojam visas nuorodas foreach($urls as $url) { //gauname duomenis iš svetainės $html = file_get_html($url); foreach( $html->find('table.bioTableAlt tbody tr') as $a ) { // Duomenys apie žaidėją: // pozicija --- vardas, šalis --- žaidėjo taškai --- pozicijos pokytis --- turnyrų skaičius $zaidejas['pozicija'] = $a->children(0)->plaintext; $zaidejas['vardas'] = $a->children(1)->plaintext; $zaidejas['taskai'] = $a->children(2)->plaintext; $zaidejas['ppokytis'] = $a->children(3)->plaintext; $zaidejas['tskaicius'] = $a->children(4)->plaintext; $zaidejai[] = $zaidejas; } } //pašalinam nereikalingus masyvo elementus (lentelės heading'us) unset( $zaidejai[909] ); unset( $zaidejai[808] ); unset( $zaidejai[707] ); unset( $zaidejai[606] ); unset( $zaidejai[505] ); unset( $zaidejai[404] ); unset( $zaidejai[303] ); unset( $zaidejai[202] ); unset( $zaidejai[101] ); unset( $zaidejai[ 0 ] ); //sutvarkom array keys $zaidejai = array_values( $zaidejai ); //pažiūrim gautą masyvą echo '<pre>'; print_r( $zaidejai ); echo '</pre>'; ?>
 
Štai dar vienas pavyzdys, kuriame gauname filmo reitingą iš imdb.com:

<?php //simple html dom biblioteka include('simple_html_dom.php'); //filmo url $url = 'http://www.imdb.com/title/tt0485947/'; //gauname svetainės html $html = file_get_html($url); //gauname filmo reitingą $ratio = $html->find('span.rating-rating', 0)->plaintext; echo $ratio; ?>
 
 
Pabaigai, noriu paminėti, kad su web scrapping galima sukurti gausybę naudingų ir niekam nekenkiančių dalykėlių, tačiau su juo galima pilnai pavogti turinį is RSS srauto ar iš paprasčiausios svetainės. Bet kaip tai padaryti - susigalvokite patys.
 
Ir tikiuosi, jog jums patiko, bei buvo naudingas pirmasis mano straipsnis uždarbis.lt forume :)

Nuo Google Adsense. Arba tu turi talentą, arba tu kažkuo sudominsi žiūrovus ir youtube padarys tave "žvaigžde" gaudamas pinigus už reklamas. Bet kokiu atveju per mėnesį reikia, kad tavo video peržiūrėtų daugiau nei keli milijonai žmonių, kad pajaustum pajamas. Pastebėjau, kad dauguma yra avių banda ir mėgstamiausi video yra visiški buki, todėl ir sakau, kad avių bandai, skėriams. Kiek yra kanalų turinčių milijonus peržiūrų, tai susidaro nuomonė, kad išradingiausi išsidirbinėtojai tampa laimingaisiais uždarbiautojais. Abejoju ar turi tokią super idėją kuri pritrauks pilką masę be geros grafikos, efektų. Nes geriausia reklama tokia, už kurią nereikia mokėti daug pinigų, o patys vartotojai padaro viską savo veikla. Pavyzdžiui snukiaknyge galima dar pasitelkt į pagalbą. Daug kas spaudinėja ant visokių bukų nuorodų, taip padidina peržiūras ir panašiai. Aišku reikia kurt daugumai, t.y. Anglų kalbą. (Stora moteriškė lifte išprievartavo...) ir žmonėms tai patinka. Gal biški perdėjau, bet mano nuomonė tokia :)

Nuo Google Adsense. Arba tu turi talentą, arba tu kažkuo sudominsi žiūrovus ir youtube padarys tave "žvaigžde" gaudamas pinigus už reklamas. Bet kokiu atveju per mėnesį reikia, kad tavo video peržiūrėtų daugiau nei keli milijonai žmonių, kad pajaustum pajamas. Pastebėjau, kad dauguma yra avių banda ir mėgstamiausi video yra visiški buki, todėl ir sakau, kad avių bandai, skėriams. Kiek yra kanalų turinčių milijonus peržiūrų, tai susidaro nuomonė, kad išradingiausi išsidirbinėtojai tampa laimingaisiais uždarbiautojais. Abejoju ar turi tokią super idėją kuri pritrauks pilką masę be geros grafikos, efektų. Nes geriausia reklama tokia, už kurią nereikia mokėti daug pinigų, o patys vartotojai padaro viską savo veikla. Pavyzdžiui snukiaknyge galima dar pasitelkt į pagalbą. Daug kas spaudinėja ant visokių bukų nuorodų, taip padidina peržiūras ir panašiai. Aišku reikia kurt daugumai, t.y. Anglų kalbą. (Stora moteriškė lifte išprievartavo...) ir žmonėms tai patinka. Gal biški perdėjau, bet mano nuomonė tokia :)

Kodėl būtinai plagiatų? Web scrapping galima panaudoti ir gerais tikslais, pvz.: svetainėje apie filmus automatiškai paimti ir kas kelias dienas atnaujinti filmų imdb.com reitingus :rolleyes::]

Na jei imant kaip pavyzdį tavo duotą orų saitą, tai tarkim Vilniaus orus išgauti labai paprasta, bent jau aš taip daryčiau:

<?php function explode2($pradzia,$galas,$url) { $pradzia = str_replace('/','\/',$pradzia); $galas = str_replace('/','\/',$galas); $regexp = '/'.$pradzia.'(.+?)'.$galas.'/'; preg_match_all($regexp,$url,$atitike); return $atitike[1]; } function curl($url) { $ch = curl_init(); curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); $result = curl_exec($ch); curl_close($ch); return $result; } $orai = explode2('<td class="oraiTableRow">','</td>',curl('http://www.orai.lt/lt/prognozes/vilnius')); echo $orai[1]; ?>
 
Skriptas išves: 3°C
11°C
 
O jau su tokia informacija daryk ką nori, rašyk į duomenų bazę, kad neužkrovinėtų kiekvieną kart to saito ar dar ką sugalvok. Žinoma yra daug kitų būdų išgauti duomenis, ar tai DOM naudojant, ar XPath ar paprasta explode() funkcija ir t.t.

Ar įmanoma nukopijuoti žaidimą, filmą iš kito tinklapio, kad ten pasikeitus veiksmui, pasikeistų ir mano tinklapyje? Pvz:
http://www.orai.lt/lt
Pasikeitus orų prognozei, pasikeičia ir mano tinklapyje.
 
Ar įmanoma, ką reikėtų išmanyti ir kiek tai kainuotų?

Tai gi galima padaryti, kad kas pvz 15 minučių atnaujintų informaciją. Parašai atskirą scriptuką, kuris atnaujina duomenis ir ant jo cronjob užstatai - ir vuolia. Tik kreivarankis naudotų duomenų ėmimą iš kito tinklalapio be cache, ypač jeigu tai būtų svetainė turinti lankomumą.
 
p.s. jeigu pavyks surasti laisvo laiko ir noras nebus pradingęs - galėsiu parašyti trumpą mokomąjį straipsniuką, kaip pasiimti duomenis iš kito tinklalapio, nes, kaip matau, ši tema yra gana dažnai paliečiama.

Tu šortini gal?

Henrikas Daktaras "Išlikti žmogumi".

Jei turi rimtą svetainę, kurios sponsorius yra Google adsense, tai ši tema tiks tau. Pateikiu visą sąrašą svetainių, kurios moka mažiausiai už reklamos paspaudimus Lietuvoje:
 

pranasystes.lt/Meile addlistsite.com/lt.php?advert/darbas/siulo_darba adwordstore.info alfa.lt/Vakareliai alfakreditas.lt anglija.lt/skelbimai artogama.lt/svetainiu+kurimas www.bigcredit.lt www.blickreditas.lt www.coral.lt www.credit24.lt www.creditor.lt/nemokama-paskola www.creditplus.lt www.creditplus.lt/paskola www.depereler.com www.dizainoarkliukas.lt www.emotion.lt www.emotion.lt/Puslapiai www.emp3.dar.lt www.epaskolos.lt www.evispa.lt www.ezaidimai.com www.feelsound.lt www.flashclips.eu www.freeshop.lt www.freshsound.lt www.geramuzika.net www.gkp.lt/greitas-kreditas www.grizzlis.lt www.host1plus.lt www.hostex.lt www.hostex.lt/hostingas www.hostingas.in www.izaidimai.lt www.komparsa.lt www.livingelectro.lt www.luksoroziedas.lt www.mamareklama.lt www.manomuzika.nkk.lt www.mikrokreditas.lt www.momentcredit.lt www.mp3.failai.lt www.mp3on.lt www.music.lt www.nkatalogas.info www.owexx.lt www.pageshop.lt www.pakabink.lt www.paskolos-internetu.lt www.paskolos.ne www.paskolos123.lt www.pazintys.tv www.phpbb.com www.pica.lt www.pica.lt/susikurk_svetaine www.pinigine.lt www.pinigine.lt/kreditai www.pinigine.lt/paskolos www.puslapis.lt www.radicenter.eu www.radijas.fm www.rds.lt www.serveriai.lt www.simple.lt www.skubuskreditas.lt www.smscredit.lt www.smscredit.lt/kreditai www.sostineskreditas.lt www.ssp.lt www.svetainetinklapis.lt www.svetainiuparduotuve.lt www.tavogydytojas.lt www.teo.lt www.teo.lt/hostingas www.teo.lt/tinklapiu+talpinimas www.tera.lt/tinklapiu-talpinimas www.themusic.lt www.tika.lt/browse?id=tinklapiu_talpinimas www.triobet.com/sportas www.tvsmedia.eu www.us.lt www.verslasonline.com www.viasms.lt www.vystymas.com www.webzona.lt www.webzona.lt/hostingas www.whiteline.lt www.zaidimai8.lt zaidimai.draugas.lt zaidimai1.lt zigzag.lt/index.php/pageid/1149 badu.lt bobutespaskola.lt/Greitos_Paskolos businessystem.weebly.com centokreditas.lt/Paskolos+internetu dreamstime.com euroecredit.lt/ hipopo.co.cc host1plus.lt/web-hostingas hostex.lt/hostingas ikariam.com isifedu.ssrverslas.com iv.lt/interneto+adresai jstudija.eu kastu.lt lhosting.info/lt lt.rsdelivers.com/elektronika momentcredit.lt/kreditas_internetu obuoliusidras.lt/Dieta paskoliukas.lt/kreditai paskoliukas.lt/kreditas paskolos.viasms.lt perkraustymai-pervezimai.com pinigai-internete.blogspot.com pinigai-internetu.com plus500.lt popkreditas.lt/ popkreditas.lt/kreditai puslapis.lt/Svetainiu+Kurimas serveriai.lt/hostingas serveriai.lt/puslapiu+hostingas serveriai.lt/tinklapiu+talpinimas smspinigai.lt/ softwaresubmit.net taupomojikasa.lt/paskolos tavogydytojas.lt tavovardas.tavopavarde.lt tiesa.com verskis.lt vitrinoms.lt www.123zaidimai.lt www.321.lt/hostingas www.activbuste.lt www.ahost.lt www.artogama.lt

yra pilna dalių, patys pasižiūrėkit.

Jei turi rimtą svetainę, kurios sponsorius yra Google adsense, tai ši tema tiks tau. Pateikiu visą sąrašą svetainių, kurios moka mažiausiai už reklamos paspaudimus Lietuvoje:
 

pranasystes.lt/Meile addlistsite.com/lt.php?advert/darbas/siulo_darba adwordstore.info alfa.lt/Vakareliai alfakreditas.lt anglija.lt/skelbimai artogama.lt/svetainiu+kurimas www.bigcredit.lt www.blickreditas.lt www.coral.lt www.credit24.lt www.creditor.lt/nemokama-paskola www.creditplus.lt www.creditplus.lt/paskola www.depereler.com www.dizainoarkliukas.lt www.emotion.lt www.emotion.lt/Puslapiai www.emp3.dar.lt www.epaskolos.lt www.evispa.lt www.ezaidimai.com www.feelsound.lt www.flashclips.eu www.freeshop.lt www.freshsound.lt www.geramuzika.net www.gkp.lt/greitas-kreditas www.grizzlis.lt www.host1plus.lt www.hostex.lt www.hostex.lt/hostingas www.hostingas.in www.izaidimai.lt www.komparsa.lt www.livingelectro.lt www.luksoroziedas.lt www.mamareklama.lt www.manomuzika.nkk.lt www.mikrokreditas.lt www.momentcredit.lt www.mp3.failai.lt www.mp3on.lt www.music.lt www.nkatalogas.info www.owexx.lt www.pageshop.lt www.pakabink.lt www.paskolos-internetu.lt www.paskolos.ne www.paskolos123.lt www.pazintys.tv www.phpbb.com www.pica.lt www.pica.lt/susikurk_svetaine www.pinigine.lt www.pinigine.lt/kreditai www.pinigine.lt/paskolos www.puslapis.lt www.radicenter.eu www.radijas.fm www.rds.lt www.serveriai.lt www.simple.lt www.skubuskreditas.lt www.smscredit.lt www.smscredit.lt/kreditai www.sostineskreditas.lt www.ssp.lt www.svetainetinklapis.lt www.svetainiuparduotuve.lt www.tavogydytojas.lt www.teo.lt www.teo.lt/hostingas www.teo.lt/tinklapiu+talpinimas www.tera.lt/tinklapiu-talpinimas www.themusic.lt www.tika.lt/browse?id=tinklapiu_talpinimas www.triobet.com/sportas www.tvsmedia.eu www.us.lt www.verslasonline.com www.viasms.lt www.vystymas.com www.webzona.lt www.webzona.lt/hostingas www.whiteline.lt www.zaidimai8.lt zaidimai.draugas.lt zaidimai1.lt zigzag.lt/index.php/pageid/1149 badu.lt bobutespaskola.lt/Greitos_Paskolos businessystem.weebly.com centokreditas.lt/Paskolos+internetu dreamstime.com euroecredit.lt/ hipopo.co.cc host1plus.lt/web-hostingas hostex.lt/hostingas ikariam.com isifedu.ssrverslas.com iv.lt/interneto+adresai jstudija.eu kastu.lt lhosting.info/lt lt.rsdelivers.com/elektronika momentcredit.lt/kreditas_internetu obuoliusidras.lt/Dieta paskoliukas.lt/kreditai paskoliukas.lt/kreditas paskolos.viasms.lt perkraustymai-pervezimai.com pinigai-internete.blogspot.com pinigai-internetu.com plus500.lt popkreditas.lt/ popkreditas.lt/kreditai puslapis.lt/Svetainiu+Kurimas serveriai.lt/hostingas serveriai.lt/puslapiu+hostingas serveriai.lt/tinklapiu+talpinimas smspinigai.lt/ softwaresubmit.net taupomojikasa.lt/paskolos tavogydytojas.lt tavovardas.tavopavarde.lt tiesa.com verskis.lt vitrinoms.lt www.123zaidimai.lt www.321.lt/hostingas www.activbuste.lt www.ahost.lt www.artogama.lt

Visos pramogos kurias dauguma "kemša" į galvas (televizoriai, kompiuteriniai žaidimai ir pan.) yra tik neblogas būdas mulkinti žmoniją, kad kuo mažiau galvotų apie Tikrą Tiesą. Kuo mažiau mąstysite - tuo jūs tapsite pasiekiamesni. Laikas atsibusti ir pamatyti tiesą savo akimis.
tikratiesa.lt