Nukopijuoti tinklapio veiksmą

Ar įmanoma nukopijuoti žaidimą, filmą iš kito tinklapio, kad ten pasikeitus veiksmui, pasikeistų ir mano tinklapyje? Pvz:

http://www.orai.lt/lt

Pasikeitus orų prognozei, pasikeičia ir mano tinklapyje.

Ar įmanoma, ką reikėtų išmanyti ir kiek tai kainuotų?

Žinoma įmanoma, tik priklauso ką būtent reikia kopijuoti. Jei orus, tai tikrai nėra sudėtinga ir brangu. :)

Taip, imanoma. taciau pasikrovimo laikas labai padides.

Užtenka išmanyti PHP, html simple dom pagalba galima viską padaryti http://simplehtmldom.sourceforge.net/

O dėl kainos, tai viskas priklausytų nuo to, ko tau tiksliai reikia.

Nereikia jokio PHP, užtenka JS, ir krovimosi laikas nebus didesnis...

Viskas yra imanoma Lietuviams.. :)

Nesvarbus tas krovimo laikas, gali skirtis, kad ir para. Ar įmanoma paprastam, nieko nenutuokiančiam apie jokius skriptus, php ir html tai pasidaryti ant phpbb3? Ar geriau negaišti laiko ir pasinaudoti iš karto kreditine kortele su forumo gyventojais?

P.s. gal išsamus straipsnis susilauktų nemažai reputacijos, nes tai pakankamai aktuali tema.

Taip, imanoma. taciau pasikrovimo laikas labai padides.

Protingas programuotojas panaudotų cache...

Nesvarbus tas krovimo laikas, gali skirtis, kad ir para. Ar įmanoma paprastam, nieko nenutuokiančiam apie jokius skriptus, php ir html tai pasidaryti ant phpbb3? Ar geriau negaišti laiko ir pasinaudoti iš karto kreditine kortele su forumo gyventojais?

Jeigu nieko nenutuoki ir nenori nieko mokintis, tai greičiausiai nieko neišeis. Bet būdamas tavo vietoje, kad mažiau skaudėtų galvą, tai tiesiog pasinaudočiau kokio programuotojo paslaugomis. :)

Protingas programuotojas panaudotų cache...

Kokia čia realaus laiko informacija jei cache naudoji.

galima tiesiai is kito tinklapio paimti informacija ir ja atvaizduoti savo tinklapyje su php curl biblioteka. tuomet nereikes informacijos saugoti savo serveryje

Kokia čia realaus laiko informacija jei cache naudoji.

Tai galima kas valanda atnaujint ar pan. Priklauso ko jam reikia.

Fantasya, kas is to, kad nereik saugot serveri jei kraus ilgiau ir dar serva apkraus be cache peilis bus.. O dar jei tas puslapis nuluzta tai kartu ir tavo.

Kokia čia realaus laiko informacija jei cache naudoji.

Tai gi galima padaryti, kad kas pvz 15 minučių atnaujintų informaciją. Parašai atskirą scriptuką, kuris atnaujina duomenis ir ant jo cronjob užstatai - ir vuolia. Tik kreivarankis naudotų duomenų ėmimą iš kito tinklalapio be cache, ypač jeigu tai būtų svetainė turinti lankomumą.

p.s. jeigu pavyks surasti laisvo laiko ir noras nebus pradingęs - galėsiu parašyti trumpą mokomąjį straipsniuką, kaip pasiimti duomenis iš kito tinklalapio, nes, kaip matau, ši tema yra gana dažnai paliečiama.

Tai gi galima padaryti, kad kas pvz 15 minučių atnaujintų informaciją. Parašai atskirą scriptuką, kuris atnaujina duomenis ir ant jo cronjob užstatai - ir vuolia. Tik kreivarankis naudotų duomenų ėmimą iš kito tinklalapio be cache, ypač jeigu tai būtų svetainė turinti lankomumą.

 

p.s. jeigu pavyks surasti laisvo laiko ir noras nebus pradingęs - galėsiu parašyti trumpą mokomąjį straipsniuką, kaip pasiimti duomenis iš kito tinklalapio, nes, kaip matau, ši tema yra gana dažnai paliečiama.

Gal geriau nerasyk, o tai dar daugiau plagijatu privis. :x

Gal geriau nerasyk, o tai dar daugiau plagijatu privis. :x

Kodėl būtinai plagiatų? Web scrapping galima panaudoti ir gerais tikslais, pvz.: svetainėje apie filmus automatiškai paimti ir kas kelias dienas atnaujinti filmų imdb.com reitingus :rolleyes::]

Na jei imant kaip pavyzdį tavo duotą orų saitą, tai tarkim Vilniaus orus išgauti labai paprasta, bent jau aš taip daryčiau:

<?php
function explode2($pradzia,$galas,$url) {
$pradzia = str_replace('/','\/',$pradzia);
$galas = str_replace('/','\/',$galas);
$regexp = '/'.$pradzia.'(.+?)'.$galas.'/';
preg_match_all($regexp,$url,$atitike);
return $atitike[1];
}
function curl($url) {
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
$result = curl_exec($ch);
curl_close($ch);
return $result;
}
$orai = explode2('<td class="oraiTableRow">','</td>',curl('http://www.orai.lt/lt/prognozes/vilnius'));
echo $orai[1];
?>

Skriptas išves: 3°C

11°C

O jau su tokia informacija daryk ką nori, rašyk į duomenų bazę, kad neužkrovinėtų kiekvieną kart to saito ar dar ką sugalvok. Žinoma yra daug kitų būdų išgauti duomenis, ar tai DOM naudojant, ar XPath ar paprasta explode() funkcija ir t.t.

Kodėl būtinai plagiatų? Web scrapping galima panaudoti ir gerais tikslais, pvz.: svetainėje apie filmus automatiškai paimti ir kas kelias dienas atnaujinti filmų imdb.com reitingus :rolleyes::]

Ne tai aisku nevien plagijuot galima, bet garantuoju, kad didzioji dalis zmoniu pasinaudos blogais tikslais. :D

Kas pakels kardą, tas nuo jo ir mirs. Tai kas norės plagijuoti, tam nebus čia problema susižinoti ar nusipirkti informaciją.

Lapinski, jei sukursi instrukciją, duok žinoti. Iš anksto dėkui.

Nereikia jokio PHP, užtenka JS, ir krovimosi laikas nebus didesnis...

Kažkaip pražioplinau tavo žinutę, vat reikėtų pakomentuoti - tinklalapio krovimosi laikas gal ir nepagreitės... Bet vis tiek kol naršyklė gaus informaciją su JS iš kitos svetainės vis tiek praeis kažkiek tai laiko. Todėl vartotojas duomenis pamatys tikrai ne iškarto, todėl, manau šitas būdas nėra geras.

Kažkaip pražioplinau tavo žinutę, vat reikėtų pakomentuoti - tinklalapio krovimosi laikas gal ir nepagreitės... Bet vis tiek kol naršyklė gaus informaciją su JS iš kitos svetainės vis tiek praeis kažkiek tai laiko. Todėl vartotojas duomenis pamatys tikrai ne iškarto, todėl, manau šitas būdas nėra geras.

Bet pagalvok, vartotojui laukimas bus įdomesnis žiūrint į baltą langą, ar į kokį nors indikatorių, kuris parodytų, kad bent jau kraunama... Dar vienas aspektas - nekiltų klausimų dėl cache sistemos. Jos tiesiog nebūtų kur įrašyti...

Bet pagalvok, vartotojui laukimas bus įdomesnis žiūrint į baltą langą, ar į kokį nors indikatorių, kuris parodytų, kad bent jau kraunama... Dar vienas aspektas - nekiltų klausimų dėl cache sistemos. Jos tiesiog nebūtų kur įrašyti...

Na iš dalies sutinku su tavimi, bet tavo metodas galbūt tinka nebent dirbant su mažais duomenų kiekiais. Pvz. ištraukti kokį vieną skaičiuką (šiuo atveju sužinoti orus). Nes tikrai nebūtų protinga mintis su JS bandyti paimti 1000 geriausių tenisų žaidėjų iš čia http://www.atpworldtour.com/Rankings/Singles.aspx Nu gerai, kad ir 100, tikrai vartotojui nebūtų patogu. :)

p.s. dar tokio metodo niekur neteko matyti naudojant praktikoje :)

Na iš dalies sutinku su tavimi, bet tavo metodas galbūt tinka nebent dirbant su mažais duomenų kiekiais. Pvz. ištraukti kokį vieną skaičiuką (šiuo atveju sužinoti orus). Nes tikrai nebūtų protinga mintis su JS bandyti paimti 1000 geriausių tenisų žaidėjų iš čia http://www.atpworldtour.com/Rankings/Singles.aspx Nu gerai, kad ir 100, tikrai vartotojui nebūtų patogu. :)

 

p.s. dar tokio metodo niekur neteko matyti naudojant praktikoje :)

json - vienas geresnių pavyzdžių, tik duomenys imami iš savo serverio, spec. sugeneruoti. O parsinti duomenis ir su JS galima.

json - vienas geresnių pavyzdžių, tik duomenys imami iš savo serverio, spec. sugeneruoti. O parsinti duomenis ir su JS galima.

Taip, dėl JSON nesiginčiju. Tikrai ne kartą teko tai matyti (tarp kitko labai smagu su json dirbti). Bet kiek tau teko matyti svetainių parsinančių html puslapį (išorinį) su JS?

P.S. Buvau prisižadėjęs, tai štai nuoroda į mano straipsnį apie web scrapping http://uzdarbis.lt/t173550/web-scrapping-naudojant-php/