Web scrapping naudojant PHP

Manau supranti, kad žmonės užimti yra ir savo rūpesčių, bei vargų turi. Jeigu galėsiu ir bus noro - atsiųsiu tau kodo pavyzdį parašęs į PM. ;)

 

p.s. tau reikia paskutinės nuorodos (anchor) esančiame div'e su id "divas"?

1.<div id="divas">
2.<b>Reikia šios eilutės</b>
3.<a href="#">Nereikia šios eilutės</b>
4.<b>Nereikia šios eilutės</b>
5.<a href="#">Reikia šios eilutės</b>
6.</div>

Reikia antros ir ketvirtos

1.<div id="divas">
2.<b>Reikia šios eilutės</b>
3.<a href="#">Nereikia šios eilutės</b>
4.<b>Nereikia šios eilutės</b>
5.<a href="#">Reikia šios eilutės</b>
6.</div>

Reikia antros ir ketvirtos

 

Spėju, kad nemoki skaityti dokumentacijos Simple HTML DOM.

 

<?php
//gausi antrą nuorodą 
echo $html->find("#divas", 0)->children(2);

//gausi paskutinę nuorodą
echo $html->find("#divas", 0)->last_child(); 

 

O šiaip skaityk, mokykis, nes niekas kitas už tave visko nepadarys (: ten dokumentacija labai aiški...

Redagavo Rugsėjo 26, 2011 Lapinskis

Spėju, kad nemoki skaityti dokumentacijos Simple HTML DOM.

 

<?php
//gausi antrą nuorodą 
echo $html->find("#divas", 0)->children(2);

//gausi paskutinę nuorodą
echo $html->find("#divas", 0)->last_child(); 

 

O šiaip skaityk, mokykis, nes niekas kitas už tave visko nepadarys (: ten dokumentacija labai aiški...

Ačiū

Ačiū

 

Ačiū ne valiuta :D juokauju žinoma. Malonu padėti, tik kitą kartą netingėk tiek pats ir skaitinėk manual'ą.

Kiek bandau, tai su lietuviskom raidem yra problemu :) t.y. kai nuscrappina, vietoj ąčęėįšųūž - rodo klaustukus (???��) :) kaip apeiti?

Kiek bandau, tai su lietuviskom raidem yra problemu :) t.y. kai nuscrappina, vietoj ąčęėįšųūž - rodo klaustukus (???��) :) kaip apeiti?

 

Čia tavo script'o problema, įdėk UTF-8 koduotės header'į ir dar gal su html meta tag'ais sužaisk.

<?php

$url = 'http://www.hey.lt'; // Cia rodo ���

$url = 'http://www.delfi.lt'; // Cia viskas grazu

$output = file_get_contents($url);

echo $output;

?>

 

includinu tai, kas pas juos yra :) taigi kame beda gali but? meta tag`ai bei koduotes seniai isbandytos - nieko nepadejo.

<?php

$url = 'http://www.hey.lt'; // Cia rodo ���

$url = 'http://www.delfi.lt'; // Cia viskas grazu

$output = file_get_contents($url);

echo $output;

?>

 

includinu tai, kas pas juos yra :) taigi kame beda gali but? meta tag`ai bei koduotes seniai isbandytos - nieko nepadejo.

 

Pabandyk nustatyti abiem atvejais koduotę su šituo http://php.net/manual/en/function.mb-detect-encoding.php ir žiūrėk atitinkamai kame bėda.

Nekuriu naujos temos bet užduodu klausimus čia:

 

1. Kaip padaryti, kad gautą rezultatą pvz: $50.00 padaugintų iš dviejų ir nuimtų $.

2. Sunku būtų padaryti kad tarkim susikurūs modifikacija arašius preskės ID ir būtų auto užpildyti laukai apie prekę.

Ttrumpiau iš e-shop į mano eshop.

Nekuriu naujos temos bet užduodu klausimus čia:

 

1. Kaip padaryti, kad gautą rezultatą pvz: $50.00 padaugintų iš dviejų ir nuimtų $.

2. Sunku būtų padaryti kad tarkim susikurūs modifikacija arašius preskės ID ir būtų auto užpildyti laukai apie prekę.

Ttrumpiau iš e-shop į mano eshop.

1) $usd = str_replace ('$', '', '$50.00');

$usd = $usd * 2;

2) Jeigu iš vieno shopo tai nėra nieko labai sunkaus.

Nekuriu naujos temos bet užduodu klausimus čia:

 

1. Kaip padaryti, kad gautą rezultatą pvz: $50.00 padaugintų iš dviejų ir nuimtų $.

2. Sunku būtų padaryti kad tarkim susikurūs modifikacija arašius preskės ID ir būtų auto užpildyti laukai apie prekę.

Ttrumpiau iš e-shop į mano eshop.

 

1. Išgauni string'ą '$50.00', su str_replace nuimi $ ženklą, su (int) arba (float) pakeiti tipą ir tada daugini iš dviejų. Simple.

 

 

2. Nesunku.

 

 

1) $usd = str_replace ('$', '', '$50.00');

$usd = $usd * 2;

2) Jeigu iš vieno shopo tai nėra nieko labai sunkaus.

 

Aciu, kad parodei kaip trumpiau, as kol atsake bandziau gavos bet ilgas kodas nors viskas tas pats. Taip viskas is vieno shopo gal galit kas pavyzdi?

Aciu, kad parodei kaip trumpiau, as kol atsake bandziau gavos bet ilgas kodas nors viskas tas pats. Taip viskas is vieno shopo gal galit kas pavyzdi?

Nematant eshopo nieko nepadarysi, daugumos web skiriasi kodas, kiekienam webui reikia pritaikyt atskirai kodą. Bendrinių pavyzdžių internete ieškok, nieko konkretaus šituo klausimu negaliu pasakyti dabar.

Nematant eshopo nieko nepadarysi, daugumos web skiriasi kodas, kiekienam webui reikia pritaikyt atskirai kodą. Bendrinių pavyzdžių internete ieškok, nieko konkretaus šituo klausimu negaliu pasakyti dabar.

 

Gal gali ant kokio kinietisko shop focalprice.com, dealextreme.com, [Nuoroda pašalinta: SPAM.]

 

Bet siaip noreciau sportsdirect.com, healthdesign.com

Gal gali ant kokio kinietisko shop focalprice.com, dealextreme.com, [Nuoroda pašalinta: SPAM.]

 

Bet siaip noreciau sportsdirect.com, healthdesign.com

čia ne dvi eilutės kodo, kad iš neturėjimo ką veikt rašyčiau :) Turiu ir savų darbų

http://e-sim.org/jobMarket.html ten kur salary noriu pačios viršutinės salary skaičių išgaut, ir niekaip nesigauna :(Jis visada būna didžiausias ir dažnai keičias Ką galit patart? Redagavo Sausio 3, 2012 SMM

Paprasciausias budas soves man i galva :)

<?php

$tekstas=file_get_contents("http://e-sim.org/jobMarket.html");
$arr=explode("Salary",$tekstas);
$arr=explode("<b>",$arr[1]);
$arr=explode("</b>",$arr[1]);
$salary=$arr[0];
echo"$salary";

?>

ačiūūūūūūūūūūūūūūūūūūūū veikia!!!!!!! Tu dievas! :D

ačiūūūūūūūūūūūūūūūūūūūū veikia!!!!!!! Tu dievas! :D

 

:) Ne.. tai tik tu [...]

Sudomino mane šis būdas

<?php
       //simple html dom biblioteka
       include('simple_html_dom.php');

       //filmo url
       $url = 'http://www.imdb.com/title/tt0485947/';

       //gauname svetainės html
       $html = file_get_html($url);

       //gauname filmo reitingą
       $ratio = $html->find('span.rating-rating', 0)->plaintext;

       echo $ratio;
?>

Šeip šis kodas neveikia, išmeta naršyklėje "0/10" nors kitoks reitingas yra..Bet mane domina kaip tai veikia, niekaip neįkertu, kokiu budų gaunamas tas filmo reitingas??

Ar čia reikia lysti į svetainės course?

 

Sudomino mane šis būdas

<?php
       //simple html dom biblioteka
       include('simple_html_dom.php');

       //filmo url
       $url = 'http://www.imdb.com/title/tt0485947/';

       //gauname svetainės html
       $html = file_get_html($url);

       //gauname filmo reitingą
       $ratio = $html->find('span.rating-rating', 0)->plaintext;

       echo $ratio;
?>

Šeip šis kodas neveikia, išmeta naršyklėje "0/10" nors kitoks reitingas yra..Bet mane domina kaip tai veikia, niekaip neįkertu, kokiu budų gaunamas tas filmo reitingas??

Ar čia reikia lysti į svetainės course?

 

<?php
       //simple html dom biblioteka
       include('simple_html_dom.php');

       //filmo url
       $url = 'http://www.imdb.com/title/tt0485947/';

       //gauname svetainės html
       $html = file_get_html($url);

       //gauname filmo reitingą
       $ratio = $html->find('span[itemprop="ratingValue"]', 0)->plaintext;

       echo $ratio;
?>

 

Štai ir veikia, tereikia biški programuoti mokėti

Redagavo Rugpjūčio 26, 2012 Sventasis

O tarkim dar noriu išraukt Filmo metus, aktorius sąrašą, aprašymą ir kita ?

O tarkim dar noriu išraukt Filmo metus, aktorius sąrašą, aprašymą ir kita ?

Na tai ir ieškai būtent su selektoriais, skirtais jiem, pasižiūrėjęs į HTML. Beje, IMDb scrappingą draudžia.

O tarkim dar noriu išraukt Filmo metus, aktorius sąrašą, aprašymą ir kita ?

 

Kiek pasiruoses sumoket? Padaryt viska imanoma.

Nepasiruošes moket :D norėčiau pats išmokt pasidaryt