hoe html te rippen met php in cron

**izzi** · 29/06/07 12:44

Ik wil dagelijks een stuk code uit een site rippen met behulp van php. Het stuk tekst staat bv in een table en volgens mij moet het lukken om dan een stuk tussen <table> en </table> met als extra tag NED te rippen. Kent iemand een script die dat doet (zal hem natuurlijk moeten aanpassen).

**Domenico** · 29/06/07 13:12

Is een cgi script ook goed? Kun je aanroepen vanuit php natuurlijk of zelf porten.

**BiLLie** · 29/06/07 13:19

met php kun je zelf ook makkelijk rippen en vervolgens stukken tekst uit een pagina filteren. Zal de code snel even voor je opzoeken.

PHP Code:


<?php

$handle = fopen ("http://www.webhostingtalk.nl", "rb");

$contents = "";

do {

   $data = fread($handle, 8192);

   if (strlen($data) == 0) {

       break;

   }

   $contents .= $data;

} while(true);

fclose ($handle);

?>

**Triloxigen** · 29/06/07 13:37

CURL werkt prettiger dan fopen vind ik zelf.

**Kenneth** · 29/06/07 13:58

Oorspronkelijk geplaatst door Triloxigen

CURL werkt prettiger dan fopen vind ik zelf.

en sneller

**Domenico** · 29/06/07 17:39

Ik had hem zo in perl:

Code:

#!/usr/bin/perl

require LWP::UserAgent;
read(STDIN, $commandprompt, $ENV{'CONTENT_LENGTH'});
@theactualdata = split(/&/, $commandprompt);
$newcommandprompt = '';
foreach $actualdata (@theactualdata) {
($name, $value) = split(/=/, $actualdata);
if ($name ne 'page')
{ $newcommandprompt = $newcommandprompt . $actualdata } ;
$name  =~ tr/+/ /;
$value =~ tr/+/ /;
$value =~ s/%([a-fA-F0-9][a-fA-F0-9])/pack("C", hex($1))/eg;
$value =~ s/<([^>]|\n)*>//g;
$value =~ s/<//g;
$value =~ s/>//g;
$URL{$name} = $value;
}
print "Content-type: text/html\n\n";
$url            = $URL{'url'};


$url = 'http://www.google.nl/';

 $start = '<html>';
# $start = '';


#  $finish = '<br><font size=-1><font color=red>Nieuw!</font>';
  $finish = '</body></html>';
 

# $sourcelink = 'href="/';
# $newlink = 'target="_blank" href="http://www.google.nl';


# $sourceimage = 'img src=\"';
# $newimage = 'img src=\"http://www.pollstar.com/news';


$filename = '';        #   ie.. saved.txt or html.txt

$addpoints = 0;        # 0 or 1 here

$baseurl = 'http://www.google.nl/';

# redirect bij error

$errorurl = '';

**izzi** · 29/06/07 18:30

great mannen of misschien wel dames

ik heb perl draaien dus ik ga dat een keer proberen, bi the wee, dat stukje php is ook top! bedankt!!

**FunzoneQ!** · 29/06/07 23:36

Jongens toch, dat kan korter!

Code:

<?
$content = file_get_contents("http://www.nu.nl");

$regEx = "/\<table[^>]*\>(.*?)\<\/table\>/ise";
preg_match_all($regEx, $content, $matches);

echo '<pre>';
print_r($matches);
echo '</pre>';
?>

**SebastiaanStok** · 09/07/07 20:42

Niet om het een of ander

Maar heb je wel recht op die gegevens?

Dus dat je niet de inhoud van iemand steelt die daar geen toestemming voor heeft gegeven

Onderwerp Gereedschap

Toon

Onderwerp: hoe html te rippen met php in cron

hoe html te rippen met php in cron

Labels voor dit Bericht

Webhostingtalk.nl

Link met ons

Partners

Contact