Curl war relativ stabil, bevor es die Seite erfasste, gab dann aber eine leere Seite aus.

Question

http://live.500.com/2h1.php

Dies ist die Adresse. Ich habe die IP-Quelle und die Browser-Header-Datei usw. erstellt. Wie kann ich diese URL crawlen? Funktion curl_file_get_contents_nossl($durl){

4.0 (kompatibel; MSIE 8.0; Windows NT 6.0)',

'Mozilla/4.0 (kompatibel; MSIE 7.0; Windows NT 5.2)',

'Mozilla/4.0 (kompatibel; MSIE 6.0; Windows NT 5.1)',

'Mozilla/5.0 (Windows; U; Windows NT 5.2) Gecko/2008070208 Firefox/3.0.1',

'Opera/9.27 (Windows NT 5.2; U; zh-cn)',

'Opera/8.0 ( Macintosh; PPC Mac OS /525.13 ',

'Mozilla/5.0 (Windows; U; Windows NT 5.2) AppleWebKit/525.13 (KHTML, wie Gecko) Version/3.1 Safari/525.13'

);

$ ch = curl_init() ;

curl_setopt($ch, CURLOPT_ACCEPT_ENCODING, "gzip,deflate");

curl_setopt($ch, CURLOPT_HTTPHEADER, array('X-FORWARDED-FOR:28.58.88.'.$r, ' CLIENT-IP:225.28 .58.'.$r)); //IP konstruieren

curl_setopt($ch, CURLOPT_URL, $durl);

curl_setopt($ch, CURLOPT_REFERER, "http://live.500. com/"); //Konstruktursprung

curl_setopt($ch, CURLOPT_TIMEOUT, 5);

curl_setopt($ch, CURLOPT_USERAGENT, array_rand($useragent));

//curl_setopt($ch, CURLOPT_REFERER,_REFERER_) ;

curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1);

curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false); //Das Gleiche wie unten, wenn das Zertifikat nicht verifiziert ist

curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, false);

$r = curl_exec($ch) ;

curl_close($ch);

return $r;

}

Answer 1

已经解决了，就是数据太多了，，，，