首页 > 后端开发 > php教程 > php curl 多线程抓取数据会判断分别来自哪个url吗

php curl 多线程抓取数据会判断分别来自哪个url吗

WBOY
发布: 2016-06-13 12:47:06
原创
752 人浏览过

php curl 多线程抓取数据能判断分别来自哪个url吗?

 $mh = curl_multi_init(); // 开启多线程<br />
<br />
    $i = 0;<br />
    foreach($url_array as $url) {<br />
        $ch = curl_init();<br />
	    if (IS_PROXY) {<br />
			curl_setopt ($ch, CURLOPT_PROXY,'67.215.228.129:8089' );//60.12.226.18<br />
		} <br />
        curl_setopt($ch, CURLOPT_URL, $url);<br />
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); // return don't print<br />
        curl_setopt($ch, CURLOPT_TIMEOUT, 30); //设置超时时间<br />
        curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/4.0 (compatible; MSIE 5.01; Windows NT 5.0)');<br />
        curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1); // 302 redirect<br />
        curl_setopt($ch, CURLOPT_MAXREDIRS, 7); //HTTp定向级别<br />
        curl_multi_add_handle($mh, $ch); // 把 curl resource 放进 multi curl handler 里<br />
        $handle[$i++] = $ch;<br />
    }
登录后复制


代码如上,开启多线程抓取数据;假如我一次加入10个url,返回给我的是一个有10个结果的数组。我不能判断这些数据分别是来自哪个url的。
请问有什么办法,还是其他哪种语言能实现,多线程抓取的数据还知道来自哪个url的。

相关标签:
来源:php.cn
本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板