php - 如何用客户端ip实现分布式爬虫
伊谢尔伦
伊谢尔伦 2017-04-11 09:46:37
0
2
425

如果用服务端爬虫会遇到各种问题,如何实现访客打开网页时用访客的ip访问被爬的网站,然后把资料上传,这样可以实现分布式爬虫吗?ajax获取被爬的资料然后传到自己的服务器?

是否已有类似的例子或者开源项目?

伊谢尔伦
伊谢尔伦

小伙看你根骨奇佳,潜力无限,来学PHP伐。

membalas semua(2)
PHPzhong

你这是在窃取用户隐私,行不通的~

Ty80

基本原理是创建一个隐藏的iframe然后请求目标网站,请求成功后使用ajax保存到本地服务器。。因为许多网站都做了反爬虫策略,所以服务端爬虫经常失效,这种情况下使用客户端爬虫很好用。

但是,用户体验不太好吧。。。。

Muat turun terkini
Lagi>
kesan web
Kod sumber laman web
Bahan laman web
Templat hujung hadapan
Tentang kita Penafian Sitemap
Laman web PHP Cina:Latihan PHP dalam talian kebajikan awam,Bantu pelajar PHP berkembang dengan cepat!