简体中文(ZH-CN) English(EN) 繁体中文(ZH-TW) 日本語(JA) 한국어(KO) Melayu(MS) Français(FR) Deutsch(DE)
php - 如何用客户端ip实现分布式爬虫
伊谢尔伦
伊谢尔伦 2017-04-11 09:46:37
0
2
395

如果用服务端爬虫会遇到各种问题，如何实现访客打开网页时用访客的ip访问被爬的网站，然后把资料上传，这样可以实现分布式爬虫吗？ajax获取被爬的资料然后传到自己的服务器？

是否已有类似的例子或者开源项目？

伊谢尔伦
伊谢尔伦

小伙看你根骨奇佳，潜力无限，来学PHP伐。

répondre à tous(2)
PHPzhong
PHPzhong2017-04-11 09:48:37 2 plancher

你这是在窃取用户隐私，行不通的~

Comme +0
Ajouter une réponse
Ty80
Ty802017-04-11 09:48:37 1 plancher

基本原理是创建一个隐藏的iframe然后请求目标网站，请求成功后使用ajax保存到本地服务器。。因为许多网站都做了反爬虫策略，所以服务端爬虫经常失效，这种情况下使用客户端爬虫很好用。

但是，用户体验不太好吧。。。。

Comme +0
Ajouter une réponse
Sujets populaires
Plus>
Articles populaires
Tutoriels populaires
Plus>
Tutoriels associés
Recommandations populaires
Derniers cours
Derniers téléchargements
Plus>
effets Web
Code source du site Web
Matériel du site Web
Modèle frontal
À propos de nous Clause de non-responsabilité Sitemap
Site Web PHP chinois：Formation PHP en ligne sur le bien-être public，Aidez les apprenants PHP à grandir rapidement！