python - 基于scrapy-redis的分布式爬虫运行的时候不能正常运行 遇到的问题如下截图所示
PHPz
PHPz 2017-04-18 10:32:53
0
1
609

爬虫运行时一直是这样的每一分钟出现一条这样的信息,无限循环。不能爬取下来数据

这是redis服务端的显示

这样是什么问题,望有高手可以为我解惑,谢谢。

PHPz
PHPz

学习是最好的投资!

全部回覆(1)
大家讲道理

使用scrapy_redis,你要去投放url讓spider去爬取,你投放了嗎?
例如

redis-cli lpush myspider:start_urls http://google.com
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板
關於我們 免責聲明 Sitemap
PHP中文網:公益線上PHP培訓,幫助PHP學習者快速成長!