简体中文(ZH-CN) English(EN) 繁体中文(ZH-TW) 日本語(JA) 한국어(KO) Melayu(MS) Français(FR) Deutsch(DE)
python - 基于scrapy-redis的分布式爬虫运行的时候不能正常运行 遇到的问题如下截图所示
PHPz
PHPz 2017-04-18 10:32:53
0
1
616

爬虫运行时一直是这样的每一分钟出现一条这样的信息，无限循环。不能爬取下来数据

这是redis服务端的显示

这样是什么问题，望有高手可以为我解惑，谢谢。

PHPz
PHPz

学习是最好的投资！

全員に返信(1)
大家讲道理
大家讲道理2017-04-18 10:34:53 1棟

scrapy_redisを使用して、スパイダーがクロールするためのURLを配置する必要があります。
例えば

リーリー
いいねを押す +0
返信を追加
人気のトピック
詳細>
人気の記事
人気のチュートリアル
詳細>
関連するチュートリアル
人気のおすすめ
最新のコース
最新のダウンロード
詳細>
ウェブエフェクト
公式サイト
サイト素材
フロントエンドテンプレート
私たちについて 免責事項 Sitemap
PHP中国語ウェブサイト：福祉オンライン PHP トレーニング，PHP 学習者の迅速な成長を支援します！