python - Scrapy如何爬取多个不同页面?
PHPz
PHPz 2017-04-18 09:26:21
0
2
686
PHPz
PHPz

学习是最好的投资!

全部回覆(2)
黄舟

如果a,b是獨立的,就分兩個spider,一個spider是可以用多個item的,如果有需要的話。

刘奇

如果是兩個獨立的目標網站,分開寫會比較靈活一點。
如果是同一個網站,假定你分別有兩個item:itema, itemb, 有很多url要爬取,這些url能在兩個item的解析都獲取到,你獲取了url後就yield新的請求就可以了。

熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板