84669 人學習
152542 人學習
20005 人學習
5487 人學習
7821 人學習
359900 人學習
3350 人學習
180660 人學習
48569 人學習
18603 人學習
40936 人學習
1549 人學習
1183 人學習
32909 人學習
2017-05-12 23:39:52 [scrapy.extensions.logstats] INFO: Crawled 3000 pages (at 61 pages/min), scraped 454 items (at 10 items/min)
為什麼我使用scrapy爬取的時候訪問pages要比實際進入items的的多的多?就是爬了半天items裡沒有幾條數據入庫的有什麼辦法解決麼?
认证高级PHP讲师
重定向了,你看到了吧,重定向就得請求兩個頁面啊。還有就是看有不有頁面解析發生了錯誤。
重定向了,你看到了吧,重定向就得請求兩個頁面啊。還有就是看有不有頁面解析發生了錯誤。