光阴似箭催人老,日月如移越少年。
把Lanten關掉~
答案來源位址:CSDN部落格:Scrapy使用問題整理
答案中最後提到了代理問題導致有些網站無法訪問,解決方法是在settings.py中修改:DOWNLOADER_MIDDLEWARES = {
'scrapy.downloadermiddlewares.useragent.UserAgentMiddleware': None,
}
經測試修改後程式能夠運作
應該是Lanten改變了系統的代理,導致你的爬蟲也被迫使用這個代理ip去訪問
把Lanten關掉~
答案來源位址:CSDN部落格:Scrapy使用問題整理
答案中最後提到了代理問題導致有些網站無法訪問,解決方法是在settings.py中修改:
DOWNLOADER_MIDDLEWARES = {
}
經測試修改後程式能夠運作
應該是Lanten改變了系統的代理,導致你的爬蟲也被迫使用這個代理ip去訪問