python爬虫 - python访问豆瓣突然遇到403forbidden,用过edge浏览器也无法访问？

Question

如题，使用requests访问，昨天写代码的时候两个多小时一直在访问豆瓣主页，没有什么问题，今天用相同的程序就变成了403forbidden，chrome、edge访问网址也变成了403forbidden..不知是什么原因..

Answer 1

學習爬蟲抓豆瓣還是不錯的，如果要應用，請用人家的開放平台吧http://developers.douban.com/

Answer 2

抓的太狠，被豆瓣封了啊~

Answer 3

人家費多勁搞點 UGC 豈容你隨便抓取？
可以用高匿代理 IP 抓，我們之前抓過淘寶的數據，也是抓幾次以後就禁止了，後來用代理完美解決，對方完全禁止不了。

Answer 4

豆瓣是透過cookies限制抓取頻率的, 分析下cookies, 是可以偽造的. 上個月兩小時抓了107萬個頁面.