84669 Lernen von Personen
152542 Lernen von Personen
20005 Lernen von Personen
5487 Lernen von Personen
7821 Lernen von Personen
359900 Lernen von Personen
3350 Lernen von Personen
180660 Lernen von Personen
48569 Lernen von Personen
18603 Lernen von Personen
40936 Lernen von Personen
1549 Lernen von Personen
1183 Lernen von Personen
32909 Lernen von Personen
请求所需参数全部带上了,并且已带上cookies,已修改header,拿到的数据是提示刷新的HTML,如图:原网页是动态加载的瀑布流,即往不断下拉就不断有内容呈现出来,静候大神,目前采用scrapy框架,暂时还不想上selenium+phantomjs,太重了
业精于勤,荒于嬉;行成于思,毁于随。
动态加载的数据你应该找ajax api请求,而不是在网页找,工欲善其事必先利其器,善用 F12。
这种情况比抓取一个代理ip网页,使用cookie但是报错好解决多了==,你完全可以判断当前页面内容然后进行模拟刷新~ 重要的是保持会话。
如果还不行的话,可以加referer再试一试
动态加载的数据你应该找ajax api请求,而不是在网页找,工欲善其事必先利其器,善用 F12。
这种情况比抓取一个代理ip网页,使用cookie但是报错好解决多了==,你完全可以判断当前页面内容然后进行模拟刷新~ 重要的是保持会话。
如果还不行的话,可以加referer再试一试