java - 知乎爬虫问题
PHPz
PHPz 2017-04-18 09:28:31
0
3
559

爬虫新手求助。

知乎关注的人的列表,是一个下拉加载方式的分页。

不明白怎么获取下一页的。用post和get带上右下脚的FormData请求,都是403。
“next”是什么方法

PHPz
PHPz

学习是最好的投资!

Antworte allen(3)
伊谢尔伦

next不是什么方法,next只是Form Data中method字段的值。如果请求返回403,看看是否需要带上User-Agent、Referer或Cookie信息

迷茫

你可以多下拉几次抓包看看,在我看来next就是获取下一页的方法,offset是当前已经加载的数目

小葫芦

可以参考这个知乎采集爬虫
爬虫链接:http://www.shenjianshou.cn/in...

Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage