在抓取360问答的时候,前面抓取得好好的,但是每次抓到大约40条的时候,就打不开了,所有的问题都打不开了,直接全部跳转到首页!我抓包了看了下,是被302了,请问下,除了换ip,还有什么比较好的方法来突破这种限制?
我设置了时间间隔,现在也不行了
ringa_lee
tidur(10)Jeda, jangan naik terlalu cepat~
Tingkat 1 betul, tetapkan kelewatan merangkak
Penyelesaian mudah adalah dengan menggunakan ejen.
Menetapkan selang masa biasanya tidak begitu berguna Dalam kes merangkak berskala besar, jika IP dilawati ratusan kali, kod pengesahan biasanya akan diubah hala.
![[Web front-end] Permulaan pantas Node.js](https://img.php.cn/upload/course/000/000/067/662b5d34ba7c0227.png)
tidur(10)
Jeda, jangan naik terlalu cepat~
Tingkat 1 betul, tetapkan kelewatan merangkak
Penyelesaian mudah adalah dengan menggunakan ejen.
Menetapkan selang masa biasanya tidak begitu berguna Dalam kes merangkak berskala besar, jika IP dilawati ratusan kali, kod pengesahan biasanya akan diubah hala.