现在需要抓取天猫详情页里面的月销量如https://detail.tmall.com/item...已分析得到是异步js返回的数据,接口如下https://mdskip.taobao.com/cor...
这个地址访问几次就需要登录,登录之后多访问几次就需要输入验证码用代理换IP也一样各位大神有啥好办法
欢迎选择我的课程,让我们一起见证您的进步~~
不登陸,直接換代理
切換代理不要保持會話
取得入口可以選擇移動端入口,例如:入口
資料直接就在頁面上,取得資料就很容易了,關鍵字"sellCount"。
"sellCount"
瀏覽器訪問多少次都不會要求登錄,用代碼調瀏覽器插件訪問htmlunit
用postman刷了50次也不會讓我登入或出現驗證碼,自己下個post試試,淘寶的反爬還是一般般。 https://www.endclothing.com用的反爬才真的見鬼
有沒有大神有過經驗?
不登陸,直接換代理
切換代理不要保持會話
取得入口可以選擇移動端入口,例如:入口
資料直接就在頁面上,取得資料就很容易了,關鍵字
"sellCount"
。瀏覽器訪問多少次都不會要求登錄,用代碼調瀏覽器插件訪問htmlunit
用postman刷了50次也不會讓我登入或出現驗證碼,自己下個post試試,淘寶的反爬還是一般般。
https://www.endclothing.com用的反爬才真的見鬼
有沒有大神有過經驗?