python - 抓取天猫详情页里面的月销量,反爬非常厉害
天蓬老师
天蓬老师 2017-04-18 10:29:07
0
4
914

现在需要抓取天猫详情页里面的月销量
如https://detail.tmall.com/item...

已分析得到是异步js返回的数据,接口如下
https://mdskip.taobao.com/cor...


这个地址访问几次就需要登录,登录之后多访问几次就需要输入验证码
用代理换IP也一样
各位大神有啥好办法

天蓬老师
天蓬老师

欢迎选择我的课程,让我们一起见证您的进步~~

모든 응답(4)
左手右手慢动作

로그인이 안되면 바로 상담원 변경

프록시 전환 시 세션을 유지하지 마세요

巴扎黑

입구를 얻으려면 모바일 단말기 입구를 선택할 수 있습니다. 예: 입구


데이터가 페이지에 직접 나와 있어 데이터, 키워드 "sellCount"를 얻는 것이 매우 쉽습니다.

阿神

브라우저를 몇 번 방문하더라도 로그인하라는 메시지가 표시되지 않습니다. 코드를 사용하여 브라우저 플러그인을 조정하여 htmlunit에 액세스하세요

Postman을 50번 사용한 후에도 여전히 로그인이 허용되지 않거나 인증 코드가 표시되지 않습니다. 다음 게시물에서는 Taobao의 크롤링 방지 기능이 여전히 평균 수준입니다.
https://www.endclothing.com의 크롤링 방지 방법은 정말 끔찍합니다

Peter_Zhu

혹시 이런 경험 있으신 분 계신가요?

최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿