python - scrapy는 실제로 항목을 입력하는 것보다 더 많은 페이지를 크롤링합니까?
PHP中文网
PHP中文网 2017-05-18 10:47:40
0
1
613

으아악

스크래피를 사용하여 크롤링할 때 실제로 항목을 입력하는 것보다 더 많은 페이지를 방문하는 이유는 무엇입니까?
오랜 시간 동안 크롤링을 수행하면 항목에 데이터가 많지 않습니다.
해결 방법이 있습니까?

PHP中文网
PHP中文网

认证高级PHP讲师

모든 응답(1)
左手右手慢动作

리디렉션됨 보시다시피 리디렉션을 위해서는 두 페이지를 요청해야 합니다. 또한 페이지 구문 분석 오류가 있는지 확인하세요.

최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿
회사 소개 부인 성명 Sitemap
PHP 중국어 웹사이트:공공복지 온라인 PHP 교육,PHP 학습자의 빠른 성장을 도와주세요!