python - scrapy는 데이터를 크롤링할 수 없으며 txt 파일을 생성할 수 없습니다.

Question

(www.sf.gg)는 중국 최고의 개발자 기술 커뮤니티입니다. 프로그래밍 매니아들을 위한 순수하고 수준 높은 기술 교류 플랫폼을 제공하고, 개발자들과 함께 배우고 소통하며 성장하며 개발자들을 위한 시대를 만들어 나가고자 합니다!

phpcn_u1582 · Answer

xpath 파싱 경로에 문제가 있습니다. 모두 감사합니다

天蓬老师 · Answer

글쓰기 모드에 문제가 있는 것 같습니다. ab를 사용해 보세요.

大家讲道理 · Answer

Linux에서 실행되나요? 권한 문제가 있나요?

代言 · Answer

로그 출력을 보면 robots.txt를 만났을 때 scrapy가 일찍 종료된 것 같습니다. 설정에서 ROBOTSTXT_OBEY를 ROBOTSTXT_OBEY = False로 변경해 보세요. 그래도 작동하지 않으면 중지하고 디버그하세요