python - scrapy 处理 文章 分页的内容
PHP中文网
PHP中文网 2017-04-18 10:32:48
0
3
436

如一篇文章有2-3页,然后想把这些内容页爬下来,拼接成一页,然后再放入数据库。
文章url如:article_1.html,article_2.html
item有:item['title'],item['content']
item['content']就是拼接成一页的内容。
大概怎么写呢?

PHP中文网
PHP中文网

认证0级讲师

모든 응답(3)
大家讲道理

페이징 인터페이스 URL 찾기

大家讲道理

다음 페이지의 링크를 찾아 크롤링된 URL 목록에 추가하세요

洪涛

규칙에 일반 규칙을 작성하여 일치하는 URL을 자동으로 검색할 수 있습니다

최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿