简体中文(ZH-CN) English(EN) 繁体中文(ZH-TW) 日本語(JA) 한국어(KO) Melayu(MS) Français(FR) Deutsch(DE)
python - scrapy 处理 文章 分页的内容
PHP中文网
PHP中文网 2017-04-18 10:32:48
0
3
396

如一篇文章有2-3页，然后想把这些内容页爬下来，拼接成一页，然后再放入数据库。
文章url如：article_1.html,article_2.html
item有：item['title'],item['content']
而item['content']就是拼接成一页的内容。
大概怎么写呢？

PHP中文网
PHP中文网

认证0级讲师

répondre à tous(3)
大家讲道理
大家讲道理2017-04-18 10:34:48 3 plancher

Trouver l'URL de l'interface de pagination

Comme +0
Ajouter une réponse
大家讲道理
大家讲道理2017-04-18 10:34:48 2 plancher

Trouvez le lien vers la page suivante et ajoutez-le à la liste des URL explorées

Comme +0
Ajouter une réponse
洪涛
洪涛2017-04-18 10:34:48 1 plancher

Vous pouvez écrire des règles régulières dans les règles pour analyser automatiquement les URL correspondantes

Comme +0
Ajouter une réponse
Sujets populaires
Plus>
Articles populaires
Tutoriels populaires
Plus>
Tutoriels associés
Recommandations populaires
Derniers cours
Derniers téléchargements
Plus>
effets Web
Code source du site Web
Matériel du site Web
Modèle frontal
À propos de nous Clause de non-responsabilité Sitemap
Site Web PHP chinois：Formation PHP en ligne sur le bien-être public，Aidez les apprenants PHP à grandir rapidement！