Quelles bibliothèques doivent être installées pour le robot d'exploration Python

Les robots d'exploration du Web (également appelés araignées Web, robots Web et plus communément appelés chasseurs de Web dans la communauté FOAF) sont des programmes ou des scripts qui explorent automatiquement les informations du World Wide Web selon certaines règles.

1. L'environnement qui doit être installé est principalement l'environnement Python et l'environnement de base de données.

mongodb

redis

mysql

2. Certaines bibliothèques couramment utilisées

urillb

re

requests

selenium

phantomjs

lxml

beautifulsoup4

pyquery

pymysql

pymongo

redis

flask

django

jupyter

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!