python - 一般公司做爬虫采集的话常用什么语言
阿神
阿神 2017-04-17 17:48:02
0
30
1797

一般公司做爬虫采集的话常用什么语言 在京东搜点书全是有关java的

阿神
阿神

闭关修行中......

répondre à tous(30)
洪涛

python 1

PHPzhong

Recommander un article
Partage de la technologie des robots d'exploration de blogs

洪涛

J'ai fait une saisie de billets à 0 heures pour le chemin de fer de Taiwan. Au début, cela a également été fait avec PHP. Plus tard, j'ai découvert qu'il y avait beaucoup de billets à récupérer à 0 heures tous les jours. être exécuté simultanément. J'ai utilisé nodejs pour appeler php et résolu le problème de concurrence, bien que grossier, fonctionne. . . Auparavant, il fallait 5 minutes pour compléter 20 tickets, mais désormais, il ne faut plus que 30 secondes pour compléter 20 tickets. . .

大家讲道理

J'ai écrit de nombreux robots d'exploration en utilisant PHP et je suis très doué pour traiter les données, mais PHP lui-même n'est pas adapté à des choses comme les robots d'exploration. Peut-être que Python vaut la peine d'être essayé, je ne l'ai pas essayé

Peter_Zhu

Pourquoi tant de gens recommandent-ils node.js ? Se pourrait-il qu’il n’y ait pas de robots d’exploration alors qu’il n’y avait pas de node.js il y a quelques années ?

伊谢尔伦

Python

Un fort soutien

小葫芦

Le plus simple est javascript. Il est entièrement scripté pour écrire un robot. Il est recommandé d'utiliser le framework de robot Archer Cloud.

PHPzhong

Les robots d'exploration peuvent également être écrits en JavaScript et écrits et exécutés dans le cloud. Adresse du code source :
https://github.com/ShenJianSh...

.
Peter_Zhu

J'ai vu un robot écrit en langage Go Selon l'auteur, l'efficacité est super élevée

PHPzhong

Nodejs, Java, C#, VB, PHP, Python, Ruby, Perl

Derniers téléchargements
Plus>
effets Web
Code source du site Web
Matériel du site Web
Modèle frontal