python urllib2 如何优化下载速度?
PHPz
PHPz 2017-04-17 18:00:49
0
3
490

用 urllib2 下载一个网络文件,速度不是很快, 50MB带宽,只能用到800KB左右,如何下载第三方的文件进行一些提速的优化操作呢?

PHPz
PHPz

学习是最好的投资!

répondre à tous(3)
Ty80

$brew update #routine
$brew install aria2 #Install
$aria2c -i urlist.txt (similaire à wget)

洪涛

On dit que urllib2 est lent et il est recommandé d'utiliser urllib3. Vous pouvez l'essayer D'après la documentation, il n'y a aucun avantage entre le téléchargement d'un seul fichier et urllib2.

Ou diviser le fichier, télécharger plusieurs segments en parallèle, puis les fusionner à nouveau ?

巴扎黑

Combien de fichiers peuvent être téléchargés en même temps ? S'il y en a plus, vous pouvez utiliser le multi-threading ou le multi-processus.

Derniers téléchargements
Plus>
effets Web
Code source du site Web
Matériel du site Web
Modèle frontal