python urllib2 如何优化下载速度?
PHPz
PHPz 2017-04-17 18:00:49
0
3
493

用 urllib2 下载一个网络文件,速度不是很快, 50MB带宽,只能用到800KB左右,如何下载第三方的文件进行一些提速的优化操作呢?

PHPz
PHPz

学习是最好的投资!

모든 응답(3)
Ty80

$brew 업데이트 #routine
$brew install aria2 #Install
$aria2c -i urlist.txt(wget과 유사)

洪涛

urllib2은 느리다고 하는데 urllib3을 사용하는 것이 좋습니다. 설명서에 따르면 단일 파일 다운로드와 urllib2 사이에는 이점이 없습니다.

아니면 파일을 분할하고 여러 세그먼트를 병렬로 다운로드한 다음 다시 병합하시겠습니까?

巴扎黑

한 번에 몇 개의 파일을 다운로드할 수 있나요? 더 많은 경우 멀티스레딩이나 멀티프로세스를 사용할 수 있습니다.

최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿