pyspider 有没有类似scrapy的文件图片下载功能 或者有什么插件可以实现这个功能?
大家讲道理
大家讲道理 2016-11-12 11:22:38
0
2
703

pyspider 有没有类似scrapy的文件图片下载功能 或者有什么插件可以实现这个功能?现在正在做scrapy到pyspider的迁移

大家讲道理
大家讲道理

光阴似箭催人老,日月如移越少年。

모든 응답(2)
代言

和网页一样 self.crawl(image_url, callback=self.image_save) 提交抓取,写一个 image_save 将 response.content 写到你需要的地方即可。

如果是大规模图片下载,建议单独写一个下载器。


代言

好像没有这个功能图片用 urllib 的 urlretrieve 实现下载到本地?

최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿