java - 请教爬虫设计方面的问题
阿神
阿神 2017-04-18 10:55:25
0
0
424

业务在搞个爬虫玩玩。

有个阻塞队列里放了请求对象, Scheduler 模块会从阻塞队列里拿请求对象

问题是怎么优雅的发给 Downloader 模块,除了再使用个队列。还有其他什么方式?

开发使用的是 java ,下载模块是多线程的。

下载完后又怎么优雅的交给解析模块?

阿神
阿神

闭关修行中......

Antworte allen(0)
Beliebte Tutorials
Mehr>
Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage
Über uns Haftungsausschluss Sitemap
Chinesische PHP-Website:Online-PHP-Schulung für das Gemeinwohl,Helfen Sie PHP-Lernenden, sich schnell weiterzuentwickeln!