java - 請教爬蟲設計上的問題
阿神
阿神 2017-04-18 10:55:25
0
0
469

業務在搞個爬蟲玩玩。

有個阻塞隊列裏放了請求對象, Scheduler 模塊會從阻塞隊列裏拿請求對象

問題是怎麼優雅的發給 Downloader 模塊,除了再使用個隊列。還有其他什麼方式?

開發使用的是 java ,下載模塊是多線程的。

下載完後又怎麼優雅的交給解析模塊?

阿神
阿神

闭关修行中......

全部回覆(0)
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板