java - 爬蟲爬取圖片問題?
天蓬老师
天蓬老师 2017-06-23 09:12:30
0
1
807

剛剛修改了下方 POM,大家可以重新下載原始碼

這是我寫的爬蟲的項目地址
項目不報錯,但是問題是下載圖片到本地後經常性的是圖片不完整,如下:

這是下載圖片的核心程式碼,如下:

@Override
    public void run() {
        Response res = null;
        try {
            res = Jsoup.connect(src).ignoreContentType(true).timeout(30000).execute();
            byte[] bytes = res.bodyAsBytes();
            File file = new File(path + name);
            if (!file.exists()) {
                RandomAccessFile raf = new RandomAccessFile(file, "rw");
                raf.write(bytes);
                raf.close();
            }
        } catch (IOException e1) {
            e1.printStackTrace();
        }
    }

經過資料查詢,感覺是範圍請求 Range的問題或是自己沒發現的問題?希望大家給看下,謝謝

天蓬老师
天蓬老师

欢迎选择我的课程,让我们一起见证您的进步~~

全部回覆(1)
typecho
  1. 感覺是回應資料沒取得完整,你debug一下看看回應的實際資料大小和你儲存的資料大小是否有出入。

  2. 又或因為還有一部分資料還在緩衝區中,沒來得及寫到文件,此時進程退出,導致資料不完整,關閉文件流之前執行一下flush操作。

熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板
關於我們 免責聲明 Sitemap
PHP中文網:公益線上PHP培訓,幫助PHP學習者快速成長!