網頁爬蟲 - python爬蟲，需要爬取的資料沒在網頁原始碼中，怎麼處理？

Question

我想抓取直播吧賽事的比分：直播吧鏈接，可是我用Scrapy只能抓取到日期，主客隊等。我的問題是：比數是不是透過Script載入出來的？是不是在這個腳本中bf4.js中？這種Request Method:GET的狀況如何準確取得出比分如下圖？
透過開發者工具檢視出的網頁原始碼如下：
<li label="足球,中甲,武漢卓爾" id="saishi93287" data-time="2017-06- 24 15:00">15:00 <b>中甲第15輪</b> 雲南麗江<img src="//duihui.qiumibao.com/zuqiu/yunnanlijiang.png" > < span> - </span> <img src="//duihui.qiumibao.com/zuqiu/wuhanzhuoer.png" > 武漢卓爾<a href="/zhibo/zuqiu/2017/0624ywunlijihuvs target="_blank">武漢文體廣州競賽PPTV</a> <a href="http://wenzi.zhibo8.cc/zhibo/zuqiu/2017/0624yunnanlijiangvswuhanzhuoer.htm" target="_blank"> </a> <a href="//www.zhibo8.cc/shouji.htm" target="_blank">手機看直播</a> <a href="http://www. 188bifen.com/" target="_blank">比分</a> <a href="http://ogzq2.wanjiashe.com/game.php?sid=51&zhibo" target="_blank">歐冠足球新服</a> </li>

即<span> - </span>中比數沒顯示，如何才能抓取渲染完成出來的比數網頁呢？

#

Answer 1

雷雷

Answer 2

那就使用Selenium 來獲取吧，

連結描述