node.js - 怎么用nodejs分析出爬的不同网页那部分是文章标题和内容主体,有相关资料吗
大家讲道理
大家讲道理 2017-04-17 11:30:04
0
3
635

怎么用nodejs分析出爬的不同网页那部分是文章标题和内容而不是页面的其他元素,有相关资料吗

大家讲道理
大家讲道理

光阴似箭催人老,日月如移越少年。

membalas semua(3)
PHPzhong

如果是特定的网站,可以根据其页面做些匹配。
如果想兼容所有的网站就很难了。只根据标签名识别肯定不准。应该有神经网络,机器学习之类的算法。

伊谢尔伦

可以使用cheerio模块比较方便。
例子:http://www.focalhot.com/blog/62.html

巴扎黑

内容主题可以尝试用行块密度
标题只能找h1-h3这种标签了

Muat turun terkini
Lagi>
kesan web
Kod sumber laman web
Bahan laman web
Templat hujung hadapan