网站建设

网页正文内容抽取方法, 该算法思路是先需要对Web页面进行分块处理, 处理结果同样利用DOM树原理进行解析, 然后集合阈值计算和正则表达式, 对于处理网页正文准确率较高。

非基于DOM的Web页面提取技术比较著名就是微软亚洲研究院提出的VIPS基于视觉的网页分块算法。该算法从用户的视觉感官体验出发, 根据Web页面的背景色、前景色、元素之间的间距来对Web页面进行视觉划分, 建立相应的分割条和网页分块集, 基于此基础再进行文本信息的抽取, 算法规则十分复杂。目前很多Web页面的视觉特点也很复杂, VIPS算法针对此类页面时准确率和效率较差。因此, 高乐等人提出一种改进的VIPS算法, 算法针对

此外, 还有一些不基于DOM树对网页文本提取的方法, 例如《基于权值优化的网页正文内容提取算法》的通过统计分析Web页面正文内容特点, 得到页面中各个文本内容块属性特征, 并使用粒子群优化算法对特征权值及阈值进行了确定及优化。

发表评论：

提交评论

评论记录：

未查询到任何数据！

回复评论：

×

关闭 提交评论