| 网页信息自动抽取技术的研究 |
| |
| 引用本文： | 胡少荣,孟嗣仪,刘云,张彦超,丁飞.网页信息自动抽取技术的研究[J].铁路计算机应用,2010,19(9):37-40. |
| |
| 作者姓名： | 胡少荣 孟嗣仪 刘云 张彦超 丁飞 |
| |
| 作者单位： | 北京交通大学,网络舆论安全研究中心,100044 |
| |
| 基金项目： | 基金项目:国家自然科学基金资助项目，教育部培育基金项目，铁道部科技研究开发计划重点课题，北京市教育委员会学科建设与研究生建设项目资助，通信与信息系统北京市重点实验室资助项目，教育部哲学人文社会科学研究
重大课题 |
| |
| 摘 要： | 在网络舆情分析中,经常要从大量的网页信息中抽取出有用的数据.但一般的网页信息抽取技术都是基于对HTML文档的分析.本文提出网页信息自动抽取的方法,可以滤除网页噪声,快速准确地获取所需要的网页信息.该方法首先将HTML转换为结构化的XML文档,然后结合DOM4J和XPath语言建立网页解析模板库,最后根据模板的抽取规则对网页信息进行抽取.实验证明,该方法具有较高的回召率和查准率.
|
| 关 键 词： | 自动抽取 网页信息 解析模板 XPath 网络舆情 |
| 收稿时间： | 2010-09-15 |
Research on automatic extraction technology of Web information |
| |
| HU Shao-rong,MENG Si-yi,LIU Yun,ZHANG Yan-chao,DING Fei.Research on automatic extraction technology of Web information[J].Railway Computer Application,2010,19(9):37-40. |
| |
| Authors: | HU Shao-rong MENG Si-yi LIU Yun ZHANG Yan-chao DING Fei |
| |
| Institution: | (Center for Security Studies Public Opinion,Beijing Jiaotong University,Beijing 100044,China) |
| |
| Abstract: | In online public opinion analysis,it was needed to extract valuable information from large amount of Web source.But the common way of Web information extraction technology was based on the analysis of HTML documents.This paper proposed automatic extraction technology of Web information,it could eliminate noisy content,extract information efficiently.This method transformed HTML into structured XML model,then built Web pages parser template library by DOM4J and XPath,finally extracted the Web information according to rules of the parser template.Result showed that this method was high with recall and precision with retrieving. |
| |
| Keywords: | XPath |
| 本文献已被 维普 万方数据 等数据库收录！ |
| 点击此处可从《铁路计算机应用》浏览原始摘要信息 |
| 点击此处可从《铁路计算机应用》下载免费的PDF全文 |
|
