数据挖掘,应用
第29卷..20lO年6月
情报杂志
FINTELLIGENCEJOURNALO
Vd.29
Jun.2010
信息技术
数据挖掘及其在网络信息检索中的应用
董
慧
唐
敏
(武汉大学信息管理学院武汉430072)
●
摘要网络信息检索经过近几年的发展,在一定程度上满足了人们查找知识的需要,但是在检全率和检准率上还是不尽如人意。将数据挖掘技术运用到信息检索中,可使未来的网络信息检索更加精准、个性和智能化。介绍了数据挖掘的概念争方法,并分另ll从内容挖掘、结构挖掘、使用挖掘三个方面对网络数据挖掘进行了阐述,并主要从搜索引擎的角度探讨了数据挖掘在网络信息检索中的应用。分析了数据挖掘与信息过滤和可视化技术的结合,最后对网络信息检索未来发展进行了展望。关键词数据挖掘中图分类号G354
网络信息检索信息过滤
文献标识码A
可视化
文章编号1002—1965f2010}0153—04
随着计算机技术的发展,网络已成为人们传递信息的重要渠道。人们在享受它的方便快捷的同时,也为大量杂乱无章的信息所苦恼,用户耍在浩瀚的信息资源中找出自己需要的内容,无异于大海捞针。网络信息检索经过近几年的发展,在一定程度上解决了这一问题,满足了人们检索信息的需要,但在检全率和检准率上还是不尽如人意。将数据挖掘技术运用到信息检索中,通过对信息语义语用的挖掘和用户行为模式的分析,能提高网络信息检索的效率,弥补现有检索工具的不足。
的趋势等动态信息却束手无策。而数据挖掘技术能增强信
息检索系统的能力,揭示数据中隐含的知识,并能预测数据未来的走势,是比信息检索层次更高的技术。
2网络数据挖掘
网络数据挖掘是将数据挖掘技术应用于网络中,从Web文档和web活动中抽取出用户感兴趣的潜在的有用模式和信息的过程,也称为Web挖掘。网络数据不仅庞大,且页面十分复杂,web上的大量文档无法按某一排列次序加以组织,是不规则的数据。日益更新的信息也很难让人捕捉。这
1数据挖掘概述
对于数据挖掘的定义有多种说法,但是大多数学者比较认同以下说法,即数据挖掘是从大量的、不完全的、有噪声的、模糊的、随机的实际应用数据中提取隐含在其中的、人们事先不知道的但又是潜在有用的信息和知识的过程。与数据挖掘相关的术语有数据融合、数据分析、决策支持和知识发现等。经过几年的发展,数据挖掘领域也提出了许多挖掘方法,如关联分析、决策树和统计学方法等。
数据挖掘和信息检索都是一种信息发现任务。但是它们在很多方面都有所不同。信息检索领域的任务是使用数据库管理系统查找个别的记录,或通过因特网的搜索引擎查找特定的web页面…。而数据挖掘则是知识发现不可缺少的一部分,是将未加工的数据转换为有用信息的过程。信息检索主要依赖传统的计算机科学技术和数据的明显特征来创建索引结构,从而有效地组织和检索信息,它能很好地处理已经发生或存在的静态信息,但是对数据间关系及其未来
收稿日期:2010一02一05
些特性使Web挖掘的任务与传统数据挖掘相比更复杂多样。按照处理对象的不同,web挖掘的任务一般可分为三类:网络内容挖掘、网络结构挖掘、网络使用挖掘。2.1网络内容挖掘
网络内容挖掘即从网络的内容、数
据、文档中发现有用的信息的过程【2】2。web资源分布范围很广且类型众多。有些信息可直接从网上得到,如网页中的文字、图形、声音、好友网页的链接及目录结构等。但是还有一些网络信息是不易得到的。如用ASP、JSP或PHP生成的动态网页;在RobotExelmiofl框架协议下被拒绝搜索访问的网站;由用户的提问而动态生成的结果;存在于商业数据库管理系统中的数据等。这些结构化的或用html标记的半结构化数据都是内容挖掘所需要处理的对象。因而,网络内容挖掘常从以下两个方面进行:
2.1.1网络页面内容挖掘。网络页面内容挖掘常采用的技术是文本挖掘和多媒体挖掘。文本挖掘是直接挖掘Web文档内容或指从文档中抽取关键信息,用简洁的形式对
作者简介:唐敏(1987一)。女,硕士,研究方向为信息组织与检索;董慧(1941一),男,教授,博士生导师。研究方向为计算机信息系统工程、数字图书馆技术、电子商务技术教学和研究。
万方数据
数据挖掘及其在网络信息检索中的应用_专业资料。网络信息检索经过近几年的发展,在一定程度上满足了人们查找知识的需要,但是在检全率和检准率上还是不尽如人意。...
数据挖掘在网络信息检索中的应用 暂无评价
数据挖掘技术在互联网金融信息检索中的应用_专业资料。随着互联网应用的普及化,互联网上金融信息量急剧增加,越来越多的用户通过搜索引擎,从互联网的海量信息中获取...
信息检索与数据挖掘_互联网_IT/计算机_专业资料。...? 全世界各种数字化应用:数字图书馆、数字博物 馆...? 多媒体检索中的图像、语音、视频检索更是需要数 ...
关键词:文本挖掘数据挖掘文本挖掘论文文本挖掘资料数据挖掘论文 1/2 相关文档... 关联规则挖掘在网 络信息检索中的 应用Aplcto fMiigAsoito lsi tr nomainRerea ...
Web文本数据挖掘关键技术及其在网络检索中的应用_专业资料。Web挖掘采用数据挖掘信息处理技术,从Web信息资源中发掘用户所需信息。本文在分析Web文本信息特征的基础上...
网络检索中的数据挖掘技术理论与应用_专业资料。网络数据挖掘采用数据挖掘信息处理技术,从网络信息资源中发掘用户所需信息。文章在分析互联网文本信息特征的基础上,...
网络爬虫在Web信息搜索与数据挖掘中应用_工学_高等教育_教育专区。网络爬虫在Web信息搜索与数据挖掘中应用,一篇关web数据挖掘的文章...
关联规则挖掘在网 络信息检索中的 应用Aplcto fMiigAsoito lsi tr nomainRerea ytm piaino nn scainRue nNewokIfrto tivlSse 熊 回香 许颖颖 (中师范大 学信 息管 ...
热门文档