文档下载 文档下载导航
设为首页 | 加入收藏
搜索 请输入内容:  
 导航当前位置: 文档下载 > 所有分类 > 工程科技 > 信息与通信 > Web数据挖掘综述
侵权投诉

Web数据挖掘综述

如何在Web这个全球最大的数据集合中发现有用的信息成为了数据挖掘研究的热点。文章首先分析了Web数据挖掘所面临的问题,然后概述了Web数据挖掘以及它的几个分类,最后简单阐述了Web挖掘的应用前景以厦在Web2.0到来之时,Web数据挖掘所面临的机遇与挑战。

维普资讯 doc.guandang.net

We数据挖掘综述 b 麦晓冬’余海冰:

i技术 T

(. 1广西责港市广东轻工职业技术学院 5 3 0 0; 1 0

2广州市海珠区广州大道南逸景翠固倚翠轩 b 3 5 3 0 .座 c 1 0) 0

摘要:如何在 We b这个全球最大的数据集合中发现有用的信息成为了数据挖掘研究的热点。文章首先分析了We b数据挖掘所面临的问题,然后概述了 We b数据挖掘以及它的几个分类,最后简单阐述了 W e b挖掘的应用前景以厦在 We 2 0 b .到来之时,W e b数据挖掘 所面临的机遇与挑战。 关键词: b数据挖掘内容挖掘结构挖掘使用挖掘用户性质挖掘 We 2 0 We b .

中圈分类号:TP3 9

文献标识码:A

文章编号:17一 5 42 0) la一 0 4 0 6 3 O 3 (0 7O () 0 1- 2

引盲 目前, b已成为一个巨大的、分布广 We泛的和垒球性的信息服务中心,它涉及新闻、 金融管理、教育、广告娱乐、电子商务和许多其它信息服务。G o l、B iu o ge a等的搜索引 d擎的出现,正是满足了人们从这样一个信息服务中心中寻找有用的知识的需要。虽然当前的搜索技术能在~定程度上帮助我们从 We b中获取有用的知识,但是精度不够,不能满足实际需要,更谈不上挖掘出蕴含在 We数据背后的知识。如何从 We上海量的 b b数据中找到真正有用的信息成为人们关注的焦点,W e b数据挖掘技术也正是伴随着这种需求从研究走向应用。

的形式 -模式发现是选择合适的算法来处理经预处理的数据,并最终发现用户的访问数据 模式分析是对发现的模式进行分析评估, 必要时需要返回前面处理中的某些步骤反复提取 -最后的信息将通过可视化、联机分析等技术处理,使之能以易于理解和接受的方式

模型具体描述特定的数据, we而 b上的数据非常复杂,没有特定的模型描述。每一站点的数据都各自独立设计,并且数据本身具有自 述性和动态可变性,因而 We上的数据具有 b定的结构性,但因自述层次的存在,从而是种非完垒结构化的数据,即半结构化数据。 显现出来 o] 1 1 2 3解决半结构化的数据源问题 .本文主要论述 W e b数据挖掘以及 We 2 b. We b数据挖掘技术首先要

解决半结构化 0的出现给 We b数据挖掘带来的影响。 数据源模型及其查询和集成问题,解决这个 一

一

2We数据挖掘面临的问题 b

问题必须要有模型清晰地描述 W e b上的数据,查询一个半结构化的数据模型是关键所还需要一种自动地从由于 We b上信息的特点,对 W e b进行在。除定义这个模型外,

有效的信息挖掘,发现有用的知识信息具有现在数据中抽取半结构化模型的技术。面向 We数据挖掘必须以半结构化模型和半结 b的很大的挑战,同时也面临很多的问题。 构化数据模型抽取技术为前提。1[ 2 2 1异构数据库环境 .

1We数据挖掘概述 b We b数据挖掘是从数据挖掘发展而来, 是数据挖掘技术在 We b技术中的应用。We b数据挖掘综合运用了统计学、计算机网络、数据库与数据仓库、可视化等众多领域的技术。 通过从 We b上的资源中抽取信息来提高 we b技术的利用效率,也就是从 W e b文档结构和 使用的集合中发现和分析潜在的、有用的模 一

从数据库的研究角度出发,We b中的信 息可以看作巨大的数据库每一个站点就是个数据源。而且站点之间的信息和组织不同,因而构成的是巨大的异构数据库环境。如果要利用这些数据进行挖掘,必须研究站点之间异构数据的集成问题。只有集成这些站点的数据,用户提供统一的视图,为才有可能从巨大的数据资源中获取所需的内容。还要解决 W e b上的数据查询问题,因为如果所需的数据不能很有效得到,则分析、集成并处理这些数据就无从谈起。 2 2半结构化的数据结构 半结构化是 we b上数据的最大特点。传统数据库都有一定的数据模型,可以根据该

3we b数据挖掘的分类 般来说,众多We b数据挖掘相关文献上将we数据挖掘分为三类: b b We内容挖掘 We b结构挖掘 We b使用挖掘。但是随着 We 2 0 b .的出现,We数据挖掘多出了一个 b分类—— W e b用户性质挖掘。 We b数据挖 一

掘的分类如图 2所示。

式或信息。 般的,We b数据挖掘的原理可用图 l 所示的过程表示目标数据集就是根据实际需要所提取的 We b数据,预处理就是从目标数据集中清除掉明显错误的数据和冗余的数据,井进一步将

数据转换为适用于数据挖掘 一

3 1 b内容挖掘 We We b内容挖掘主要包括文本挖掘和多媒体挖掘两类,其对象包括文本、图像、音频、视频、多媒体和其他各种类型的数据。 这些数据一般由非结构化的数据 (如文本) 半结构化的数据( HT如 ML文档)和结构化的数据(如表格)构成。对非结构化文本进行, W e b挖掘,称为文本数据挖掘或文本挖掘,是 W b挖掘中比较重要的技术领域。 e We b文本挖掘的一般处理过程如图 3所示。 目前,关于 We b内容挖掘的研究大体以 We b文本内容挖掘为主。We b内容挖掘一般从资源查找和数据库两个不同的方面进行研 究。

图 1 e数据挖掘原理 W b

( )从资源查找的方面来看,W e内 1 b容挖掘的任务是从用户的角度出发,着重提高信息质量和帮助用户过滤信息。主要是对非结构化文档和半结构化文档的挖掘 l ( )从数据库的观点进行 We 2 b内容挖掘主要是试图建立 We点的数据模型并加 b站以集成,以支持复杂查询,而不只是简单的 基于关键词的搜索。这要通过找到 We文档的 b模式、建立 W e知识库来实现。 b

对文本数据进行挖掘的文档分类和模型质量评价方法与传统的数据挖掘方法相类似,分类算法主要应用朴素贝叶斯 ( a V N ie B ysCas ̄r。对模型的质量评价主要有 a e[ i ) sf 图 2 We b数据挖掘的分类

1 4

科技咨询导报 S in e e d T c n lg n ut g H r l ce c n e h oo y Co s ln e ad i

Web数据挖掘综述

第1页

你可能喜欢

  • 数据清洗
  • 数据格式
  • 数据挖掘研究
  • 数据挖掘论文
  • 数据挖掘应用
  • 数据挖掘十大经典算法

热门文档

相关文档

  • Web数据挖掘综述

    文章编号 : 1004 - 4280 ( 2009 ) 03 - 0025 - 04 W eb数据挖掘综述陈修宽 ,董祥军 ,石芙芙 (山东轻工业学院 信息科学与技术学院山东 济南 250353 ) ...

  • 【论文】Web数据挖掘综述

    Web数据挖掘综述_专业资料。如何在Web这个全球最大的数据集合中发现有用的信息成为了数据挖掘研究的热点.文章首先分析了Web数据挖掘所面临的问题,然后概述了Web数据...

  • Web数据挖掘综述

    Web数据挖掘综述_互联网_IT/计算机_专业资料。科技资讯 2007 NO.04SCIENCE&TECHNOLOGYINFORMATION 高新技术 Web 数据挖掘综述麦晓冬 余海冰 (广东轻工职业技术学院 ...

  • Web数据挖掘综述

    ’ 口 市 We 数据挖 掘综述 b赵培鸿( 华北电 力大学 控制与计算机工程学院, 126 北京 00 2)摘 要:着Itre技术 的快速普及 和 迅猛 发展,nent随nentItre~...

  • Web数据挖掘研究综述

    Web数据挖掘旨在发现隐藏在Web数据中潜在的有用知识、提供决策支持,已经成为数据挖掘领域中新兴的研究热点。本文综述了基于Web的数据挖掘概念、流程、主要技术及分类,...

  • 互联网数据挖掘综述—Web使用记录的挖掘

    互联网数据挖掘综述—Web 使用记录的挖掘 2008-10-16 09:51:09 分类: データウェアハウ 标签: 字号大中小 订阅 本文通过对互联网上数据挖掘的简单...

  • Web数据挖掘研究综述

    本文综述了基于 Web 的数据挖掘概念、 流程、 主要技术及分类, 分析了 Web数据挖掘的 热点研究方向。 关键词:数据挖掘;Web 挖掘 中图分类号:TP393.09 文献...

  • 【论文】Web数据挖掘技术综述

    Web数据挖掘技术综述_专业资料。Web数据挖掘作为数据挖掘技术和Internet应用研究相结合的研究领域,涉及机器学习、数理统计、数据库、神经网络、模式识别、粗糙集、模糊...

  • 【论文】Web数据挖掘技术综述

    Web数据挖掘技术综述_互联网_IT/计算机_专业资料 暂无评价

站点地图 | 文档上传 | 侵权投诉 | 手机版
本站所有资源均来自互联网,本站只负责收集和整理,均不承担任何法律责任,如有侵权等其它行为请联系我们.
文档下载 Copyright 2013 doc.guandang.net All Rights Reserved.  -  email