数据挖掘
第24卷第5期2003年9月
江苏大学学报(自然科学版)
JournalofJiangsuUniversity(NaturalScienceEdition)
Vol.24No.5Sep.2003
文本挖掘技术综述
梅 馨,邢桂芬
(江苏大学计算机科学与通信工程学院,江苏镇江212013)
[摘 要]文本挖掘,是一个对具有丰富语义的文本进行分析从而理解其所包含的内容和意义的过
程1对其进行深入的研究势必将极大地提高人们从海量的文本数据中提取信息的能力,具有很高的商业价值1首先介绍了文本数据挖掘的研究情况,然后给出了文本挖掘的框架,对文本挖掘中信
息的抽取技术以及文本挖掘中使用的相关技术、评估方法等都作了详细的介绍,最后指出了文本挖掘在知识发现中的重要意义,展望了文本挖掘在信息技术中的发展前景1[关键词]文本挖掘;信息提取;信息检索;数据挖掘;知识发现
[中图分类号]TP311 [文献标识码]A [文章编号]1671-(2003)05- 文本挖掘或者文档挖掘是一个从非结构化文本,1但是文本挖掘也是一项非常困难的工作,因为它必须处理那些本来就模糊而且非结构化的文本数据,所以它是一个多学科混杂的领域,涵盖了信息技术、文本分析、模式识别、统计学、数据可视化、数据库技术、机器学习以及数据挖掘等技术1
1这个小组成功地运用数据(KDD)1他们曾经发表了试图将数据挖掘技术直接应用于经过预处理的文本信息
[3]
的论文1他们将预处理过程看作是一个至关重要的环节,从而有效地改变了数据挖掘依赖于文本最初是如何被处理的这一法则1沿着知识发现这条
[12]
路,Feldman考虑使用信息抽取中最简单的形式来获取知识:通过为一篇文本建立一个有意义的概念集合来看清概念的层次结构,从而在文本和概念之间挖掘他们的关系1这种方法主要应用领域就是
[4]
文本分类1系统DocumentExplorer是目前比较先进的文本挖掘系统,该系统构建于以上所提到的KDT基础之上1Feldman的DocumentExplorer则用文本集合来创建数据库,然后基于概念图的数据挖掘技术1这套系统可以使用不同的模板来创建数据库以适应各种类型的文本集合,包括Web文本1
[5]
从网上抽取信息 Etzioni着眼于将数据挖掘技术应用于互联网上大量的超文本资源1这大概是第一篇将数据挖掘技术应用于万维网上信息资源的文章,并将该技术命名Web挖掘1近期Soderlan在从互联网上抽取信息的方面作了许多工作,利用自然语言处理技术从不同的html资源来解释天气预报1应该说万维网上的数据已经成为文本挖掘的重要研究方向1
[6]
1 文本挖掘技术的演化
数据挖掘技术本身就是当前数据技术发展的新领域,文本挖掘则发展历史更短1传统的信息检索技术对于海量数据的处理并不尽如人意,文本挖掘便日益重要起来,可见文本挖掘技术是从信息抽取以及相关技术领域中慢慢演化而成的1
早先的信息抽取 早先的信息抽取的例子是
[1]
FRUMP项目,由GeraldDeJong于1982年设计1这个系统包含了一系列脚本,这些脚本能够扫描新闻专线网络,处理新的存档,以期提供对于主题的事件描述1
文本挖掘 一篇重要的关于文本挖掘的论[2]
文1讲述在赫尔辛基大学进行的研究试验1因为
[收稿日期]2003-04-02
[基金项目]教育部重点科技基金资助项目(1633000004)[作者简介]梅 馨(1978-),女,江苏镇江人,硕士生,主要从事数据库技术、数据挖掘的研究1
文本挖掘技术综述 梅馨 ,邢桂芬 ( 苏大学 计算 机科 学与 通信 1程 学院 ,苏镇江221)江-江103 【摘 要 〕文本挖掘,一个对具有丰富语义的 文本 进行 ...
技术 综述 贾焰, 王永 恒, 杨树 强 ( 防科技 大学计 算机 学院 ,湖南长沙407)国,103 (i0@pbi.Sh.a a63ulC.nc)cc 摘 要: 文本挖掘技术是从海量文本...
本文在对常识本体和 领域本 体进行 介绍的基 础上, 综述 了目 前基于本体论的文本 挖掘的 研究现 状, 并 对该技 术的发 展前 景进行了展望。 的规范...
文本挖掘综述 杨霞黄陈英 f山师范学院 四川 乐山 640)乐104 【摘 要】本...本挖掘分析技术有:本结构分析、本摘要、本分 文文文 数据挖掘(tMiig,是从大量...
Web文本挖掘综述 介绍了Web挖掘技术,接着重点对Web文本挖掘的关键技术作了详细阐述。介绍了Web挖掘技术,接着重点对Web文本挖掘的关键技术作了详细阐述。隐藏>> ...
2008 年 10 月 电 脑 学 习 第 5 期 Web 文本挖掘综述赵晓静* 摘要 : 介绍了 Web 挖掘技术, 接着重点对 Web 文本挖掘的关键技术作了详细阐述. 文本挖掘...
科技信息 0IT论坛o SCIENCE&TECHNOLOGYINFORMATION 2009年第33期 文本挖掘综述(...常见的文本挖掘分析技术有:文本结构分析、文本摘要、文本分 类、文本聚类、文本...
文本挖掘综述课件_计算机软件及应用_IT/计算机_专业资料。文本挖掘,数据挖掘...数据为主, 发现知识 因此, 因此,数据挖掘的技术不适用于文本挖 或至少需要预...
例如, 对产品 的各种评价 出现在 万方数据 3期 姚天防等: 文本意见挖掘综述 语言分析层面 相关语言技术 图1 意见挖掘所涉语言分析层面、 相关语言技术和部分...
基于文本挖掘的专利技术主题分析研究综述_电力/水利_工程科技_专业资料。第3 2卷第l 2期 201 3年l 2月 情 报 杂 志 JOURNAL OF INTELUGENCE Vo1.32 No....
热门文档