互联网已成为全球最大的知识资源库,然而要从互联网上获取有用的知识却非常困难。本文提出一种基于互联网的词汇语义知识库构建框架,分为三个大模块:网页文本自动获取、知识获取和知识应用。该框架能实现在线获取海量网页文本,提取中文组合词并对其进行词标注,获取同义词集和词间语义关系,进而实现语义计算。词汇语义知识库的构建将为大量的知识应用提供基础。
21 00年第 1 0期
刘兴林等:于互联网的词汇语义知识库构建框架研究基 参考文献:
1 I
查询条件再交给第 i方搜索引擎 ( a u G ol ) Bi、 og d e等 进行查询,以期获得更加精准的查询结果。 3 4 2语义相关性排序 ..
[]詹卫东.向自然语言处理的大规模语义知识库研究述 1面要[]/,
C/ q文信息处理若干重要问题 .京:北科学出版 社,0 3 17 11 2 0:0—2 .
在搜索引擎返回的数以万计的网页中,列在前面
『] Fl a/ C Wod e: nEet n ei a bs[ . 2 ebL . rN tA l r i Lx a D t a M] l I n _ co c c l a e Ca rd e, a sc t et MI e s 19 mb ig M s a h ̄ ts: T Pr s,9 9. s
的网页有可能与人们想要获得的内容相关较远,真而 正关心的往往在后面。为改变这种局面 .要对返回需
f] Rc ado tpe D l la V n e ed u i rsnS hnD, o nWiim B, ad r neL . 3 h e a l w c . n Ne: q i n n t cu i g s ma t if r y Mi d t Ac ur g a d sr t r e n i n oma i u n c
结果网页进行语义相关性排序,具体的做法是提取网页的主题词集合,算主题词与查询条件的语义距计 离,这个语义距离对查询结果进行重新排序。按 3 4 3查询结果聚类 ..
t nf m tx[/ Poednso e 1t It nt n l i o et C]/ r eig ft 7h n rao a o r c h e i C n e e c n C mp tt n lL n u s c . 9 8: 0 8 1 0 . o fr n e o o u a i a i g it s 1 9 1 9— 1 2 o i
[]董振东,强.网[ B O . t:/ w . eng . 4董知 D/ L] ht/ w w ke ae p t m, 0 08. o 201 4- 0-
搜索引擎返回的大部分网页内容是重复或类似的,时可以对查询返回的结果进行聚类处理,掉这去多余的重复或相似的网页。具体的做法是提取网页的主题词集合,以这个主题词作为网页的特征向量,
[]余蕾, 5曹存根.基于 We b语料的概念获取系统的研究与 实现[]计算机科学,0 7 3 ( ) 1115 15 J. 2 0,4 2:6—,9 . 6
[]刘磊, 6曹存根, .种基于“一个”等一是模式的下位概念
获取方法[]计算机科学, 0, ( ) 1— 1 J. 2 63 9: 61 . 0 3 4 5 []吴沽,贝, 7罗曹存根, .等网页文本
部分关系知识的获: p取与验证[]华东理工大学学报: J.自然科学版,0 6 3 20,2 ( 1:3 0 1 1, 1 ) 1 1—3 7
结合知识库,对主题词进行歧义消除和同义标记,在 此基础上进行文本聚类。 3 4 4词汇语义计算 ..
[]崔世起, 8刘群,孟遥,基于大规模语料库的新词检测等.[]计算机研究与发展,06, ( )9 79 2 J. 2 0 4 5:2 -3 . 3 []贺敏, 9龚才春,张华平,一种基于大规模语料的新词识等.别方法[]计算机工程与应用, 0, (1: 71 . J. 2 74 2 )1 - 9 0 3 5 5[o 1 3周蕾,朱巧明.基于统计和规则的未登录词识别方法研究[]计算机工程,0 7 3 ( ) 16 18 J. 20,3 8:9—9 .
词汇语义计算包括词汇语义相关度计算和词汇
语义相似度计算。语义相似度是两个词在不同的上 下文中可以互相替换使用而不改变文本的句法语义结构的程度Ⅲj语义相关度则涵盖了语义相似度的,
概念。目前对中文语义相关度的研究较少,部分集大 中于相似度计算方法的研究¨引。语义相似度有两
[ 1胡燕 .于 We 1]基 b信息抽取的专业知识获取方法研究 [ . D]武汉:武汉理工大学,0 7 20 .
类常见的计算方法,一种是根据本体知识或分类体系计算,种是利用大规模语料库进行统计。词汇语义一计算可方便地应用于自动问答、信息检索、本分类、文 文本聚类等领域。
[ 2 ohD, e noD Pr o pehtgiguigantok 1]R t Zl k . a sec agn s ew r e t f n
o ler ea ts C/ Poe i so t 6 nu fi a s ro[]/ r e n e3t A nm n p a r cdg f h h Me t g o h s cai n o o u ain l L n usi s ei t e As o i t fr C mp t t a i g it n f o o c a d 1 t n en t n l C n e e c n C mp t t n l L n n 7 h I tr ai a o f rn e o o u ai a i o o g it s 1 9 1 3— 2 u si . 9 8: 1 6 1 4 . e 1
4结束语 本
文介绍了基于互联网词汇语义知识库的逻辑框架,述了组成词汇语义知识库的各个构成部分。叙 针对词汇语义知识库的构建,行了大量的前期工进
[3 Sn J n WagWe, h n ii. rm ai a gr 1] u i, n iZ og Yx G a m t a ct oy a n c l e d s mb g a in b s d o e o d o d rhd e r o d l ia i t a e n s c n r e i d n Ma k v mo e u o
[]/ r ednso 0 1IE n rai a C ne ne C/ Po eig 2 0 E E It nt nl ofr c c f e o e o y tms, a a d Cy e neis 2 01: 8 8 n S se M n, n b r tc . 0 8 7— 91.
[4 1]付国宏. MM和对数线性模型栩结合的汉语同性标注 H []哈尔滨: D.哈尔滨工业大学,0 1 20.
作,建了概念知识库系统,现了基于语义内容的构实 海量网页文本的自动获取、基于词序列频率有向网组合词的获取算法,以及部分动词语义关系的获取。下 一
[5 1]奚斌,钱龙华,国栋,语言学组合特征在语义关系周等.抽取中的应用[] J .中文信息学报,0 8 2 3:4 2 0,2( ) 4 . 49, 3. 6
步的主要工作有以下几个方面: ( )成词汇语义知识库的逻辑存储结构设计, 1完
[6 1]郑庆华,王朝静,孙霞 .一种基于结构化语料库的概念语 义网络自动生成算法[]计算机研究与发展,0 5 4 J. 2 0,2 ( )4 845 3:7 -8 .
以适应语义关系的存储; ( )续改进组合词获取算法,高算法性能, 2继提 并在此基础上提出一种新的组合词获取算法;
[7 1]刘群,索建.李基于《网》知的词汇语义相似度计算[] J. I tr ai n o r a o u ain i g it s a d C i n e t a J u n lo C mp t t a L n s c n h— n ol f ol u i
n s L nug r es g20, ( ) 5—6 ee agaePo si,0 2 7 2:97 . c n
() 3实现组合词词性的模型和算法,进行实验并数据分析; () 4确定语义关系的表示方法,取部分类型语
选
[8 1]夏天.语词语语义相似度计算研究[]计算机工程,汉 J. 2 0 3 ( ) 1 11 4 0 7,3 6:9—9 .
义关系作为研究重点,逐步获取语义关系。

词汇语义知识库的研究现状与发展趋势_IT/计算机_...国语种 的体系简洁和内容翔实, 许多国 的研究与...与〔 〕 ” 计划、 依据 ” 计划以及在 网络语料...
基于互联网的词汇语义知识... 4页 免费 基于维基百科的语义知识库... 5页...从句法分析实际需求出发,我们设计了语义知识库的描述体系和组织结构。 语义知识库...
基于互联网的词汇语义知... 4页 免费 机器翻译中基于语法、语... 10页 ... 研究 构建 一个 汉语 框架 语义 知识 库( 简称 CN)具 体研 究 内容 ...
以此理论为基础进行英汉词汇语义对比研究,有利于全面揭示两种语言的词汇语义共性和差异。本文在 英语FrameNet和中国学者建立的汉语框架网络知识库(CFN)的基础上,探索...
现代汉语语义知识库用于句... 4页 10财富值 基于互联网的词汇语义知识... ...英双语 类 WordNet 的语义 知识表述框架 手工构建; 授权使 用 1 Douglas ...
像词汇语义网这样高层次的知识库是保障正确的语义解 释和语义关系的设置所必须的资源. 本文就多语种词汇语义网构建中的概念及其关系表示、 概念体系、 语种转换、...
汉语框架语义知识库概述 4页 4下载券 基于互联网的词汇语义知... 4页 免费...等: L ·45·2 面结合起来的研究工作( 即构建空间语义知识库) 还非常少见。...
上海理工大学 管理学院, 上 语义知识网络的结构分析...数据构建并绘制了一个大尺度的共 词网络,从词汇的...比如众多知识单元同属一个理论体系 ,也可以是基于 ...
基于维基百科的语义知识库及其构建方法研究_自然科学...( 维基百科所采用的架构软件) 中用于维基化的典型... 基于互联网的词汇语义知... 4页 免费喜欢此文档...
热门文档