文档下载 文档下载导航
设为首页 | 加入收藏
搜索 请输入内容:  
 导航当前位置: 文档下载 > 所有分类 > 人文社科 > 教育学/心理学 > 基于层叠隐马尔可夫模型的中文命名实体识别
侵权投诉

基于层叠隐马尔可夫模型的中文命名实体识别

第27卷第2期2006年2月通信学报如L耶donCommunlcations

~bl27No22006

Febmarv

基于层叠隐马尔可夫模型的中文命名实体识别

俞鸿魁1一,张华平1,刘群1,吕学强2,施水才2

(1中围科学院训算技术研究所.北京lO(】080:2北京信息科技人学中文信息处理研究中心,北京100101)

摘要:提出了一种基于层叠隐马尔可夫模型的中文命名实体一体化识别方法,旨在将人名识别、地名识别以及机构名识别等命名实体识别融合到一个相对统一的理论模型中。首先在词语粗切分的结果集上采用底层隐马尔可夫模型识别川普通无嵌套的人名、地名和机构名等,然后依次采取高层隐马尔可夫模型识别出嵌套了人名、地名

的复杂地名和机构名。在对大规模真实语料库的封闭测试中,人名、地名和机构识别的F.1值分别达到92.55%、

9453%、86

51%。采削该方法的系统IcTcLAs和2003年5月s】GHAN举办的第一届汉语分词大赛巾名列前茅。

关键词:命名实体识别;角色标注;lcTcLAs中图分类号:TP391.2

文献标识码:A

文章编号:1000436x(2006)02一0087一08

Cllinesenamed

e洲锣id锄倘ca6佃usingcas∞dedllidd蛐Markovmodd

Qunl,LV

xue—qian92,sHIShui.cai2

100080.chiⅡa;

YuHong_kuil一,zHANGHua.pin91,LIU

(1

2

Ins【Im钯ofco。口u“岵儆h删k副,mchiⅡeseAc眦rny0fsciences,B蜘mg

and

ch㈣lnf0皿a曲nPmcessmB

Resea心centeLBeUingInform撕on

sc舢&慨hnologyunI惴i吼BejiⅡ9100101.chlna)

Markovmodel,whichaimed

theoretjcal

to

A№瑚tt:An

8pproachforChinesenamedenb哆idenn虹c“onu曲ngcascadedhiddenrecognltionintO

8Il

lncorpora忙per如n

presentedSimple

n跚e,10ca“onn锄e,o玛arIization岫me

named

integfated

ffamewas

e而ty

w酏recOglli珥dbylowerHMM

model世er

rough

segmenta60n粕d

coTnplex

n锄ed

end廿such

as

pe幅onname,locabon

test

on

n锄e锄dorganlza60Ⅱn锄ew鹊recognizedbyhigherHMMrnodelusingmIe

t{lg百Ⅱg.In

92

the

18玛erealisticcorpus,{佶F_lmeasureofpcrson

n锄e,10cadonname

and

o曜anizatbnnamewas

55%,9453%and86.51%.Inthe丘巧tinteH掘dorlalword8egmentationbakeoffheldbySIGHAN(山eACLSpecm

on

InterestGfo“pachievedKey

chineseLanguage

score

Proces瓢ng)至n2003.ICl℃LAs,wbichnameentity

ldenn&atlonbase

on

thismodel

excellent

words:n锄ed

en吐ty

idenb缸anon;r01e

tagging;ICTcLAS

引言

命名实体识别(named

endty

和标注过程中的一个重要环节,而且在句法分析、

机器翻译、信息检索、提取以及自动问答系统等领

identmcadon)的研

域中也有直接的应用。由于中文文本中词与词之间

没有分隔符,中文文本的分词和中文命名实体的识

究是自然语言处理中的一项基本工作,不仅是分词

收稿日期:2005一】l—15;修回日期:2005-12—20

基金项目:国家重点基础研究发展计划(“973”计划)基金资助项目(G1998030507-4,G19980305lo);计算所领域前沿青年基金资助项目(20026180_23);国家自然科学基金资助项目(印272084);北京市教育委员会科技发展计划重点项目(Kz200310772013)

F叫nda廿0n

It哪s:neN嘶onalBaslcResearch

Programofchina(973Pm口aIn)(G1998030507.4,G1998030510):TheICTYouth

Pund(20026180—23):TheNatIonalNaturalScknceFoundationofChina(60272084);The

Sclenti&Research

KeyProgramof

Be巧ingMunicipaIcom耐ssionofEducanon(Kz200310772013)

万方数据 

第1页

热门文档

相关文档

站点地图 | 文档上传 | 侵权投诉 | 手机版
本站所有资源均来自互联网,本站只负责收集和整理,均不承担任何法律责任,如有侵权等其它行为请联系我们.
文档下载 Copyright 2013 doc.guandang.net All Rights Reserved.  -  email