马尔可夫模型在语言处理中的应用
隐含马尔可夫模型是一个数学模型,到目前为之,它一直被认为是实现快速精确的语音识别系统的最成功的方法。复杂的语音识别问题通过隐含马尔可夫模型能非常简单地被表述、解决,让我不由由衷地感叹数学模型之妙。隐含马尔可夫模型是一个数学模型,到目前为之,它一直被认为是实现快速精确的语音识别系统的最成功的方法。复杂的语音识别问题通过隐含马尔可夫模型能非常简单地被表述、解决,让我不由由衷地感叹数学模型之妙。 自然语言是人类交流信息的工具。很多自然语言处理问题都可以等同于通信系统中的解码问题 -- 一个人根据接收到的信息,去猜测发话人要表达的意思。这其实就象通信中,我们根据接收端收到的信号去分析、理解、还原发送端传送过来的信息。以下该图就表示了一个典型的通信系统:

其中 s1,s2,s3...表示信息源发出的信号。o1, o2, o3 ... 是接受器接收到的信号。通信中的解码就是根据接收到的信号 o1, o2, o3 ...还原出发送的信号 s1,s2,s3...。
其实我们平时在说话时,脑子就是一个信息源。我们的喉咙(声带),空气,就是如电线和光缆般的信道。听众耳朵的就是接收端,而听到的声音就是传送过来的信号。根据声学信号来推测说话者的意思,就是语音识别。这样说来,如果接收端是一台计算机而不是人的话,那么计算机要做的就是语音的自动识别。同样,在计算机中,如果我们要根据接收到的英语信息,推测说话者的汉语意思,就是机器翻译; 如果我们要根据带有拼写错误的语句推测说话者想表达的正确意思,那就是自动纠错。
那么怎么根据接收到的信息来推测说话者想表达的意思呢?我们可以利用叫做“隐含马尔可夫模型”(Hidden Markov Model)来解决这些问题。以语音识别为例,当我们观测到语音信号 o1,o2,o3 时,我们要根据这组信号推测出发送的句子 s1,s2,s3。显然,我们应该在所有可能的句子中找最有可能性的一个。用数学语言来描述,就是在已知 o1,o2,o3,...的情况下,求使得条件概率:
P (s1,s2,s3,...|o1,o2,o3....) 达到最大值的那个句子 s1,s2,s3,...
当然,上面的概率不容易直接求出,于是我们可以间接地计算它。利用贝叶斯公式并且省掉一个常数项,可以把上述公式等价变换成:
P(o1,o2,o3,...|s1,s2,s3....) * P(s1,s2,s3,...)
其中P(o1,o2,o3,...|s1,s2,s3....) 表示某句话 s1,s2,s3...被读成 o1,o2,o3,...的可能性, 而P(s1,s2,s3,...) 表示字串 s1,s2,s3,...本身能够成为一个合乎情理的句子的可能性,所以这个公式的意义是用发送信号为 s1,s2,s3...这个数列的可能性乘以 s1,s2,s3...本身可以一个句子的
2007 隐马尔可夫模型在自然语言处理中的应用于江德 1,2, 樊孝忠 1, 尹继豪 1 (1. 北京理工大学 计算机科学技术学院,北京 100081;2. 安阳师范学院 计算机科学...
微机软件 ? 隐马尔可夫模型及其在自然语言处理中的应用刘海天 ,赵政文 ,盛光磊 1 1 2 ( 1. 西北工业大学计算机学院 ,西安 710072; 2. 郑州大学信息工程学院...
隐马尔可夫模型是序列数据处理和统计学习的一种重要概率模型,最近几年已经被成功应用到许多关于自然语言处理的任务中。简要介绍了隐马尔可夫模型,对其在词性标注应用...
宗成庆-统计自然语言处理--第六章--- 隐马尔可夫模型_计算机软件及应用_IT/计算机_专业资料。宗成庆《统计自然语言处理》--- 第六章--- 隐马尔可夫模型,由...
(哈尔滨工业大学计算机学院信息检索研究室 摘要:词义消歧一直是自然语言处理领域的...2.4 词义消歧中模型参数的定义 将隐马尔可夫模型应用于词义消歧问题,需要 对...
马尔可夫模型 马尔可夫模型 ? 马尔可夫模型是一种统计模型,广泛地应用在语 音识别,词性自动标注,音字转换,概率文法 等各个自然语言处理的应用领域。 ? 马尔可夫(...
该领域的研究人员通过对 隐马尔可夫模型这一数学模型的跨领域应用, 解决了自然语言理解中的瓶颈问题。文章系统阐述了隐马尔可夫模型的 原理以及在语音识别和词性标注...
隐马尔可夫模型在语音识别中的应用_理学_高等教育_教育专区。隐马尔可夫模型在...后处理器主要是运用语言学知识对识别出来的候选的字或词进行最 后的判决 ( 如...
隐马尔可夫模型及其应用 7页 免费 自然语言处理常用模型方... 7页 2下载券...及其在自然语言处理中的应...
本文 阐述了马尔可夫模型和隐马尔可夫模型数据挖掘领域的应用, 以及隐马尔可夫模型可解决的问题, 以供其他研究者借鉴。 1 引言 当前 Internet 与数据库的高速发展...
热门文档