HMM与CRF模型的使用过程有哪些差异?

在NLP领域, HMM用来解决文本序列标注问题. 如分词, 词性标注, 命名实体识别都可以看作是序列标注问题。同HMM一样, CRF一般也以文本序列数据为输入, 以该序列对应的隐含序列为输出。

HMM模型

HMM模型表示为: lambda = HMM(A, B, pi), 其中A, B, pi都是模型的参数, 分别称作: 转移概率矩阵, 发射概率矩阵和初始概率矩阵.

接着, 我们开始训练HMM模型, 语料就是事先准备好的一定数量的观测序列及其对应的隐含序列, 通过极大似然估计求得一组参数, 使由观测序列到对应隐含序列的概率最大。

在训练过程中, 为了简化计算, 马尔可夫提出一种假设: 隐含序列中每个单元的可能性只与上一个单元有关. 这个假设就是著名的隐含假设.

训练后, 我们就得到了具备预测能力的新模型: lambda = HMM(A, B, pi), 其中的模型参数已经改变。

之后给定输入序列(x1, x2, ..., xn), 经过模型计算lambda(x1, x2, ..., xn)得到对应隐含序列的条件概率分布。

最后, 使用维特比算法从隐含序列的条件概率分布中找出概率最大的一条序列路径就是我们需要的隐含序列: (y1, y2, ..., yn)。

CRF模型

首先, CRF模型表示为: lambda = CRF(w1, w2, ..., wn), 其中w1到wn是模型参数.

接着, 我们开始训练CRF模型, 语料同样是事先准备好的一定数量的观测序列及其对应的隐含序列.与此同时我们还需要做人工特征工程, 然后通过不断训练求得一组参数, 使由观测序列到对应隐含序列的概率最大.

训练后, 我们就得到了具备预测能力的新模型: lambda = CRF(w1, w2, ..., wn), 其中的模型参数已经改变.之后给定输入序列(x1, x2, ..., xn), 经过模型计算lambda(x1, x2, ..., xn)得到对应隐含序列的条件概率分布.

最后, 还是使用维特比算法从隐含序列的条件概率分布中找出概率最大的一条序列路径就是我们需要的隐含序列: (y1, y2, ..., yn).

HMM与CRF模型的使用过程有哪些差异?

HMM与CRF模型之间差异

HMM模型存在隐马假设, 而CRF不存在, 因此HMM的计算速度要比CRF模型快很多, 适用于对预测性能要求较高的场合。同样因为隐马假设, 当预测问题中隐含序列单元并不是只与上一个单元有关时, HMM的准确率会大大降低, 而CRF不受这样限制, 准确率明显高于HMM。

本文来自投稿,不代表重蔚自留地立场,如若转载,请注明出处https://www.cwhello.com/366955.html

如有侵犯您的合法权益请发邮件951076433@qq.com联系删除

(0)
黑马程序员黑马程序员订阅用户
上一篇 2023年8月29日 15:47
下一篇 2023年8月29日 15:57

相关推荐

  • 说说你真的了解钻展吗?钻展的优势有哪些?。

    很多不懂电商运营的人认为,钻展很烧钱,所以不做钻展,我们深度分析一下原因,到底是钻展这个工具烧钱还是商家自己烧钱?钻展对比直通车,优势有哪些?钻展是CPM广告,主动展示广告给客户看,直通车为CPC广告,被动…

    2023年10月29日
    00
  • 聊聊香港免备案服务器的优势有哪些。

    香港免备案服务器的优势包括:速度快、稳定性高、价格实惠、服务好等。 香港免备案服务器的优势主要体现在以下几个方面: 1、无需备案:与中国大陆的服务器相比,香港服务器无需进行繁琐的备案流程,节省了时间和精…

    2024年6月27日
    00
  • 我来教你新闻营销具备的优势是什么。

    在这个信息化的时代,人们获取信息资源基本上都是通过网络来完成的,在以前大家如果想要获取到新闻资讯,唯一的途径就是通过电视或者是报纸才能够获取得到,但是现在我们不仅仅能够通过电视跟报纸读取到一些实时新…

    2023年6月6日
    00
  • 我来教你解析:新闻营销六大优势。

    长期以来,新闻营销始终是企业品牌推广的重头戏,一般大型企业也有专门的公关经理负责新闻传播。新闻营销为什么这么受企业青睐呢?小编认为主要还是新闻营销有一些在品牌宣传方面的优势和作用无法替代。新闻营销的优…

    2023年6月6日
    01
  • 说说淘花计划的优势有哪些。

    获客更简单:县域市场全域覆盖,支付宝流量导入直接触达海量优秀县域城市专业导购淘客。抢占社交电商入口,销售转化更高:快人一步,布局县域社交电商,依托熟人关系导购,加速用户购物决策,可获得更高的商品销售…

    2023年10月22日
    00
  • 小编教你企业网站推广的优势有哪些(企业网站推广的方法有哪些)

      企业网站推广是目前企业在官方网站上推广品牌和服务的主要手段。许多企业不知道他们的网站应该做什么来产生效益,虽然他们也建立了自己的网站,但是他们不知道网站推广是为了什么,今天,小编就来给大家梳理一下…

    2023年4月23日
    00
  • 小编分享为啥喜欢用香港服务器建站呢。

    香港服务器受欢迎的原因包括其稳定的网络环境、优质的国际带宽、快速的访问速度、以及相对宽松的内容监管政策,适合面向全球或特定亚洲市场的网站。 为什么喜欢用香港服务器建站 使用香港服务器建站有许多优势,以…

    2024年6月29日
    00
  • 淘小铺推广有哪些优势。

    大家都应该知道淘小铺吧,我们先来了解下淘小铺的作用,在这里只要内容和粉丝能够有效抵达,那么商家不需要一整天在电脑面前打理店铺,在手机上就能实现了。以前需要在电脑上管理和完成的事情,比如说管理店铺、会…

    2023年10月28日
    00

联系我们

QQ:951076433

在线咨询:点击这里给我发消息邮件:951076433@qq.com工作时间:周一至周五,9:30-18:30,节假日休息