ITPub博客

关于 “自然语言” 的内容如下：

• HanLP vs LTP 分词功能测试

  本次测试选用 HanLP 1.6.0 , LTP 3.4.0

  adnb34g 自然语言 1099 2019-04-19 10:15

• 自然语言（NLP）发展史及相关体系

  https://www.toutiao.com/a6680424446286627339/ 自然语言处理是计算机科学领域与人工智能领域中的一个重要方向。它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。自然语言处理是一门融语言学、计算机科学、数学于一体的科学。自然语言发展史（NLP）(1) 初创期(1947 ～ 1970)：计算机问世(1946)的第二年，英国工程师布斯(A.D.B

  dicksonjyl560101 自然语言 2832 2019-04-17 08:32

• HanLP中文分词Lucene插件

  基于HanLP，支持包括Solr（7.x）在内的任何基于Lucene（7.x）的系统。

  adnb34g 自然语言 1096 2019-04-15 09:59

• pyhanlp:hanlp的python接口

  HanLP的Python接口，支持自动下载与升级HanLP，兼容py2、py3。

  adnb34g 自然语言 1096 2019-04-12 10:27

• 基于结构化感知机的词性标注与命名实体识别框架

  上周就关于《结构化感知机标注框架的内容》已经分享了一篇《分词工具Hanlp基于感知机的中文分词框架》，本篇接上一篇内容，继续分享词性标注与命名实体识别框架的内容。

  adnb34g 自然语言 1208 2019-04-08 14:04

• 分词工具Hanlp基于感知机的中文分词框架

  结构化感知机标注框架是一套利用感知机做序列标注任务，并且应用到中文分词、词性标注与命名实体识别这三个问题的完整在线学习框架，该框架利用1个算法解决3个问题，时自治同意的系统，同时三个任务顺序渐进，构成流水线式的系统。本文先介绍中文分词框架部分内容。

  adnb34g 自然语言 1308 2019-04-03 10:28

• 汉语言处理工具pyhanlp的拼音转换与字符正则化

  演示正规化字符配置项的效果（繁体->简体，全角->半角，大写->小写）。 该配置项位于hanlp.properties中，通过Normalization=true来开启（现在直接通过HanLP.Config.Normalization开启即可）。

  adnb34g 自然语言 1072 2019-03-29 13:02

• 汉语言处理工具pyhanlp的简繁转换

  HanLP几乎实现了所有我们需要的繁简转换方式，并且已经封装到了HanLP中，使得我们可以轻松的使用，而分词器中已经默认支持多种繁简格式或者混合。这里我们不再做过多描述。

  adnb34g 自然语言 969 2019-03-29 10:16

• Hanlp中N最短路径分词详细介绍

  N-最短路径 是中科院分词工具NLPIR进行分词用到的一个重要算法，张华平、刘群老师在论文《基于N-最短路径方法的中文词语粗分模型》中做了比较详细的介绍。该算法算法基本思想很简单，就是给定一待处理字串，根据词典，找出词典中所有可能的词，构造出字串的一个有向无环图，算出从开始到结束所有路径中最短的前N条路径。因为允许相等长度的路径并列，故最终的结果集合会大于或等于N。

  adnb34g 自然语言 1663 2019-03-25 13:01

• Python作为人工智能首选编程语言，你能了解多少呢？

  Python作为人工智能首选编程语言，你能了解多少呢？

  爱编程的程序猿 自然语言 1000 2019-03-22 10:30

• Hanlp1.7版本的新增功能一览

  Hanlp1.7版本在去年下半年的时候就随大快的DKH1.6版本同时发布了，截至目前1.7大版本也更新到了1.7.1了。本篇分别就1.7.0和1.7.1中新增的功能做一个简单的汇总介绍。

  adnb34g 自然语言 1040 2019-03-22 09:23

• 语音识别技术发展渐入佳境 AI企业奋力前行

  https://www.toutiao.com/a6670408665129812493/ 物联网时代，语音识别被视作为人机交互的入口，人工智能和机器学习的迅猛发展，使语音控制变得更为实用。虽然语音识别与生物识别相比，发展相对缓慢，但是学术界和工业界对于语音市场都很看好，这意味着未来发展空间十分巨大。据中国语音产业联盟发布的《2017-2018中国智能语音产业白皮书》显示，2014年至2018年，

  dicksonjyl560101 自然语言 1244 2019-03-21 10:51

• Hanlp汉字转拼音使用python调用详解

  HanLP是一系列模型与算法组成的NLP工具包，由大快搜索主导并完全开源，目标是普及自然语言处理在生产环境中的应用。HanLP具备功能完善、性能高效、架构清晰、语料时新、可自定义的特点。

  adnb34g 自然语言 1080 2019-03-20 10:35

• 深入理解BERT Transformer ，不仅仅是注意力机制

  BERT是google最近提出的一个自然语言处理模型，它在许多任务检测上表现非常好。如：问答、自然语言推断和释义而且它是开源的。因此在社区中非常流行。

  大数据文摘 自然语言 1344 2019-03-19 17:43

• 如何在hanlp词典中手动添加未登录词

  ​我们在使用hanlp词典进行分词的时候，难免会出现分词不准确的情况，原因是由于内置词典中并没有收录当前的这个词，也就是我们所说的未登录词，只要把这个词加入到内置词典中就可以解决类似问题，如何操作，下面我们就看一下具体的步骤

  adnb34g 自然语言 1069 2019-03-18 14:10

• Hanlp自然语言处理中的词典格式说明

  使用过hanlp的都知道hanlp中有许多词典，它们的格式都是非常相似的，形式都是文本文档，随时可以修改。本篇文章详细介绍了hanlp中的词典格式，以满足用户自定义的需要。

  adnb34g 自然语言 1341 2019-03-15 10:48

• 中文分词算法工具hanlp源码解析

  词图指的是句子中所有词可能构成的图。如果一个词A的下一个词可能是B的话，那么A和B之间具有一条路径E(A,B)。一个词可能有多个后续，同时也可能有多个前驱，它们构成的图我称作词图。

  adnb34g 自然语言 928 2019-03-13 10:43

• 清华NLP实验室刘知远：如何写一篇合格的NLP论文

  本文作者刘知远为清华大学计算机科学与技术系副教授 。刘老师总结了研究者在写NLP论文时常见的几类问题，并写成了这篇文章。除了对于NLP研究者，这篇文章对于其他的学术研究也有很好的指导意义。

  大数据文摘 自然语言 2434 2019-03-11 17:32

• Hanlp分词1.7版本在Spark中分布式使用记录

  新发布1.7.0版本的hanlp自然语言处理工具包差不多已经有半年时间了，最近也是一直在整理这个新版本hanlp分词工具的相关内容。不过按照当前的整理进度，还需要一段时间再给大家详细分享整理的内容。昨天正好看到的这篇关于关于1.7.0版本hanlp分词在spark中的使用介绍的文章，顺便分享给大家一起学习一下！

  adnb34g 自然语言 1071 2019-03-11 14:20

• Window离线环境下如何安装pyhanlp

  Hanlp在离线环境下的安装我是没有尝试过的，分享SunJW_2017的这篇文章就是关于如何在离线环境下安装hanlp的。我们可以一起来学习一下！

  adnb34g 自然语言 1155 2019-03-08 10:23