ITPub博客

首页 > 人工智能 > 自然语言 > 如何在hanlp词典中手动添加未登录词

如何在hanlp词典中手动添加未登录词

自然语言 作者:adnb34g 时间:2019-03-18 14:10:05 0 删除 编辑

我们在使用 hanlp词典进行分词的时候,难免会出现分词不准确的情况,原因是由于内置词典中并没有收录当前的这个词,也就是我们所说的未登录词,只要把这个词加入到内置词典中就可以解决类似问题,如何操作,下面我们就看一下具体的步骤

 

1 找到 hanlp内置词典目录

 

位于 D:\hnlp\hanlp_code\hanlp\data\dictionary\custom也就是Hanlp安装包中的data\dictionary\custom下目录

 

2 将未登录词以词名,词性,词频的格式添加到文件中(句首或者句尾都可以)

 

3 将字典的同名 bin文件删除掉

执行文件时读取的是 bin文件,必须删掉后等下次执行时重新生成,新字典才发挥作用

 

4 使用新字典重新执行文件

执行时会遇到没有相关 bin文件的提示,不过放心,程序会自动生成一个新的bin文件,骚等片刻,就好了。

验证结果是否正确

 




来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/31524777/viewspace-2638651/,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论
八年IT互联从业经历,专注网络营销、大数据、人工智能等领域的知识分享

注册时间:2018-03-09

  • 博文量
    172
  • 访问量
    129047