网易首页 > 网易号 > 正文 申请入驻

java分词工具hanlp自然语言处理包介绍

0
分享至

前几天(6月28日),在第23届中国国际软件博览会上,hanlp这款自然语言处理工具荣获了“2019年第二十三届中国国际软件博览会优秀产品”。

HanLP是由一系列模型预算法组成的工具包,结合深度神经网络的分布式自然语言处理,具有功能完善、性能高效、架构清晰、语料时新、可自定义等特点,提供词法分析、句法分析、文本分析和情感分析等功能,是GitHub最受欢迎、用户量最大(超过13000个star)、社区活跃度最高的自然语言处理技术。

HanLP完全开源,包括词典。不依赖其他jar,底层采用了一系列高速的数据结构,如双数组Trie树、DAWG、AhoCorasickDoubleArrayTrie等,这些基础件都是开源的。官方模型训练自2014人民日报语料库,您也可以使用内置的工具训练自己的模型。

通过工具类HanLP您可以一句话调用所有功能,文档详细,开箱即用。底层算法经过精心优化,极速分词模式下可达2,000万字/秒,内存仅需120MB。在IO方面,词典加载速度极快,只需500 ms即可快速启动。HanLP经过多次重构,目前已经更新到了1.7版本,新增并完善了中文分词、命名实体识别、信息抽取、文本分类、文本聚类、画法分析等功能,使用效率和适用性得到了大幅提升。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
尼克斯效应?雷霆抢七最低票价338美元 总决赛首战最低1600+美元

尼克斯效应?雷霆抢七最低票价338美元 总决赛首战最低1600+美元

罗说NBA
2026-05-30 11:33:42
金融危机要来?专家预测,2026到2027上半年,世界将爆发金融风暴

金融危机要来?专家预测,2026到2027上半年,世界将爆发金融风暴

网络易不易
2026-05-30 11:15:15
66岁安帅暴怒 感觉被耍得团团转 警告内马尔:14天后还有伤就走人

66岁安帅暴怒 感觉被耍得团团转 警告内马尔:14天后还有伤就走人

风过乡
2026-05-30 08:33:24
打起来了,美基地被炸后,内塔一声令下,以色列“斩首”3名高官

打起来了,美基地被炸后,内塔一声令下,以色列“斩首”3名高官

肖兹探秘说
2026-05-30 12:49:26
法网女单八强产生,Top10中三人出局,中国金花成黑马

法网女单八强产生,Top10中三人出局,中国金花成黑马

五姑娘说体育
2026-05-30 08:09:55
我如今已68了,以亲身血泪教训告诉你:不要跟任何人,包括你的父母、子女、枕边人,分享这两件事

我如今已68了,以亲身血泪教训告诉你:不要跟任何人,包括你的父母、子女、枕边人,分享这两件事

心理观察局
2026-05-23 07:00:06
第一次感受到维C的“杀伤力”,2块钱一瓶,就能搞定8个麻烦事

第一次感受到维C的“杀伤力”,2块钱一瓶,就能搞定8个麻烦事

室内设计师有料儿
2026-05-09 10:26:26
扎克伯格再出王炸!开源全球首个AI蛋白质世界模型,最高88%命中率,颠覆药物研发!

扎克伯格再出王炸!开源全球首个AI蛋白质世界模型,最高88%命中率,颠覆药物研发!

智药局
2026-05-28 19:10:25
活久见!西南大学食堂“亮剑辣度图”走红,网友:你是要笑死我吗

活久见!西南大学食堂“亮剑辣度图”走红,网友:你是要笑死我吗

火山詩话
2026-05-30 08:37:40
龚琳娜现状:俩儿子保她晚年,事业再登巅峰,前夫老锣已销声匿迹

龚琳娜现状:俩儿子保她晚年,事业再登巅峰,前夫老锣已销声匿迹

白面书誏
2026-05-30 12:54:43
广东一养鸡场几千只鸡被热死,36℃极端高温导致!养殖户很绝望

广东一养鸡场几千只鸡被热死,36℃极端高温导致!养殖户很绝望

狸猫之一的动物圈
2026-05-30 10:44:37
去医院时,千万别做这几种检查,不仅对身体没有好处,还会产生这些影响!

去医院时,千万别做这几种检查,不仅对身体没有好处,还会产生这些影响!

新时代的两性情感
2026-05-30 00:07:03
越扒越有!林志玲被剧组除名仅1天,再迎2大噩耗,人设彻底崩塌

越扒越有!林志玲被剧组除名仅1天,再迎2大噩耗,人设彻底崩塌

东方不败然多多
2026-05-30 15:19:03
章若楠空杯到底有多美?网友说:这颜值谁顶得住,难怪都想娶!

章若楠空杯到底有多美?网友说:这颜值谁顶得住,难怪都想娶!

暖心萌阿菇凉
2026-04-30 13:13:01
为190元榴莲千里维权商家收到人身威胁言论,称已报警,并起诉“仅退款”买家索赔

为190元榴莲千里维权商家收到人身威胁言论,称已报警,并起诉“仅退款”买家索赔

红星新闻
2026-05-29 22:21:07
长江存储陈南翔:华为韬定律非常好 是中国半导体对全球的贡献 中国半导体人要扛起大旗

长江存储陈南翔:华为韬定律非常好 是中国半导体对全球的贡献 中国半导体人要扛起大旗

快科技
2026-05-30 16:35:17
基辅将被毁灭?俄军图95战轰千里南调,专家评估:大规模轰炸开始

基辅将被毁灭?俄军图95战轰千里南调,专家评估:大规模轰炸开始

混沌录
2026-05-27 21:50:48
吴宜泽再获20万!夺冠后已拿285万 奥沙利文:当世界冠军感觉如何

吴宜泽再获20万!夺冠后已拿285万 奥沙利文:当世界冠军感觉如何

念洲
2026-05-30 08:37:37
网红边牧被偷杀后续:网友实地考察,恶心一幕发生,比偷狗更炸裂

网红边牧被偷杀后续:网友实地考察,恶心一幕发生,比偷狗更炸裂

小鋭有话说
2026-05-29 08:29:27
联合国变天?秘书长候选人出现,巴西力挺,中方:不准有官僚主义

联合国变天?秘书长候选人出现,巴西力挺,中方:不准有官僚主义

闻识
2026-05-30 00:43:28
2026-05-30 17:19:00
大数据前沿
大数据前沿
专注IT互联网资讯分享
171文章数 64关注度
往期回顾 全部

科技要闻

车圈大佬发声:价格战远去,但竞争仍残酷

头条要闻

普京称俄乌冲突临近收尾同日空袭基辅 媒体:并行不悖

头条要闻

普京称俄乌冲突临近收尾同日空袭基辅 媒体:并行不悖

体育要闻

岁月不饶人!39岁德约鏖战近5小时拼到呕吐

娱乐要闻

向太曝黄晓明曾当众给她下跪

财经要闻

双汇管不住一头猪

汽车要闻

900V+3.2秒破百 领克10+&领克10上市16.99万元起

态度原创

健康
时尚
教育
数码
亲子

尝试干细胞疗法如何避免踩坑?

2026夏天最新5款发型合集,每一款都超心动!

教育要闻

大语文时代,语文考试知识面非常灵活,一定要帮孩子多积累这..

数码要闻

宏碁新款显示器,专为设计师设计?

亲子要闻

孩子的多指让母亲无助,治好后的手指也是一种救赎

无障碍浏览 进入关怀版