标签归档：Java

中文命名实体识别工具（NER）哪家强？

自去年以来，在AINLP公众号上陆续给大家提供了自然语言处理相关的基础工具的在线测试接口，使用很简单，关注AINLP公众号，后台对话关键词触发测试，例如输入 “中文分词我爱自然语言处理”，“词性标注我爱NLP”，“情感分析自然语言处理爱我"，"Stanza 52nlp" 等，具体可参考下述文章：

五款中文分词工具在线PK: Jieba, SnowNLP, PkuSeg, THULAC, HanLP
中文分词工具在线PK新增：FoolNLTK、LTP、StanfordCoreNLP
Python中文分词工具大合集：安装、使用和测试
 八款中文词性标注工具使用及在线测试
 百度深度学习中文词法分析工具LAC试用之旅
 来，试试百度的深度学习情感分析工具
 AINLP公众号新增SnowNLP情感分析模块
 斯坦福大学NLP组Python深度学习自然语言处理工具Stanza试用

既然中文分词、词性标注已经有了，那下一步很自然想到的是命名实体识别（NER，Named-entity recognition）工具了，不过根据我目前了解到的情况，开源的中文命名实体工具并不多，这里主要指的是一些成熟的自然语言处理开源工具，不是github上一些学习性质的代码。目前明确有NER标记的包括斯坦福大学的NLP组的Stanza，百度的Paddle Lac，哈工大的LTP，而其他这些测试过的开源NLP基础工具，需要从词性标注结果中提取相对应的专有名词，也算是一种折中方案。继续阅读 →

斯坦福大学NLP组Python深度学习自然语言处理工具Stanza试用

发表回复

众所周知，斯坦福大学自然语言处理组出品了一系列NLP工具包，但是大多数都是用Java写得，对于Python用户不是很友好。几年前我曾基于斯坦福Java工具包和NLTK写过一个简单的中文分词接口：Python自然语言处理实践: 在NLTK中使用斯坦福中文分词器，不过用起来也不是很方便。深度学习自然语言处理时代，斯坦福大学自然语言处理组开发了一个纯Python版本的深度学习NLP工具包：Stanza - A Python NLP Library for Many Human Languages，前段时间，Stanza v1.0.0 版本正式发布，算是一个里程碑：继续阅读 →

八款中文词性标注工具使用及在线测试

发表回复

结束了中文分词工具的安装、使用及在线测试，开启中文词性标注在线测试之旅，一般来说，中文分词工具大多数都附带词性标注功能的，这里测试了之前在AINLP公众号上线的8款中文分词模块或者工具，发现它们都是支持中文词性标注的，这里面唯一的区别，就是各自用的词性标注集可能有不同：

以下逐一介绍这八个工具的中文词性标注功能的使用方法，至于安装，这里简要介绍，或者可以参考之前这篇文章：Python中文分词工具大合集：安装、使用和测试，以下是在Ubuntu16.04 & Python3.x的环境下安装及测试。
继续阅读 →

Python中文分词工具大合集：安装、使用和测试

发表回复

这篇文章事实上整合了前面两篇文章的相关介绍，同时添加一些其他的Python中文分词相关资源，甚至非Python的中文分词工具，仅供参考。

首先介绍之前测试过的8款中文分词工具，这几款工具可以直接在AINLP公众号后台在线测试，严格的说，它们不完全是纯粹的中文分词工具，例如SnowNLP, Thulac, HanLP，LTP，CoreNLP都是很全面的(中文）自然语言处理工具。安装这些模块其实很简单，只要按官方文档的方法安装即可，以下做个简单介绍，在Python3.x的环境下测试，Ubuntu16.04 或 MacOS 测试成功。

再附加介绍12款其他的中文分词工具或者中文分词模块，最后的两款fnlp和ansj是比较棒的java中文分词工具，貌似还没有python接口，记录一下。这些中文分词工具我没有测试，感兴趣的同学可以动手试试。
继续阅读 →