命名实体识别学习笔记—

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xuewenstudy/article/details/85028173
命名实体识别（Named Entity Recognition，简称NER）用于识别文本中具有特定意义的实体。需要识别的实体可以分为三大类（实体类、时间类和数字类）和七小类（人名、机构名、地名、时间、日期、货币和百分比）。

本文介绍使用Ltp进行命名实体识别。

1、安装Ltp Python组件

（1）pyltp安装：

pip install pyltp

(不支持conda-python)

（2）部署语言模型库：

下载链接：http://ltp.ai/download.html

解压后如图所示

cws是中文分词模型，ner是命名实体识别模型，paeser是句法解析模型，pos是词性标注模型。

2、使用Ltp进行命名实体识别

（1）代码：

import sys
import os
from pyltp import *

sent = "欧洲东部的罗马尼亚，首都是布加勒斯特，也是一座世界性的城市。"
words = sent.split(" ")

postagger = Postagger()
postagger.load("D:\\Projects\\nlp\\ltp_data_v3.3.1\\pos.model") #导入词性标注模块
postags = postagger.postag(words)

recognizer = NamedEntityRecognizer()
recognizer.load("D:\\Projects\\nlp\\ltp_data_v3.3.1\\ner.model") #导入命名实体识别模块
netags = recognizer.recognize(words, postags)

for word,postag,netag in zip(words,postags,netags):
print(word+'/'+postag+'/'+netag)

（2）运行结果：

词、词性、识别的专名用“ / ”分开了，“O”表示非专名，“S-Ns”表示地名。

参考文献：

郑捷，《NLP汉语自然语言处理原理与实践》
————————————————
版权声明：本文为CSDN博主「xuewenstudy」的原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接及本声明。
原文链接：https://blog.csdn.net/xuewenstudy/article/details/85028173

命名实体识别学习笔记——使用Ltp相关推荐

命名实体识别学习笔记
1 命名实体识别概述 1.1 定义命名实体识别(Name Entity Recognition,NER),也称作"专名识别",是指识别文本中具有特定意义的实体,包括人名.地名.机 ...
命名实体识别学习记录（spaCy/OpenNLP..）
命名实体识别学习记录(spaCy/OpenNLP..) spaCy 环境功能实现 NLTK 环境功能实现 Stanford NLP 环境功能实现 NER works Spacy Install ...
命名实体识别学习-用lstm+crf处理conll03数据集
title: 命名实体识别学习-用lstm+crf处理conll03数据集 date: 2020-07-18 16:32:31 tags: 命名实体识别学习-用lstm+crf处理conll03数据集 ...
使用哈工大LTP进行文本命名实体识别并保存到txt
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明. 本文链接:https://blog.csdn.net/broccoli2/article/de ...
知识图谱学习笔记－命名实体识别
一.命名实体识别简单概要按照类型标记每一个名词:对句子名词进行分类我今天(时间)要去北京(地点)参加面试张三(人名)出生于上海(地名),清华大学(组织)毕业后去百度(组织)任职. 命名实体识别: ...
【论文笔记】命名实体识别论文
其实实体识别这块看了挺久了的,今天就来好好聊一聊它.实体识别(Name Entity Recognition)是属于NLP任务中的序列标注问题:给定一个输入句子,要求为句子中的每一个token做实体标 ...
【论文笔记】《基于深度学习的中文命名实体识别研究》阅读笔记
作者及其单位:北京邮电大学,张俊遥,2019年6月,硕士论文摘要实验数据:来源于网络公开的新闻文本数据:用随机欠采样和过采样的方法解决分类不均衡问题:使用BIO格式的标签识别5类命名实体,标注11 ...
实体对齐算法_中英命名实体识别及对齐中的中文分词优化论文笔记
1.计算命名实体词汇对齐的置信度:对一个中英双语句对,中文在初始分词的基础上进行命名实体识别. 2.分词工具:采用中科院分词工具ICTCLAS.Stanford分词工具对中文句子进行分词,其中Stan ...
自然语言处理(NLP)之pyltp的介绍与使用(中文分词、词性标注、命名实体识别、依存句法分析、语义角色标注)
pyltp的简介语言技术平台(LTP)经过哈工大社会计算与信息检索研究中心 11 年的持续研发和推广, 是国内外最具影响力的中文处理基础平台.它提供的功能包括中文分词.词性标注.命名实体识别.依 ...

命名实体识别学习笔记——使用Ltp

命名实体识别学习笔记——使用Ltp相关推荐

最新文章

热门文章