腾讯文智自然语言处理-分词API Python小实验

我本人在做中文地址的分词算法的优化，为了获得尽量好的分词后的小样本，先后试验了中科院计算所的ICTCLAS、Python上的结巴分词、腾讯文智自然语言处理。因为结巴开源而且原理不复杂，代码可读性较强，因此我自己主要是在结巴的算法上进行修改。

腾讯的新手礼包是赠送了50000次API调用，小样本试验都不成问题，不过官网的文档是php版本的，因此参考网上的资料提供Python2.7版本，仅供参考。

# -*-coding=utf-8-*-from QcloudApi.qcloudapi import QcloudApi
import jsonif __name__ == "__main__":"""Wenzhi Interface Sample:https://wenzhi.api.qcloud.com/v2/index.php?Action=LexicalAnalysis&Nonce=345122&Region=sz&SecretId=AKIDz8krbsJ5yKBZQpn74WFkmLPx3gnPhESA&Timestamp=1408704141&Signature=HgIYOPcx5lN6gz8JsCFBNAWp2oQ&text=我爱洗澡&code=2097152"""module = "wenzhi"action = "LexicalAnalysis"config = {"Region": "sh","secretId": "**id**","secretKey": "**key**","method": "get"}params = {"text": "江苏省南京市玄武区玄武门街道峨嵋新村13幢","code": 0x00200000,"type": 0}try:service = QcloudApi(module, config)print service.generateUrl(action, params)s =  service.call(action, params)print sdejson =  json.loads(s)f = open("resp.txt", "w")f.write(u' '.join(w["word"] for w in dejson["tokens"]).encode('utf-8').strip())f.close()except Exception, e:print "exception:", e

主要参考了武汉2016马拉松和文智自然语言处理的官方文档。设置好config和params，params注意coding必选，是编码方式，目前仅支持utf-8；type可选，为分词模式。就可以用官方的API发起调用，接收返回的json串。json的格式在官方文档中也有写，我只需要获得分词后的词，不需要位置、词性，所以直接join起来写入到文件中备用。

希望对大家有帮助。

腾讯文智自然语言处理-分词API Python小实验相关推荐

开发者实验室体验之文智自然语言处理SDK by python
1. 前言今天我们将对于腾讯的文智自然语言处理SDK进行一次体验. 2. 实验 2.1 实验准备新手可以去文智管理平台领取5万次新手礼包,并创建一个新的API的公钥和私钥.(果然是腾讯,连这个都成 ...
腾讯文智自然语言处理介绍与情感分析API调用
一.产品概述文智中文语义开放平台是基于并行计算系统和分布式爬虫平台,结合独特的语义分析技术,一站式满足用户NLP.转码.抽取.全网数据抓取等中文语义分析需求的开放平台.用户能够基于平台对外提供的Op ...
推荐中文分词：腾讯文智
2019独角兽企业重金招聘Python工程师标准>>> http://nlp.qq.com/semantic.cgi#page1 Help http://nlp.qq.com/he ...
腾讯文智java近义词API_常用的分词组件或API,该怎么选型？
做互联网系统分词是必不可少的.除非咱不需要搜索.标签或者关键字分析等. 在网上看到的一个列表,不错,放出来给大家. 这里简单点评下:(我简单体验了几个,没有全部用,像搜狗之类的,看下名称我就不想用, ...
【文智背后的奥秘】系列篇——情感分类
版权声明:本文由文智原创文章,转载请注明出处: 文章原文链接:https://www.qcloud.com/community/article/92 来源:腾云阁 https://www.qclou ...
【文智背后的奥秘】系列篇——结构化抽取平台
版权声明:本文由文智原创文章,转载请注明出处: 文章原文链接:https://www.qcloud.com/community/article/91 来源:腾云阁 https://www.qclou ...
【文智背后的奥秘】系列篇——关键词智能提取
2019独角兽企业重金招聘Python工程师标准>>> 版权声明:本文由文智原创文章,转载请注明出处: 文章原文链接:https://www.qcloud.com/communit ...
【直击DTCC】自然语言技术在文智趋势分析产品的应用
2017年5月11日-13日,2017中国数据库技术大会于北京国际会议中心盛大开幕.作为国内最受关注的数据库技术大会,本届大会以"数据驱动·价值发现"为主题,汇集多个领域的百余位专 ...
技术控 | 自然语言技术在文智趋势分析产品上的应用
点击上方"蓝字"可以关注我们哦田兰腾讯云产品经理嘉宾简介: 腾讯云公众趋势分析服务产品经理.从事多年数据服务应用产品设计. 自然语言技术在文智趋势分析产品上的应用议题简介: ...

腾讯文智自然语言处理-分词API Python小实验

腾讯文智自然语言处理-分词API Python小实验相关推荐

最新文章

热门文章