opencc-python使用

需求：有个7G的语料库，希望将其中的繁体字转换为简体；
思路：采用opencc进行逐行转换；
坑来了：
1、opencc-python模块安装：
安装存在各种问题，放弃了使用pip方式的安装；在其官网找了个exe安装包（我的环境是windows），直接傻瓜安装，成功！
2、运行：
应用opencc模块时候会报version错误，根据提示找到相应的代码，直接删除——解决了问题，至此可以正常运行；
3、放弃：
代码段——
import opencc
cc = opencc.OpenCC(‘t2s‘)
print cc.convert(‘高質量詞‘)
结果是正常转换为简体字，欣喜若狂，开始解决我的需求吧~~~~~~~~
这是咋了，程序半天没有输出？？？代码写错了？死循环了？？？？
…磨叽半天…
原来是每句话的长度较长，导致转换太慢了，这样操作还是应用在逐个单词的转换，词汇量比较少的场景比较合适啊，像这种上亿条数据还是等不起，所以，你懂的，放弃了…
<如若小伙伴有较好的推荐，记得留言哦，3Q！>

opencc-python使用相关推荐

【Python】用OpenCC将繁体字转为简体字
官方GitHub:BYVoid/OpenCC 相关文章:python实现中文的繁简转换一.安装 pip install opencc-python-reimplemented 二.使用 1. 繁体字 ...
繁简转换OpenCC，autogb 和 autob5，iconv，python的jianfan包
OpenCC OpenCC 是跨平台.多语言的开放中文转换库,除了基本的简繁转换功能外,用户还可以选择对不同用词习惯和异体字的处理方式. OpenCC 还提供方便的网页转换界面. OpenOffice ...
opencc解决简体中文与繁体中文转换问题【python】
1.Opencc-python 今天学习文本分析中偶然想到繁体中文要如何分割的问题,于是联想到将繁体中文先转换为简体中文,查过网上的资料后发现比较好用的是opencc-python,以及下载zh_wi ...
【Python】opencc库简单使用
opencc库用于转换中文到繁体等. 注明: """ s2t.json简体中文到繁体中文简体到繁体 t2s.json繁体中文转简体中文繁体到简体 s2tw.json简 ...
windows python opencc使用方法
windows环境下python使用pip直接安装opencc是不行的,会直接报错无法安装. 正确安装步骤是: 1. 首先下载opencc的文件包,将其解压到电脑上某个位置: 2. 将opencc的b ...
python安装opencc包失败
安装正常安装出错,然后参考这里:https://www.jianshu.com/p/a2a81c201a3f pip install opencc-python-reimplemented 亲测有效 ...
Python使用opencc工具进行繁简转换
首先安装好opencc 可以百度到很多具体教程,安装好后可以看到share文件夹中的s2t和t2s就是简体转繁体和繁体转简体的json.在使用opencc时,有时提示找不到文件,就需要在代码后加上这两 ...
Python安装opencc
近期因为项目需求,需要将文本中的繁体中文转换成简体,查了些资料,发现opencc是个很好的库,但却遇到了无法安装的问题. 解决方案 pip install opencc-python-reimplem ...
opencc安装for python
在win10+python3.6环境下安装opencc简繁转换器,一开始直接输入命令 pip install opencc-python,但是不停地出现问题,最后采用了以下方法,亲测有效!! 输入命令 ...
vs2015编译linux源码,使用Visual Studio 2017(VS2017)编译OpenCC 1.0.4 (Open Chinese Convert)源代码...
摘要:本文介绍了Win7 64位环境下OpenCC(Open Chinese Convert) 1.0.4源码编译全过程,除VS2017外,VS2013以上版本也应该基本同样适用,其他版本的Windo ...

opencc-python使用

opencc-python使用相关推荐

最新文章

热门文章