Rust : 红楼梦一书中文字符的统计

一、准备工作

1、相关的库

因为红书中大部分是中文字符，标准库中目前还无法直接处理。因此，在进行分析前，在toml文件中的依赖库中，添加一下以下：

encoding = "0.2"

具体可参考以下资料：

https://github.com/lifthrasiir/rust-encoding

2、红楼梦一书的txt文件。直接找度娘。

二、相关代码

extern crate encoding;
use encoding::{Encoding, DecoderTrap};
use encoding::all::GB18030; //可以转成汉字的字库
fn main() {let mut f = File::open("C:\\Users\\Desktop\\redstory.txt").ok().expect("file read error!");let mut hp: HashMap<char, i32> = HashMap::new();let mut reader: Vec<u8> = Vec::new();//u8集f.read_to_end(&mut reader).ok().expect("can not read file");let mut content = String::new();//字符串GB18030.decode_to(&mut reader, DecoderTrap::Ignore, &mut content);for c in content.chars() {let counter = hp.entry(c).or_insert(0);*counter += 1;}println!("hp:{:?}", hp);
}

或main{}中以下代码可以改一下：

extern crate encoding;
use encoding::{Encoding, DecoderTrap};
use encoding::all::GB18030; //可以转成汉字的字库
fn main() {let mut f = File::open("C:\\Users\\Desktop\\redstory.txt").ok().expect("file read error!");let mut reader: Vec<u8> = Vec::new();let mut hp: HashMap<char, i32> = HashMap::new();f.read_to_end(&mut reader).ok().expect("can not read file");let content:String = GB18030.decode(&reader, DecoderTrap::Strict).unwrap();for d in content.chars() {let counter = hp.entry(d).or_insert(0);*counter += 1;}println!("hp :{:?}", hp);
}

你可以看到不同字符串出现的频率了。

Rust : 红楼梦一书中文字符的统计相关推荐

红楼梦 1.2 红楼梦一书根由来历
红楼梦 1.2 红楼梦一书根由来历
中文字符频率统计python_用Python数据分析方法进行汉字声调频率统计分析
用 Python 数据分析方法进行汉字声调频率统计分析木合塔尔·沙地克 ; 布合力齐姑丽·瓦斯力 [期刊名称] <电脑知识与技术> [年 ( 卷 ), 期] 2017(013)035 [ ...
中文字符频率统计python_python统计字符串出现最多的字母及其出现次数
统计字符串出现最多的字母及其出现次数另外如果次数相同按字母顺序排序. 方法1 可以使用自定义键对c.most_common()进行排序,该键首先考虑频率的降序,然后考虑字母的降序(请注意lambda ...
python split函数空格_python上手--10行代码读懂红楼梦
取名10行代码看懂红楼梦,是将介绍使用python代码来读红楼梦获取其主要人物.这里的思想就是词频统计,通过分析红楼梦小说文字中出现最多的词语,来概括说明红楼梦的核心人物和事情.实际上如果你能跟着往下 ...
听学编程之python_听学编程之Python 三、宝玉在红楼梦里说了什么
应听友要求,根据喜马拉雅上的音频节目『听学编程之Python』整理所得. 除了数值外,Python处理字符串特别方便,甚至在编程界,也算是最方便的类型.要掌握哪些入门知识呢?字符串 unicode 列 ...
安利一个惊艳的红楼梦可视化作品
更新:<左手读红楼梦,右手写BUG,闲快活>一文对该数据集进行了分析挖掘,加了许多红楼梦的内容,以及几个书里的黄段子,逃.代码开源在:DesertsX/gulius-projects 直接 ...
红楼梦音频第一回甄士隐梦幻识通灵　贾雨村风尘怀闺秀
因为女娲补天,遗留下一块顽石,便生出了这红楼梦许多故事. 留下一块便生出红楼梦故事,要是留下许多,那得演绎出多少故事来. 红楼梦有好几种书名: 石头记:因为是由这一块石头引起的故事,所以又称石头记情 ...
红楼梦中的那些震撼人心的诗词
红楼有梦,一梦百年. 曹雪芹如果这天下真的有集大成者,那曹雪芹应该就是那个人了,无论琴棋书画,或是诗词歌赋,曹雪芹都达到了登峰造极的地步,这也许就是后世很少有人敢续写红楼梦的原因吧. 红楼梦这部书 ...
Google BERT 中文应用之《红楼梦》中对话人物提取
点击上方"迈微AI研习社",选择"星标★"公众号转载自:PaperWeekly 庞龙刚之前看到过一篇文章,通过提取文章中对话的人物,分析人物之间的关系,很 ...
红楼梦人物出场顺序python_Python 中文词频分析——红楼梦人物出场次数
本篇文档,带大家用Python做一下词频统计本章需要用到Python的jieba模块 jieba模块是一个经典的用于中文分词的模块首先呢我们需要读取文章的内容,并用jieba库的lcut进行分词 ...

Rust : 红楼梦一书中文字符的统计

Rust : 红楼梦一书中文字符的统计相关推荐

最新文章

热门文章