ubuntu下的snappy安装配置以及测试

snappy是google的一款压缩/解压库。github
环境：
ubuntu16.04
gcc version 5.4.0（系统自带）
cmake 3.5.1
snappy 1.1.8

snappy下载

下载地址选择1.1.8版本下载

cmake配置

sudo apt-get install cmake

snappy安装

首先将下载好的文件（snappy-1.1.8.tar.gz）解压，进入解压好的文件夹打开终端，输入如下命令：

mkdir build
cd build
cmake ../
make

此时在build文件夹下可以得到静态链接库libsnappy.a以及头文件snappy-stubs-public.h

编写代码

在snappy.h提供了两个函数调用：

#压缩
size_t Compress(const char* input, size_t input_length, std::string* compressed);
#解压
bool Uncompress(const char* compressed, size_t compressed_length, std::string* uncompressed);

可以看出snappy是根据字符来进行压缩的。

按行压缩文件

按行读取文件并进行压缩，并将压缩后的值写入文件中。

#smain.cpp#include <iostream>
#include "snappy.h"
#include <string.h>
#include <fstream>using namespace std;int main(int argc, char* argv[]) {ifstream ifile(argv[1]);ofstream ofile(argv[2]);string instr;string outstr;while(ifile >> instr) {//cout << instr << endl;snappy::Compress(instr.data(), instr.size(), &outstr);ofile << outstr;//cout << outstr << endl;}return 0;
}

将snappy编译后的静态链接库libsnappy.a以及头文件snappy.h，snappy-stubs-public.h放到与上面代码相同的文件目录下，然后进行编译命令：

g++ smain.cpp libsnappy.a -std=gnu++11

得到可执行文件a.out，然后执行如下命令进行压缩：

./a.out inputfile outputfile

其中inputfile是带压缩文件路径，outputfile是压缩后的文件路径。
注意：按行压缩效果很不理想

按字符读取文件并进行压缩

按字节读取文件并进行压缩，并将压缩后的值写入文件中。
由于机器原因，本次实验采用的是每一兆字节压缩一次。并统计压缩解压时间。
如下是压缩代码：

#smain2.cpp
#include <iostream>
#include "snappy.h"
#include <string.h>
#include <fstream>
#include <ctime>using namespace std;
clock_t startt,endt;int main(int argc, char* argv[]) {startt=clock();  ifstream ifile(argv[1]);ofstream ofile1(argv[2]);ofstream ofile2(argv[3]);string outstr;char buf[1048576];for(;;) {ifile.read(buf, 1048576);snappy::Compress(buf, ifile.gcount(), &outstr);ofile1 << outstr;ofile2 << outstr.size() << endl;if(ifile.eof()){break;}}endt=clock();double endtime=(double)(endt-startt)/CLOCKS_PER_SEC;cout<<"Total time:"<<endtime<<endl;return 0;
}

因为我们是根据字节进行压缩，压缩后的字节也需要记录，这样解压的时候就可以根据记录来进行解压。需要主函数传入三个参数：argv[1]记录要压缩的文件路径、argv[2]记录压缩文件路径、argv[3]记录压缩后的字节大小文件路径。
编译命令：

g++ smain2.cpp libsnappy.a -std=gnu++11 -o smain2.out

运行命令：

./smain2.out inputfile1 outputfile1 outputfile2

如下是解压代码：

#smain3.cpp
#include <iostream>
#include "snappy.h"
#include <string.h>
#include <fstream>
#include <ctime>using namespace std;
clock_t startt,endt;int main(int argc, char* argv[]) {startt=clock();ifstream ifile(argv[1]);ifstream ifile1(argv[2]);ofstream ofile2(argv[3]);string outstr = "";int size;char buf[1048576];for(;;) {ifile1 >> size;ifile.read(buf, size);snappy::Uncompress(buf, size, &outstr);if(ifile.eof()){break;}ofile2 << outstr;}endt=clock();double endtime=(double)(endt-startt)/CLOCKS_PER_SEC;cout<<"Total time:"<<endtime<<endl;return 0;
}

其中主函数也是传递三个参数：argv[1]记录压缩文件路径、argv[2]记录压缩字节大小文件路径、argv[3]记录解压后的文件路径。
编译命令：

g++ smain3.cpp libsnappy.a -std=gnu++11 -o smain3.out

运行命令：

./smain3.out inputfile1 inputfile2 outputfile1