1. 测试目的

测试Cassandra集群读写TPS的极值，确定Cassandra读写性能。

2. 测试环境

2.1 硬件信息

CPU	8核 Intel(R) Xeon(R) CPU E5-2650 v4 @ 2.20GHz
RAM	16G

2.2 软件信息

JDK	1.8u151
Cassandra	3.11.1
cassandra-driver-core	3.3.2
OS	CentOS Linux release 7.3.1611

2.3 集群信息

集群名称	IP	类型
JCPT Test Cluster	10.112.68.184	节点1
	10.112.68.185	节点2
	10.112.68.186	节点3（种子节点）
	10.112.68.189	节点4
	10.112.68.191	节点5
	10.112.68.192	节点6（种子节点）

2.4 主要配置信息

集群配置为单数据中心，测试时，数据库keyspace的，采取SimpleStrategy策略

副本因子：3

分区器：Murmur3Partitioner

整个过程中通用设置如下

A.线程池设置：

setCoreConnectionsPerHost(HostDistance.LOCAL, 2)
setMaxConnectionsPerHost(HostDistance.LOCAL, 4)

B.每次连接最大请求数量采取默认设置：本地端--1024；远程端--256

C.本地线程池门限采用默认设置：32

3. 测试过程

先测试单个客户端的读写性能，再测试多个客户端的TPS,测试出服务器读写操作的TPS瓶颈。

3.1 单客户端测试读写性能及结果

在单个客户端对集群中的单表进行数据读写操作，测试读写性能。

具体过程：

100个并发向同一张表处理100W数据；

200个并发向同一张表处理100W数据；

500个并发向同一张表处理100W数据；

1000个并发向同一张表处理100W数据；

1500个并发向同一张表处理100W数据；

（脚本测试所在机器：10.112.68.186）

测试结果：

l 表一单数据库100W数据性吞吐量性能测试

	100	200	500	1000	1500
insert	5472	5574	23429	30781	35024
select	18985	20323	35795	39088	38927
update	5766	5824	27805	34301	35867
delete	5446	5328	26581	34934	34635

l 表二单数据100W数据时间耗时时测试

	100	200	500	1000	1500
insert	182.734	179.406	42.683	32.488	28.566
select	52.672	49.206	27.937	25.583	25.702
update	173.439	171.717	25.779	29.154	27.895
delete	183.608	187.671	37.621	28.625	28.887

为了直观上看各项性能变化，将上述表格使用折线图表示，如图1、图2所示：

图1 100W性能测试—TPS

图2 100W性能测试—耗时(S)

3.2 多客户端测试读写性能及结果

在多个客户端分别对集群中的同一张表进行数据读写操作，测试读写性能。

过程：

I. 2个客户端进行分别处理100W数据，将各个客户端TPS值相加，计算集群TPS；

II. 3个客户端进行分别处理100W数据, 将各个客户端TPS值相加，计算集群TPS；

III．依次增加客户端数量，计算TPS达到瓶颈之后，停止增加；

IV. 线程数量为500。

结果：

图3 多客户端性能测试—吞吐量（TPS）

集群达到瓶颈之后开始抛出如下错误信息：

Cassandra timeout during write query at consistency LOCAL_ONE (1 replica were required but only 0 acknowledged the write)

　　　　　　　　　　　　　　　　　　　　　　... ...

4 测试结论

( 1 ) 从单客户端测试数据得出在并发大于500后个并发范围内，各项操作TPS提升幅度较大，并发数量为1500时TPS趋于稳定，测试线程数大于1500之后会出现响应超时错误。

( 2 ) 当增加客户端数量，集群 TPS线性增加，集群读写TPS可以达到6万，之后趋于稳定，其中超过6个客户端同时进行百万级读数据操作时达到瓶颈，写操作在超过7个客户端后同时进行百万级写数据操作时性能达到瓶颈，此时写和修改操作TPS高于读的TPS。可知：大量数据操作时写的性能优于读。

附件：

测试代码 cassandra-test.rar

转载于:https://www.cnblogs.com/chenjunjie12321/p/8253034.html

Cassandra读写性能测试相关推荐

seafile 部署_Seafile开启webdav及读写性能测试
为什么要在seafile搞webdav Seafile 一直是一款可靠的文件同步web应用,经过个人测试,同一台机器上,seafile在传输文件时的速度比nextcloud要快(可能也与php的设置有 ...
influxdb mysql对比_InfluxDB读写性能测试
这里将告诉您InfluxDB读写性能测试,教程操作步骤: 今天进行了InfluxDB和MySQL的对比测试,这里记录下结果,也方便我以后查阅. 操作系统: CentOS6.5_x64InfluxDB版 ...
HADOOP读写性能测试
HADOOP读写性能测试一.操作系统磁盘IO测试 1磁盘写: [root@hadoop13 ~]# timedd if=/dev/zero of=/data/test.txt bs=1M coun ...
cassandra读写数据
cassandra读写数据写写一致性级别 cassandra的可调一致性级别意味着你可以在查询中指定所需的写操作一致性,一致性级别越高,说明需要更多的副本节点相应才能认为写操作完成,更高的一致性级 ...
PG-NoSQL特性：json和 jsonb 读写性能测试
json和 jsonb 读写性能测试文章目录 json和 jsonb 读写性能测试前言一.jsonb 类型创建索引二.json jsonb 表写性能测试 1.写入速度比较 2.两表占用空间间大 ...
termux获取sd卡读写权限_原来是用错了读卡器，雷克沙lexar 1667X 真实读写性能测试...
上一篇文章结合泥坑D3300套装老设备对雷克沙新版1667x 进行兼容性部分的测试,可以正常使用,而且在拍摄性能上有了很大的提升.当然雷克沙新版1667x 主要还是用来搭配SONY A6100来进行视 ...
nas 软件性能测试,理论读写性能测试
评测平台介绍与说明:硬件平台 CPUIntel Core i7 4770K 主板华硕Z87-A 内存金士顿 DDR3-1600 4G*2 硬盘主盘:浦科特M5P 512G 测试盘:HGST 4TB N ...
使用iozone进行磁盘读写性能测试
对于很多GIS工程师,经常需要对系统的磁盘性能进行测试,为了排查问题或者帮助用户进行系统设计. IOZone这个磁盘性能测试工具就是一个很方便的辅助工具. 下面就以个测试共享目录的读写性能为例,说明其 ...
使用maven编译YCSB0.1.4对cassandra进行性能测试
Yahoo! Cloud Serving Benchmark (YCSB) 是 Yahoo 公司的一个用来对云服务进行基础测试的工具.目标是促进新一代云数据服务系统的性能比较.目前支持对:Cassan ...

Cassandra读写性能测试