前一篇文章,我们介绍了如何安装部署Ignite集群,并且尝试了用REST和SQL客户端连接集群进行了缓存和数据库的操作。现在我们就来写点代码,用Ignite的Java thin client来连接集群。 在开始介绍具体代码之前,让我们先简单的了解一下Ignite的thin client,以及背后的binary client protocol(原本打算把thin client翻译为精简客户端,bianry client protocol翻译为二进制客户端协议,但总读的不顺口,就索性就不翻译了吧-_-|||)。

Ignite Thin Client和Binary Client Protocol介绍

为了缓存数据的高性能读写,Ignite是节点内部需要维护一套高效的数据结构来记录一些元数据,所以如果在自己的应用程序中启动一个Ignite的server/client节点是要占用一些应用程序的CPU/内存资源的。另外,Ignite是一个分布式系统,单个节点需要和集群里的其他节点通讯,又要消耗一些的网络资源。 因此不同于server/client节点,thin client是一个Ignite轻量化的客户端。为什么说它是轻量化的呢,因为thin client并不会加入到Ignite集群的拓扑中(即thin client的连接,断开不会导致Ignite集群拓扑发生变化,也不会触发相应的事件通知),不会存储任何集群的数据或是被做为计算节点接收计算任务。Thin client就是一个纯粹的客户端,它纯粹到通过最原始的socket连接到Ignite集群中的某一个节点进行所有的操作。

在Ignite集群成功启动后,我们会在日志看到“Topology snapshot [ver=1, servers=1, clients=0, CPUs=2, offheap=1.6GB, heap=1.0GB]”信息。这条日志里的clients和thin client不是一回事。按照之前介绍,thin client是不会加入Ignite集群的拓扑中去,理应不会出现在和拓扑相关的日志中,所以这里不要把thin client和集群中的client节点搞混了。

这个链接详细的介绍了Binary Client Protocol的数据格式(比如采用的是litter-endian,Ignite的二进制对象描述用户数据),消息格式(定义了消息头格式,响应消息的格式,以及连接时如何进行握手保证版本兼容等)和各种缓存操作所需的操作编码和格式。 所以只要你按照Binary Client Protocol的要求,你可以用任何一种语言实现一个thin client。目前Ignite发布了两种语言的thin client的实现,一个是基于Java实现,一个是基于.Net实现。

当然thin client虽然轻量化,也有它的问题。 Thin client写数据时只能先把数据发给其连接的节点,再由该节点将数据发送给集群内的其他节点做存储(同理,读数据也需要通过该节点才能传给thin client),这样thin client和这个节点间的网络很有可能就成为瓶颈。而server/client节点间可以互联,利用数据分区,可以充分使用节点间的带宽。另外,当前连接节点出故障后,thin client只能随机选择一个启动时已知的节点进行重试,由于其不感知集群拓扑,即便有新节点加入,thin client也无法知道其存在,更不可能和其进行通讯了。 所以还是要根据自己应用的场景,看看到底是server/client节点还是thin client更合适。

Ignite Java Thin Client例子

上一篇文章中,我们用Dbeaver连接Ignite后,用SQL语句进行建表,插入数据和查询数据。 在这个例子里,我们就来看看如何通过Ignite的thin client支持的JCache APIs进行相同的操作。

首先我们先用用maven命令创建一个新的project,然后在pom.xml文件中添加以下ignite-core的依赖:

org.apache.ignite

ignite-core

${ignite.version}

在看具体代码之前,让我们先来大概了解一下这个例子中我们要进行哪些操作以及步骤:

首先,我们通过thin client连接上我们已经启动的Ignite集群。

然后,通过API创建两个cache(cache的名字分别为province和city),一个用来存省份信息,一个用来存城市信息。 province缓存的key是省份的id,city缓存的key是城市的名称。

我们分别往两个cache里写入一些数据。

启动该程序时,可以从命令行传入多个城市名称,在终端我们会打印出该城市所在的省份信息。

下面是主程序的代码:

import org.apache.ignite.Ignition;

import org.apache.ignite.client.ClientCache;

import org.apache.ignite.client.ClientException;

import org.apache.ignite.client.IgniteClient;

import org.apache.ignite.configuration.ClientConfiguration;

public class IgniteThinClientExample {

private static ClientCache provinceCache;

private static ClientCache cityCache;

public static void main(String[] args) {

System.out.println();

System.out.println("Ignite thin client example started.");

//连接到Ignite集群,默认端口号为10800

ClientConfiguration cfg = new ClientConfiguration().setAddresses("192.168.0.110:10800");

//用java的try-with-resource statement启动client

try (IgniteClient igniteClient = Ignition.startClient(cfg)){

System.out.println();

System.out.println("Begin create cache and insert data.");

//创建两个缓存,具体步骤见该函数

creatCacheAndInsertData(igniteClient);

System.out.println();

System.out.println("Begin query cache.");

//根据输入开始查询

for(String city : args)

{

//先用城市名字,查询city缓存

City c = cityCache.get(city);

Province p = null;

if (c != null)

{

//在用城市数据中的province id查询province缓存

p = provinceCache.get(c.getProvinceId());

}

//输出查询结果

if (c != null && p != null) {

System.out.println("Find " + c.getName() + " in province " + p.getName());

}

else

{

System.out.println("Cannot find " + city + " in any province.");

}

}

}

catch (ClientException e) {

System.err.println(e.getMessage());

}

catch (Exception e) {

System.err.format("Unexpected failure: %s\n", e);

}

}

private static void creatCacheAndInsertData(IgniteClient igniteClient)

{

//创建province缓存,用来存放省份信息,该缓存以省的id为key

final String PROVINCE_CACHE_NAME = "province";

provinceCache = igniteClient.getOrCreateCache(PROVINCE_CACHE_NAME);

//往province缓存中写入一些数据

int provinceId = 1;

final Province on = new Province(provinceId++, "Ontario");

final Province ab = new Province(provinceId++, "Alberta");

final Province qc = new Province(provinceId++, "Quebec");

provinceCache.put(on.getId(), on);

provinceCache.put(ab.getId(), ab);

provinceCache.put(qc.getId(), qc);

System.out.println("Successfully insert all provinces data.");

//创建city缓存,用来存放城市信息,该缓存以城市的名字为key

final String CITY_CACHE_NAME = "city";

cityCache = igniteClient.getOrCreateCache(CITY_CACHE_NAME);

//往city缓存写入一些数据

int cityId = 1;

final City toronto = new City(cityId++, "Toronto", on.getId());

final City edmonton = new City(cityId++, "Edmonton", ab.getId());

final City calgary = new City(cityId++, "Calgary", ab.getId());

final City montreal = new City(cityId++, "Montreal", qc.getId());

cityCache.put(toronto.getName(), toronto);

cityCache.put(edmonton.getName(), edmonton);

cityCache.put(calgary.getName(), calgary);

cityCache.put(montreal.getName(), montreal);

System.out.println("Successfully insert all city data.");

}

}

public class City {

private int id;

private String name;

private int provinceId;

...

}

public class Province {

private int id;

private String name;

...

}

成功的编译project后,我们可以启动这个client看看程序的输出结果:

$java -cp $IGNITE_HOME/libs/*:./ignite-thin-client-example-1.0-SNAPSHOT.jar IgniteThinClientExample Toronto Markham Edmonton Calgary

Ignite thin client example started.

Begin create cache and insert data.

Successfully insert all provinces data.

Successfully insert all city data.

Begin query cache.

Find Toronto in province Ontario

Cannot find Markham in any province.

Find Edmonton in province Alberta

Find Calgary in province Alberta

因为我们的city缓存中,并没有Markham的信息,所以查询Markham的时候我们也找不到对应的省份信息。但是查询Toronto,Edmonton和Calgary的时候,程序是能正确的返回其省份信息的。

在上面的例子中,有几个需要注意的地方:

在我们连接Ignite集群的时候,用的端口号10800。默认配置下,Ignite会监听该端口,等待thin client的连接。如果需要让Ignite集群用不同的端口号,可以修改集群启动时的配置文件,加入以下配置项(如果你是用上一篇文章的方法启动的Ignite集群, 配置文件在$IGNITE_HOME/config/default-config.xml):

我们的插入和查询数据的时候,只用到了最简单缓存API--put和get。其实Ignite缓存的查询API比其他缓存更丰富,支持scan/SQL/text方式进行查询,这个我们会在后面的文章慢慢介绍。

我们用城市的名字查询完city缓存后,再拿着province id去查询province缓存。这两步查询其实是可以合并成一个SQL的join查询,在后面介绍SQL查询时,我们再来看看把两个缓存当做两张表做join操作。

总结

这篇文章我们介绍了Ignite的thin client,并用Ignite的Java think client实现了一个简单的例子,解释如何用thin client连接上Ignite集群,创建缓存,写入数据以及查询。 完整的代码和maven工程文件戳这里。

下一篇文章,我们看看如何在自己的Java代码里启动Ignite集群及其相关配置。

java jdbc 连接ignite_Apache Ignite 学习笔记(二): Ignite Java Thin Client相关推荐

  1. Java学习笔记二十:Java中的内部类

    Java中的内部类 一:什么是内部类: (1).什么是内部类呢? 内部类( Inner Class )就是定义在另外一个类里面的类.与之对应,包含内部类的类被称为外部类. (2).那为什么要将一个类定 ...

  2. java 模块设计模式_Java9模块化学习笔记二之模块设计模式

    模块设计的原则: 1.防止出现编译时循环依赖(主要是编译器不支持),但运行时是允许循环依赖的,比如GUI应用 2.明确模块的边界 几种模块设计: API模块,聚合模块(比如java.base) 可选依 ...

  3. GuavaCache学习笔记二:Java四大引用类型回顾

    前言 上一篇已经讲了,如何自己实现一个LRU算法.但是那种只是最基本的实现了LRU的剔除策略,并不能在生产中去使用.因为Guava Cache中使用的是SoftReference去做的value实现, ...

  4. java冰法_Java基础学习笔记二 Java基础语法

    注释 注释用来解释和说明程序的文字,注释是不会被执行的. 单行注释 //这是一条单行注释 public int i; 多行注释 /*这是 * 一段注释, * 它跨越了多个行*/ public void ...

  5. java沙盒模式_JavaScript学习笔记(二十五) 沙箱模式

    沙箱模式(Sandbox Pattern) 沙箱模式可以避免命名空间的一些缺点(namespacing pattern),比如: 依赖一个唯一全局的变量作为程序的全局符号.在命名空间模式中,没有办法存 ...

  6. java 字符串常用函数_Java学习笔记35:Java常用字符串操作函数

    package com.xxx.controller.api; import org.apache.commons.lang.StringUtils; public class Test { publ ...

  7. 拉勾网《32个Java面试必考点》学习笔记之二------操作系统与网络知识

    本文为拉勾网<32个Java面试必考点>学习笔记.只是对视频内容进行简单整理,详细内容还请自行观看视频<32个Java面试必考点>.若本文侵犯了相关所有者的权益,请联系:txz ...

  8. Java学习笔记二:数据类型

    Java学习笔记二:数据类型 1. 整型:没有小数部分,允许为负数,Java整型分4种:int short long byte 1.1 Int最为常用,一个Int类型变量在内存中占用4个字节,取值范围 ...

  9. Java web与web gis学习笔记(二)——百度地图API调用

    系列链接: Java web与web gis学习笔记(一)--Tomcat环境搭建 Java web与web gis学习笔记(二)--百度地图API调用 JavaWeb和WebGIS学习笔记(三)-- ...

最新文章

  1. weblogic管理1——创建 和 删除一个domain
  2. leetcode 342. Power of Four
  3. 逻辑漏洞之任意用户登陆漏洞
  4. 前端手动封装数组的foreach,map,filter,every,some,Reduce,reduceRight方法
  5. list 释放 java_Java --list 常用方法汇总一
  6. 运维:使用awk命令获取文本的某一行,某一列
  7. 内核开发知识第二讲,编写Kerner 程序中注意的问题.
  8. fiddler显示服务器IP
  9. Java学生管理系统(数组版)
  10. Python Excel操作人口普查
  11. 基于javacv的视频转码(升级版)
  12. Adobe Creative Cloud 不能加载APP导致卸载ps失败 解决方案
  13. 自学软件测试需要学到哪些内容?
  14. RenderingNG中关键数据结构和它们的角色
  15. 服务器快速操作pc文件,如何将普通pc做服务器
  16. 5G网络优化.PPT
  17. 苹果 iOS 10 更新消息汇总,iPhone 4s 可能用不了
  18. 计算机网络(2)——标准化工作及相关组织
  19. Stata实验——关于我国GDP增长率和CONS增长率
  20. PaperWeekly 第32期 | 基于知识图谱的问答系统关键技术研究 #01

热门文章

  1. ELIC: Efficient Learned Image Compression...
  2. 【Python】三种读取图片和显示图片的方法 pillow opencv torchvision
  3. 知识分享:安全的最底层---硬件芯片安全
  4. c语言写排行榜(只保留前五名的数据)
  5. ![CDATA[ ]
  6. 最值得收藏的java技术博客(Java篇)
  7. 2021年焊工(初级)复审考试及焊工(初级)实操考试视频
  8. 点石互动--robin之:网站内链建设不容忽视
  9. Android实现定时器的几种方法
  10. Linux Vim 替换日期