转自:http://yale.iteye.com/blog/1560539

Terracotta的介绍以及原理在我之前的文章中已经做了相关介绍,那么这次我们就来看看它是如何实现集群的。

测试代码编写

我们首先写一个demo,该demo在没有terracotta的环境下执行一次,看看结果
我们首先先写一个简单的多线程代码(我们这个例子制定共享TerracottaDemo类的demo对象,它包含的count和yale对象也就随之被整个集群共享了):

Java代码  
  1. package yale.terracotta.demo;
  2. public class TerracottaDemo implements Runnable {
  3. private static TerracottaDemo demo = new TerracottaDemo();
  4. private Object yale = new Object();
  5. private int count = 0;
  6. @Override
  7. public void run() {
  8. while (true) {
  9. synchronized (yale) {
  10. count++;
  11. System.out.println(Thread.currentThread().getName() + " count:"
  12. + count);
  13. }
  14. try {
  15. Thread.sleep((int) (1000 + Math.random()));
  16. } catch (Exception e) {
  17. e.printStackTrace();
  18. }
  19. }
  20. }
  21. public static void main(String[] args) {
  22. new Thread(demo).start();
  23. new Thread(demo).start();
  24. }
  25. }

该class文件存放在:

执行,开启不同的进程进行执行,看看结果:

上述执行环境是在win下,通过以上的执行情况我们可以看出,正常情况下各个进程调用各自JVM中的对象,并没有任何的共享

下载、安装
下载Terracotta,下载前需要注册帐号才能进行下载:
http://terracotta.org/:

从上面的信息中,我们可以看到,注册成功后进行邮件验证,验证成功后点击网站”open source”后,可以对其产品Ehcache、Quartz、BigMemory下载,我们下载terracotta (目前最高版本: terracotta-3.6.2.tar.gz、terracotta-ee-3.6.2-installer.jar)后:
安装方法一:解压相应的tar文件到相应的目录即可(Linux版本)即可
安装方法二:通过java –jar terracotta-ee-3.6.2-installer.jar
其实解压后的文件夹中,包含了相应的ehcache、quartz的相关产品

Terracotta Server配置方式
1、 单机,无持久化:服务器把集群要管理的数据保存在内存中,当数据量大于服务器可用内存的时候,会发生内存溢出错误。这种模式一般只在开发中使用;
2、 单机,持久化:服务器把集群要管理的数据保存在硬盘中,利用服务器上的内存作为缓存,以提高常用数据的访问速度。当数据量大于服务器可用内存的时候,服务器会把不常用数据从内存中移除,这样就不会发生内存溢出问题。当服务器宕机,然后被从新启动以后,硬盘中的数据被从新激活,这样集群中共享的数据不会丢失。这种配置提供了一定的灾难恢复(Fail over)的能力,但是还是无法做到高可用性(HA);
3、 双机或者多机镜像(mirroring):一般由两台或者多台物理服务器互为镜像。其中一台作为主服务器支持集群运行。其它备用服务器只是对数据做镜像,并且监视主服务器的状态。当主服务器发生故障宕机的时候,其中一台备用服务器自动升级为主服务器,接管整个集群的支撑工作。这样一来整个集群还继续正常运行,不会受任何影响。这种配置可以实现高可用性。一般对于这种配置模式,我们还把服务器数据配置为持久化模式,但是如果内存数量不是问题,用户也可以选择非持久化;
4、 服务器阵列分片模式(Server Array Striping):这是Terracotta FX系列产品独有的高端企业级特性,它主要用于提高集群性能。当集群中数据量和数据访问频率太高的时候,可以配置多台服务器,分别负责一部分集群数据的服务。比如集群共享数据达到1G个对象,如果用5台服务器做分片,每一台服务器可以负责2千万个对象。这样就实现了Terracotta服务器的负载均衡。这种数据分片的策略,也就是说哪个数据对象保存在哪个服务器上,对开发人员和实施维护人员是完全透明的。当服务器吞吐量不能满足要求的时候,用户可以考虑修改代码,对共享数据和应用系统中的数据访问算法进行优化;也可以简单地增加阵列分片服务器数量。后者往往是性价比比较高的方式。用户还可以考虑让两台服务器互为镜像,让多个镜像再组合成阵列分片。这样每个镜像做到高可用性,多个镜像在一起,实现集群性能的提高;

配置Terracotta集群
环境的准备工作(这次我们在linux下进行,3台服务器上进行,主节点服务器(192.168.2.11),子节点(192.168.2.11、192.168.2.21、192.168.2.221),现在我们把这个代码打jar包后放在下面配置的集群上,让多个JVM共同访问一个计数器)
1、 创建tc-config.xml文件,存放到terracotta根目录下(可以通过config-samples文件夹下的tc-config-express-reference.xml文件进行修改),该文件是描述client节点在TC Server中行为的唯一信息,也是我们的程序作为Terracotta Client节点添加时主要的内容(为了能够让任何节点都在不修改的情况下都能成为主节点,我在配置文件中配置了一些冗余的信息,以及在每个节点都建立了相同的文件夹):
每个节点都有红框中的文件夹

配置文件(一个完整的tx-config.xml文件,附带有文件属性说明,每个节点内容都一样,创建好后,可以直接拷贝到其他节点):

Xml代码  
  1. <?xml version="1.0" encoding="UTF-8" ?>
  2. <tc:tc-config xmlns:tc="http://www.terracotta.org/config"
  3. xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  4. xsi:schemaLocation="http://www.terracotta.org/schema/terracotta-6.xsd">
  5. <!-- # 配置TERRACOTTA CLUSTER的优化属性,可以放在这里,也可以放在TC.PROPERTIES文件中,TERRACOTTA依以下次序读取属性配置
  6. # 1、安装JAR # 2、本XML文件的tc-config节 # 3、tc.properties文件 # 4、系统属性定义 -->
  7. <tc-properties>
  8. <!--
  9. <property name="l1.cachemanager.percentageToEvict" value="10"/>
  10. <property name="l1.cachemanager.sleepInterval" value="3000"/>
  11. <property name="l1.cachemanager.criticalThreshold" value="90"/>
  12. <property name="l1.cachemanager.threshold" value="70"/>
  13. <property name="l1.cachemanager.monitorOldGenOnly" value="true"/>
  14. -->
  15. <property name="l2.nha.dirtydb.autoDelete" value="true" />
  16. <property name="l1.cachemanager.enabled" value="true" />
  17. <property name="logging.maxLogFileSize" value="1024" />
  18. </tc-properties>
  19. <!-- SYSTEM这一节记录一些影响Terracotta全局的数据 -->
  20. <system>
  21. <!--default:development can setup "production" -->
  22. <configuration-model>development</configuration-model>
  23. </system>
  24. <!--
  25. Servers节点内,用来指定Servers Array里所有服务器,TC Server通过子节点<dso-port>来配置服务监听端口为9510,
  26. 使TC client与DSO模式协同工作
  27. -->
  28. <servers>
  29. <server host="192.168.2.11" name="oraclerac1"
  30. bind="192.168.2.11">
  31. <!--当配置以持久方式(persistent)保存数据时候的数据存放地址-->
  32. <data>/usr/java/terracotta/server-data</data>
  33. <!--日志存放地址-->
  34. <logs>/usr/java/terracotta/server-logs</logs>
  35. <index>/usr/java/terracotta/server-index</index>
  36. <!--供客户端调用的端口-->
  37. <dso-port>9510</dso-port>
  38. <!--供jmx调用的端口-->
  39. <jmx-port>9520</jmx-port>
  40. <!--server间的监听端口-->
  41. <l2-group-port>9530</l2-group-port>
  42. <!--
  43. 一个空的<authentication/>代表使用JAVA默认的JMX认证方式,需要修改:$JAVA_HOME/jre/lib/management/jmxremote.password
  44. 增加一行 用户 密码 #
  45. $JAVA_HOME/jre/lib/management/jmxremote.access,
  46. 增加一行 用户 readwrite # 同时要执行 #
  47. 1、chmod 500 jmxremote.password
  48. 2、chown <启动TC-SERVER的用户>
  49. jmxremote.password
  50. -->
  51. <authentication />
  52. <!--
  53. # 定义terracotta http server 访问用户管理文件名,文件格式为 # username: password [,rolename ...]
  54. # rolename目前只有statistics,允许收集统计数据
  55. <http-authentication> <user-realm-file>/usr/java/terracotta/realm.properties</user-realm-file>
  56. </http-authentication> -->
  57. <dso>
  58. <!--
  59. 定义在server 启动后多少秒内,可以连接?
  60. -->
  61. <client-reconnect-window>120</client-reconnect-window>
  62. <!--
  63. 定义DSO对象的持久性保存方式 # temporary-swap-only-方式只临时使用下磁盘,比permanent-store方式要快些
  64. # permanent-store-方式只有变化立即写入磁盘,更有利于SERVER异常后的数据恢复。
  65. # 默认为temporary-swap-only方式
  66. -->
  67. <persistence>
  68. <mode>permanent-store</mode>
  69. </persistence>
  70. <garbage-collection>
  71. <!--
  72. 配置分布式JVM垃圾的回收方式,true代表自动回收,false模式下只有在'run-dgc'脚本被调用的情况才回收
  73. -->
  74. <enabled>true</enabled>
  75. <!-- 配置为TRUE在分布式垃圾回收的时候是否写额外信息到日志中,有利于系统优化 -->
  76. <verbose>false</verbose>
  77. <!-- 分布式垃圾回收时间间隔,单位秒 -->
  78. <interval>3600</interval>
  79. </garbage-collection>
  80. </dso>
  81. </server>
  82. <server host="192.168.2.21" name="oraclerac2">
  83. <data>/usr/java/terracotta/server-data</data>
  84. <logs>/usr/java/terracotta/server-logs</logs>
  85. <index>/usr/java/terracotta/server-index</index>
  86. <dso-port>9510</dso-port>
  87. <jmx-port>9520</jmx-port>
  88. <l2-group-port>9530</l2-group-port>
  89. <authentication />
  90. <dso>
  91. <client-reconnect-window>120</client-reconnect-window>
  92. <persistence>
  93. <mode>permanent-store</mode>
  94. </persistence>
  95. <garbage-collection>
  96. <enabled>true</enabled>
  97. <verbose>false</verbose>
  98. <interval>3600</interval>
  99. </garbage-collection>
  100. </dso>
  101. </server>
  102. <server host="192.168.2.221" name="dataguard">
  103. <data>/usr/java/terracotta/server-data</data>
  104. <logs>/usr/java/terracotta/server-logs</logs>
  105. <index>/usr/java/terracotta/server-index</index>
  106. <dso-port>9510</dso-port>
  107. <jmx-port>9520</jmx-port>
  108. <l2-group-port>9530</l2-group-port>
  109. <authentication />
  110. <dso>
  111. <client-reconnect-window>120</client-reconnect-window>
  112. <persistence>
  113. <mode>permanent-store</mode>
  114. </persistence>
  115. <garbage-collection>
  116. <enabled>true</enabled>
  117. <verbose>false</verbose>
  118. <interval>3600</interval>
  119. </garbage-collection>
  120. </dso>
  121. </server>
  122. <ha>
  123. <!--下面的mode我们选用了networked-active-passive方式, 表示DSO数据是存放在不同的TC Serer上的,
  124. 数据的同步通过 网络数据来交换完成,该模式下的active和passive实际上是通过 状态检查和投票产生的,
  125. 而另外一种方式disk-based-active-passive表示 TC serers的DSO数据是存放在同一个存储设备上的,
  126. 不同的TC serers 通过网络文件系统等方式在配置文件的<data>属性中被引用,该模式下的active和
  127. passive是通过disk lock来完成的
  128. -->
  129. <mode>networked-active-passive</mode>
  130. <networked-active-passive>
  131. <!--心跳检查间隔,单位秒-->
  132. <election-time>5</election-time>
  133. </networked-active-passive>
  134. </ha>
  135. <update-check>
  136. <!--运行时候是否进行Terracotta版本检查,会连接Terracotta.org-->
  137. <enabled>true</enabled>
  138. <!--检查间隔天数,默认为7-->
  139. <period-days>10</period-days>
  140. </update-check>
  141. </servers>
  142. <!--设置影响所有连接到系统的client-->
  143. <clients>
  144. <!--告诉dso把TC client的日志放在哪里,可以使用参数 %h代表hostname, %i代表IP地址,
  145. 默认为启动client的目录的相对目录,也可以使用绝对路径-->
  146. <logs>/usr/java/terracotta/client-logs/pojo/%i</logs>
  147. </clients>
  148. <application>
  149. <dso>
  150. <!-- 定义那些class应该有terracotta来构建,即应该在jvm进行cluster和共享,可以通过定义包含(include)及 排除
  151. (exclude)两种方式来配置
  152. -->
  153. <instrumented-classes>
  154. <!--添加自定义的对象/类被共享,但是这个类中有的字段是被描述成"transient"的,还是应该 保持"transient"字段应有的特性,
  155. 通过设置<honor-transient>为'true',已经声明成"transient"的 字段他们的状态和值不会在不同应用的实例间可用,只有本地的
  156. 应用实例可以创建,读,写这些字段, 如果应用程序有对其依赖的包,此处还需进行添加
  157. -->
  158. <include>
  159. <class-expression>
  160. yale.terracotta.demo.TerracottaDemo
  161. </class-expression>
  162. <!--如果设置为false,那么所有标示为临时对象(transient)的类都要求使用terracotta来构建-->
  163. <honor-transient>true</honor-transient>
  164. <!-- 定义在装载类时候要执行的动作: 如果是java类方法,使用method,注意method不能有参数,调用脚本,
  165. 使用execute 如果配置了onload,那么method和execute 2者必须配置一种
  166. <on-load><method></method></on-load>
  167. -->
  168. </include>
  169. </instrumented-classes>
  170. <!--
  171. 列出临时属性field,即不需要在cluster、shared的属性列表
  172. <transient-fields> <field-name>xx.yy.zz</field-name>
  173. <field-name>xx.yy.zz</field-name> </transient-fields>
  174. -->
  175. <!-- 告知DSO哪些应用在你的web容器中使用DSO,对于session内共享对象是否使用auto-lock模式自动进行管理,
  176. 可以通过设置session-locking值来决定,如果设置为false,就不进行auto-lock自动模式管理,而是需要应用进行控制,
  177. 但无论哪种模式,通过HttpSession对象进行操作,比如setAttribute(), setMaxInactiveInterval()仍然自动会锁
  178. <web-applications>
  179. <web-application>yale_app</web-application>
  180. <web-application session-locking="false">yale_app1</web-application>
  181. </web-applications>
  182. -->
  183. <roots>
  184. <root>
  185. <!--变为全局变量-->
  186. <field-name>
  187. yale.terracotta.demo.TerracottaDemo.demo
  188. </field-name>
  189. <!--
  190. <root-name></root-name>
  191. <distributed-methods>
  192. <method-expression></method-expression>
  193. </distributed-methods>
  194. 使这些字段“transient”,这样这些值就只能在本地上是可用的
  195. <transient-fields>
  196. <field-name></field-name>
  197. </transient-fields>
  198. -->
  199. </root>
  200. </roots>
  201. <!--
  202. 分布式方法调用,当某个method在一个JVM被调用后,整个cluster下jvm都调用此method,常用于事件监听
  203. <distributed-methods> 设置为false,那么只有在method归属对象在jvm已经创建,method才被调用,默认为true
  204. <method-expression run-on-all-nodes="false">xx.yy.zz</method-expression>
  205. </distributed-methods>
  206. -->
  207. <!--
  208. 可以通过将应用放在同一应用组中来共享class,但必须将应用放在不同Terracotta节点中, 比如放在不同web server实例中,
  209. 目前Terracotta不支持在同一节点中共享不同应用的class 同时可以通过named-classloader指定class 装载类
  210. <app-groups>
  211. <app-group name="petstore-group">
  212. <web-application>yale_app</web-application>
  213. <web-application>yale_app1</web-application>
  214. <named-classloader>Standard.system</named-classloader>
  215. </app-group>
  216. </app-groups>
  217. -->
  218. <!-- 默认为TURE,启用 mutations方式来影射共享对象 <dso-reflection-enabled>true</dso-reflection-enabled> -->
  219. <!-- 本节用于设置自定义的锁,锁可以分为自动锁(autolock)和命名锁(named-lock) # 锁的级别可以分为:
  220. # 1、写锁write # 2、同步写锁synchronous-write # 3、读锁read # 4、并发锁 concurrent # 其中并发锁一定要小心使用,
  221. 并发允许同时写一个对象。 -->
  222. <locks>
  223. <!-- 对一个已经声明为共享的对象进行操作,告诉DSO,当调用这些对象的时候,
  224. 假设给它加上 了一把持久的锁。 autolock锁可以将你期望的方法,通过java的同步机制(block和method)来进行管理,
  225. 对于没有定义为synchronized的对象,需要设置auto-synchronized=true,比如<autolock auto-synchronized=true> name-lock
  226. 完全依赖于java的synchronization机制,可以对锁进行命名以方便管理 例子中给TerracottaDemo.run()方法定义了自动锁(autolock)。
  227. 他告诉Teraccotta当这个方法对共享的数据加锁的时候(TerracottaDemo.yale对象是共享的),使得这个锁在整个集群范围内生效。
  228. 这样一来集群中任何一个线程锁住这个对象的时候,其它任何线程都要等这个锁解除 后才能访问被保护的数据(TerracottaDemo.count)。
  229. 这样计数器的访问也就在整个集群中得到了保护
  230. -->
  231. <autolock>
  232. <method-expression>
  233. void yale.terracotta.demo.TerracottaDemo.run()
  234. </method-expression>
  235. <lock-level>write</lock-level>
  236. </autolock>
  237. </locks>
  238. </dso>
  239. </application>
  240. </tc:tc-config>

2、 拷贝tc-config.xml(上面已经存在该文件了)文件到各个linux服务器上(存放在terracotta根目录下)
 3、 把上面的线程的代码例子打成jar包,拷贝到各个linux服务器上(存放在terracotta根目录下)

主节点操作以下命令(192.168.2.11):
进入到$TC_HOME/bin目录,执行start-tc-server.sh,未执行参数-f<tc-config.xml>启动时,启动程序会使用tc.jar包里自带的默认配置文件’com/tc/config/schema/setup/default-config.xml’:

我们不采用上面的启动方式,我们启动指定的配置文件:

我们可以看到terracotta server已经启动成功

子节点操作以下命令(192.168.2.11、192.168.2.2192.168.2.221):
我们依次启动3个子节点服务器后,可以看到控制台打印的结果(控制台显示客户端已经成功连接到服务器192.168.2.11:9510,我们可以看到计数器仍然在累加,在全局范围内共享):

可见计数器已经在集群中被3个Java程序实例所共享。每个程序有两个线程访问计数器。这样整个集群中实际上有6个线程在同时累加计数器, 从上面可以看到,整个Java代码没有作任何改动。只是增加了一个tc-config.xml文件,从tc-config.xml文件中的配置内容可以看出,terracotta还是做了很多的工作的,而且已经比较完善,其实不管它是结合自己的产品ehcache、quartz进行整合,还是结合apache下的相关产品进行整合,terracotta可以整合的产品较多,因此我们也没有必要一个一个去搭建,它们的整合过程只是在配置的方式上有所不同,其实我们在深入了解它的原理后在进行其他产品的整合,其实都是一个简单的过程。

Terracotta Server集群相关推荐

  1. 一张图解释SQL Server集群、镜像、复制、日志传送

    一张图解释SQL Server集群.镜像.复制.日志传送 本文版权归作者所有,未经作者同意不得转载.

  2. Eureka Server 集群

    Eureka Server 集群建立的步骤相对简单, 1.需要修改application.yml配置文件 spring:application:name: eureka-server--- sprin ...

  3. 配置 Eureka Server 集群

    简介 为了使 Eureka Server 实现高可用,我们需要为它配置集群.这样当有一台 Eureka Server 有故障时,集群中的其他 Server 可以进行代替.Eureka 集群之中的 No ...

  4. SQL Server集群

    SQL Server 集群   很多组织机构慢慢的在不同的服务器和地点部署 SQL Server 数据库 -- 为各种应用和目的 -- 开始考虑通过 SQL Server 集群的方式来合并. 将 SQ ...

  5. ArcGIS Server集群部署基于Windows系统

    ArcGIS Server集群部署 1 几个重要的概念 1.1 服务.池化.实例 使用ArcGIS Server发布一个地图服务,发布服务的同时会要求定义池化的类型.最小最大实例数.用户请求一个ser ...

  6. weblogic安装和配置WebLogic Server集群

    weblogic安装 点下一步即可 然后开始 配置WebLogic Server集群 WebLogic集群的体系结构 单层混合型的集群架构(Cluster) 这种架构将所有的Web应用以及相关的服务应 ...

  7. Eureka Server集群数据同步

    一.数据同步 Eureka Server之间会互相进行注册,构建Eureka Server集群,不同Eureka Server之间会进行服务同步,用来保证服务信息的一致性.当服务提供者发送注册请求到一 ...

  8. 3、Spring Cloud - Eureka(高可用Eureka Server集群)

    在实际的项目中,可能有几十个或者几百个的微服务实例,这时 Eureka Server 承担了非 常高的负载.由于 Eureka Server 在微服务架构中有着举足重轻的作用,所以需要对 Eureka ...

  9. Yarn上(Hadoop上)跑Spark出现Retring connect to server. 集群间机器无法连接的问题

    如果配置都正常的话,就删除zookeeper上的spark节点,再重启zk(特别是配置了历史服务器后应当做这一步) zkCli.sh deleteall /spark 如果上述不管用的话,尝试格式化h ...

最新文章

  1. (已解决torchvision中CIFAR10下载速度慢)如何下载以及使用torchvision导入
  2. CocoaPods安装与使用
  3. python的concat函数_python concat函数
  4. golang break label 与goto label
  5. 给iOS库添加Cocoapods支持
  6. jQuery hasAttr检查元素是否有属性[重复]
  7. 编译原理——Lex与Yacc及应用
  8. 短消息代理(cmpp20 smproxy)要怎么创建java项目_基于华为smproxy开发的cmpp3
  9. 单盘齿廓测量仪的设计
  10. Python实战(07):使用selenium刷访问量
  11. jmu-python-函数-找钱
  12. 【linux】正点原子linux教程学习
  13. 大数据开发岗面试30天冲刺 - 日积月累,每日五题【Day01】——Hive1
  14. 没有投屏标志怎么投屏_没有【TV】小图标,手机怎么投屏电视
  15. linux命令:Linux命令大全
  16. HP ProBook 4421s配置完成无线网卡
  17. 电瓶车车钥匙怎么拆开换电池
  18. 【蓝桥杯单片机进阶强化-04】PCF8591与24C02综合应用-智能照明自动控制器
  19. 微信卡券领用的附加测试
  20. 计算机图形学 学习笔记(五):多边形裁剪(Suther land-Hodgeman),文字裁剪

热门文章

  1. 转载:解决 ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using passw
  2. 什么是数据库连接池?数据库连接池的机制?
  3. P4学习笔记(一)初识P4
  4. Spring @Autowired 用法
  5. A. Chess Placing
  6. Spring AOP 中 advice 的四种类型 before after throwing advice around
  7. 《实用C++》第10课:if 语句实现关系运算
  8. MySQL数据库的官网下载、安装及卸载(2018年最新)
  9. com.android.ide.common.signing.KeytoolException: Failed to read key AndroidDebugKey from store
  10. php短信验证案例,PHP项目之容联云短信发送验证码