java kafka消息的发送与接收

消息队列在java EE级开发是很常用到的工具之一,在众多消息队列当中,active mq与kafka相对比较受开发者的喜爱,那么kafka是怎样实现消息的发送与接收呢?这里我们的消息通过一个实体类对象来进行封装,前提是你服务器上已经搭建好kafka环境,整个代码如下:
       1、kafka工具类,实现了生产者消费者消息的封装,以及发送消息到kafka上和从kafka上获取消息。

package com.starit.ipran.kafka;
import java.util.ArrayList;
import java.util.Arrays;
import java.util.Date;
import java.util.HashMap;
import java.util.List;
import java.util.Map;
import java.util.Properties;
import org.apache.kafka.clients.consumer.Consumer;
import org.apache.kafka.clients.consumer.ConsumerRecord;
import org.apache.kafka.clients.consumer.ConsumerRecords;
import org.apache.kafka.clients.consumer.KafkaConsumer;
import org.apache.kafka.clients.producer.KafkaProducer;
import org.apache.kafka.clients.producer.Producer;
import org.apache.kafka.clients.producer.ProducerRecord;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import com.alibaba.fastjson.JSON;
import com.alibaba.fastjson.JSONObject;
import com.starit.ipran.load.Constants;
import com.starit.ipran.model.IpranAlarm;
public class KafkaUtils {
private final static Logger LOGGER = LoggerFactory.getLogger(KafkaUtils.class);
private static Producer<String, String> producer;
private static Consumer<String, String> consumer;
private KafkaUtils() {
}
/**
* 生产者,注意kafka生产者不能够从代码上生成主题,只有在服务器上用命令生成
*/
static {
Properties props = new Properties();
props.put("bootstrap.servers", Constants.BOOTSTRAP_SERVERS);//服务器ip:端口号,集群用逗号分隔
props.put("acks", "all");
props.put("retries", 0);
props.put("batch.size", 16384);
props.put("linger.ms", 1);
props.put("buffer.memory", 33554432);
props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");
producer = new KafkaProducer<>(props);
}
/**
* 消费者
*/
static {
Properties props = new Properties();
props.put("bootstrap.servers", Constants.BOOTSTRAP_SERVERS);//服务器ip:端口号,集群用逗号分隔
props.put("group.id", "test");
props.put("enable.auto.commit", "true");
props.put("auto.commit.interval.ms", "1000");
props.put("session.timeout.ms", "30000");
props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
consumer = new KafkaConsumer<>(props);
consumer.subscribe(Arrays.asList(Constants.TOPIC_NAME));
}
/**
* 发送对象消息 至kafka上,调用json转化为json字符串,应为kafka存储的是String。
* @param msg
*/
public static void sendMsgToKafka(IpranAlarm msg) {
producer.send(new ProducerRecord<String, String>(Constants.TOPIC_NAME, String.valueOf(new Date().getTime()),
JSON.toJSONString(msg)));
}
/**
* 从kafka上接收对象消息,将json字符串转化为对象,便于获取消息的时候可以使用get方法获取。
*/
public static void getMsgFromKafka(){
while(true){
ConsumerRecords<String, String> records = KafkaUtils.getKafkaConsumer().poll(100);
if (records.count() > 0) {
for (ConsumerRecord<String, String> record : records) {
JSONObject jsonAlarmMsg = JSON.parseObject(record.value());
IpranAlarm alarmMsg = JSONObject.toJavaObject(jsonAlarmMsg, IpranAlarm.class);
LOGGER.info("从kafka接收到的消息是:" + alarmMsg.toString());
}
}
}
}
public static Consumer<String, String> getKafkaConsumer() {
return consumer;
}
public static void closeKafkaProducer() {
producer.close();
}
public static void closeKafkaConsumer() {
consumer.close();
}
}

2、实体类是IpranAlarm,可以用其对象封装消息,调用发送与接收方法就可以实现相应的功能了。

java kafka消息的发送与接收相关推荐

  1. java activeMQ消息的发送与接收

    java activeMQ消息的发送与接收 activemq是我们经常用到的消息队列之一,比如说速度快,对spring的很好的支持,支持多种协议等等,今天我们就来看一下activeMQ消息的发送与接收 ...

  2. java向kafka推送数据_Java kafka消息的发送与接收

    一.项目工程结构 二.详细代码 KafkaUtils.java package com.bijian.study; import java.util.Arrays; import java.util. ...

  3. mfc 开启指定服务器,用MFC实现消息的发送和接收(含服务器)

    <用MFC实现消息的发送和接收(含服务器)>由会员分享,可在线阅读,更多相关<用MFC实现消息的发送和接收(含服务器)(33页珍藏版)>请在人人文库网上搜索. 1.精品好资料学 ...

  4. Android Java使用JavaMail API发送和接收邮件的代码示例

    JavaMail是Oracle甲骨文开发的Java邮件类API,支持多种邮件协议,这里我们就来看一下Java使用JavaMail API发送和接收邮件的代码示例 使用Javamail发送邮件,必需的j ...

  5. 【Spring Boot】Spring Boot之整合RabbitMQ并实现消息的发送和接收

    一.项目配置 1)引入maven坐标 <!--amqp--><dependency><groupId>org.springframework.boot</gr ...

  6. 探索 OpenStack 之(15):oslo.messaging 和 Cinder 中 MessageQueue 消息的发送和接收

    前言:上一篇文章 只是 RabbitMQ 的科普,本文将仔细分析 Cinder 中 RabbitMQ 的各组件的使用.消息的发送和接收等.由于各流程步骤很多,本文只会使用若干流程图来加以阐述,尽量做到 ...

  7. IBM MQ 搭建测试环境并测试消息的发送和接收

    一,说明 MQ基于Linux环境的安装比较简单,读者可以去网上自行搜索. 本文主要在于MQ队列管理器相关的部分. OS Version: Red Hat Enterprise Linux Server ...

  8. 【Unity】文字游戏制作插件Fungus教程(6)碰撞触发和消息的发送和接收

    如果在开发3D项目的时候 我们还可以用到Fungus插件来丰富我们游戏的内容 比如游戏的操作方法等提示信息我们完全可以使用碰撞和消息的接收和发送来触发提示语句 我举一个例子比如开发一个没有地图指示的探 ...

  9. Java+Kafka消息队列

    本文主要针对,Java端对Kafka消息队列的生产和消费.Kafka的安装部署,请看查看相关文章. 笔者最近所用的是Spring mvc,监听文件路径,然后将读取到的文件内容发送到消息队列中.由另外系 ...

最新文章

  1. init 0-6 (启动级别:init 0,1,2,3,4,5,6)
  2. pc显示器分辨率 前端_五款高性价比PC显示器推荐 499元起
  3. CentOS下配置HTTPS访问主机并绑定访问端口号
  4. 如何突破瓶颈又释放工作量? 深度剖析《闪耀暖暖》游戏从2D到3D的美术开发过程
  5. 内部属性 聚合_光的本质(用粒子性解释光的所有属性,颜色,介质内速度改变等)...
  6. 大数据集群被窃取数据怎么办?透明加密可以一试
  7. html下移,jQuery实现元素的上移下移删除
  8. 天梯—计算指数(C语言)
  9. 正版windows序列号被激活工具重置问题解决
  10. Python基础知识详解(十)小结,用python实现教师信息管理系统
  11. 就晚间宿舍熄灯时间调查
  12. Flixel 横板游戏制作教程(一)— HelloFlixel ...
  13. 未能加载文件或程序集“Microsoft.Web.Infrastructure”
  14. 十、软考·系统架构师——软件测试及维护
  15. 使用BG/NBD模型与Gamma-Gamma模型预测客户的生命周期价值CLV/LTV
  16. 召回率(rec),准确率(acc),精确率(pre),F1值
  17. 如何学习硬件电路设计,给出详细方案
  18. mysql dump -a -b_MySQL数据导出工具 mysqldump
  19. 开源软件是什么?有哪些?
  20. 电话忙音检测 知识集锦

热门文章

  1. 开源贴片机OpenPnp使用体验
  2. 大数据有哪些职位和工作机会?
  3. 阿里云开发板HaaS510响应UART串口指令
  4. Camstar客制化开发做查询操作(Designer中存放SQL语句)
  5. C语言metropolis方法,如何使用Metropolis-Hastings算法将C或C++代码合并到我的R代码中以加速MCMC程序...
  6. 混合模式:mix-blend-mode: difference
  7. NVIDIA安装CUDA在安装阶段提示NVIDIA安装程序失败
  8. 智慧社区解决方案-全套最新
  9. 【附源码】Python计算机毕业设计实验室安全准入考试系统
  10. GIS空间分析 叠加分析与缓冲区分析2 房产开发适宜性制图