java 连接kafka_设置多个kafka连接接收器
我正在研究从postgreSQL到HDFS的数据流 . 我在HDP 2.6沙箱上设置了融合环境 . 我对postgreSQL的jdbc源配置是
name=jdbc_1
connector.class=io.confluent.connect.jdbc.JdbcSourceConnector
tasks.max=1
connection.url=jdbc:postgresql://host:port/db?currentSchema=schema&user=user&password=password
mode=timestamp
timestamp.column.name=col1
validate.non.null=false
topic.prefix=psql-
连接的所有其他属性也很好,我正在运行它
./bin/connect-standalone ./etc/kafka/connect-standalone.properties ./etc/kafka-connect-jdbc/source.properties
它工作正常,并根据数据库中的表数创建主题
psql-table1
psql-table2
现在我想在所有主题上运行HDFS接收器,为postgreSQL数据库中的每个表创建单独的目录 . 但是当我用命令运行HDFS接收器时
./bin/connect-standalone ./etc/kafka/connect-standalone.properties ./etc/kafka-connect-hdfs/hdfs-postGres.properties
通过运行源我得到错误
ERROR Stopping after connector error (org.apache.kafka.connect.cli.ConnectStandalone:113)
org.apache.kafka.connect.errors.ConnectException: Unable to start REST server
at org.apache.kafka.connect.runtime.rest.RestServer.start(RestServer.java:214)
at org.apache.kafka.connect.runtime.Connect.start(Connect.java:53)
at org.apache.kafka.connect.cli.ConnectStandalone.main(ConnectStandalone.java:95)
Caused by: java.net.BindException: Address already in use
at sun.nio.ch.Net.bind0(Native Method)
at sun.nio.ch.Net.bind(Net.java:433)
at sun.nio.ch.Net.bind(Net.java:425)
at sun.nio.ch.ServerSocketChannelImpl.bind(ServerSocketChannelImpl.java:223)
at sun.nio.ch.ServerSocketAdaptor.bind(ServerSocketAdaptor.java:74)
at org.eclipse.jetty.server.ServerConnector.openAcceptChannel(ServerConnector.java:331)
at org.eclipse.jetty.server.ServerConnector.open(ServerConnector.java:299)
at org.eclipse.jetty.server.AbstractNetworkConnector.doStart(AbstractNetworkConnector.java:80)
at org.eclipse.jetty.server.ServerConnector.doStart(ServerConnector.java:235)
at org.eclipse.jetty.util.component.AbstractLifeCycle.start(AbstractLifeCycle.java:68)
at org.eclipse.jetty.server.Server.doStart(Server.java:398)
at org.eclipse.jetty.util.component.AbstractLifeCycle.start(AbstractLifeCycle.java:68)
at org.apache.kafka.connect.runtime.rest.RestServer.start(RestServer.java:212)
... 2 more
如果我停止源连接并启动接收器它工作正常 . 任何人都可以帮我,我可以设置多个水槽连接器 .
java 连接kafka_设置多个kafka连接接收器相关推荐
- 禁用计算机的网络连接无线网络连接,电脑设置了禁用网络,连接不上WIFI.怎么解除...
电脑设置了禁用网络,连接不上WIFI.怎么解除 电脑禁用网络连接不上WIFI的解决方法如下: 1. 确认FN快捷键已经打开,确认FN快捷键驱动,电源管理软件和无线网卡驱动正常安装; 2. 确认是否开启 ...
- win10计算机拨号连接,Win10设置电脑开机自动连接宽带的方法
原标题:Win10设置电脑开机自动连接宽带的方法 Win10如何设置计算机以自动连接宽带?使用计算机时通常使用许多用户.宽带连接在网上在线的方式,但许多用户每次都在线时需要手动去互联网,我觉得很麻烦. ...
- java jdbc超时设置_java – 为JDBC连接设置网络超时
我正在尝试使用 Java设置网络超时我的Oracle数据库连接.但是,我收到了一个错误.下面是示例代码,它是相应的例外. try{ conn = new Database("oracle&q ...
- 三星电视与计算机连接网络设置,三星电视怎么连接网络看电视?
电视用路由器上网,可以通过有线或无线上网,前提是电视支持有线或无线功能. 1.首先打开电视机. 2.按下遥控板的菜单按钮. 3.在菜单中选择网络设置. 4.如果是用有线,则用网线一头接路由器LAN口, ...
- 远程桌面连接如何设置?远程桌面连接的设置方法
远程桌面连接相信大家都不陌生,因为它发挥的用处太让人赞不绝口了.特别是人在家的时候需要紧急处理公司事务,不用亲自去公司一趟,直接开个远程桌面,远程连接办公电脑,用家里的笔电就能完美衔接公司桌面,高效处 ...
- mysql开放允许外部连接_设置MySql允许外部连接的方法
在linux上或window下cmd命令行下用root登陆,设置权限,grant 权限名(sqlserver和mysql不一样的,可以看手册知道,分所有的权限用all) on 库名(*表全部). ...
- oracle连接ip设置,Oracle限制ip连接设置
在oracle数据库上做ip连接限制,主要一下两种方式: 方式1:修改sqlnet.ora文件 该方式只能限制制定ip,并不能限制ip网段 编辑配置文件 $ORACLE_HOME/network/ad ...
- PHP宽带自动拨号,window_Win10怎么设置宽带自动连接 win10开机自动连接宽带设置方法详解,对于没有使用路由器中转,每 - phpStudy...
Win10怎么设置宽带自动连接 win10开机自动连接宽带设置方法详解 对于没有使用路由器中转,每次开机都需要进行宽带连接拨号上网的用户来说,每次打开电脑都需要打开宽带连接进行拨号才能正常上网是不是很 ...
- S6L – Pro Tools录音和虚拟试音连接和设置
2018-03-27神游技术人生之AVID音频 Avid S6L现场扩声调音台系统的亮点之一是通过AVB网络协议,使用单根网线实现ProTools 128路(96KHz,24bit)录制.回放或虚拟试 ...
最新文章
- LeetCode 5.Longest Palindromic Substring 求解
- 创建型设计模式之建造者模式(Builder)
- Quartz.net定时任务的使用及获取正在运行的JOB
- Qt工作笔记-QTreeWidgetItem中的CheckState以及遍历选中的CheckBox
- 一个基于Node.js的本地快速测试服务器 1
- 专题之七:ckk拉链厂信息化实施记
- 遍历Java中的列表的方法
- 洛谷P2870 [USACO07DEC]最佳牛线,黄金Best Cow Line, Gold
- 漏洞CNNVD-201805-248的复现与提权
- malloc函数详解
- iOS中内存管理方案
- 使用BG/NBD模型与Gamma-Gamma模型预测客户的生命周期价值CLV/LTV
- iOS越狱插件: Icon Tool 可定位文件目录和备份资料等功能
- LPL2020夏季常规赛7月22日RW vs ES,WE vs BLG前瞻预测
- 关于 ConcurrentHashMap 1.8 中的线程探针哈希
- 【BZOJ3407】[Usaco2009 Oct]Bessie's Weight Problem 贝茜的体重问题【01背包】
- 关于金融交易的底层逻辑和个人机会
- 称重传感器及HX711 24位ADC的重量参数检测
- 中国能做的只有独自且大力地开发南海资源
- 深度解析|互金用户增长模型背后,最底层的逻辑框架
热门文章
- 2019温馨的元旦祝福语 2019元旦祝福语大全!收藏备用!
- 生产三码 黑苹果_黑苹果OC配置工具:OpenCore Configurator v2.15.2.0
- linux创建虚拟声卡,Pear BIOS 安装和配置指引
- 《Java 高并发》02 多线程的特性
- pymssql出现的错误
- 【mybatis】mybatis多表联查,存在一对多关系的,实体中使用List作为字段接收查询结果的写法...
- 程序员怎样成为一名架构师?
- “云计算+DevOps”的正确打开方式
- 深入分析JavaWeb Item7 -- HttpServletResponse详解
- 一个js的动画,以前以为只有flash可以实现