1、下载 emq 源码

emq 使用 3.0 以上版本(emq 2.X 版本称为 emqttd,3.X 版本称为 emqx),并且自己编译源码(方便做扩展性修改)。Git 地址:https://github.com/emqx/emqx-rel.git。

emq 的编译依赖于 Erlang 环境(emqx 依赖于 Erlang R21.2+ 版本,emqttd 依赖于 Erlang R20+ 版本)。Erlang 安装: http://www.erlang.org/。

源码下载完成后,进入 emqx-rel 主文件夹,然后直接 make 编译。编译完成后的文件结构如下:

由于 emq 文件结构过于复杂,因此只介绍需要用到的部分。可执行的命令以及配置文件位于_rel/emqx 中,插件位于 deps 中。

2、emq 配置、运行和部署

进入 emqx-rel/_rel/emqx/bin 文件夹下,用 emqx start 命令即可运行 emq,用 emqx stop 课停止 emq, emqx console 进入控制台运行模式,在此模式下可看见诸多类似设备连接、服务器报错等信息。

emq 的配置文件是 emqx-rel/_rel/emqx/etc/emqx.conf,下面介绍配置文件中比较重要的部分。

node.name=emqx@192.168.4.31 服务器的节点名,需要 emqx@host 的格式,注意 host 中最好使用本机真实 ip,尤其是在集群配置中,否则会出现预期之外的错误。并且,emq 启动之后不要修改此配置,确保 emq 开启和关闭的时候此配置必须相同,否则会出现无法关闭 emqx 的错误(就算一开始写的 127.0.0.1,然后启动之后发现错了,也要先关闭 emqx 再修改配置!)。

listener.tcp.external = 0.0.0.0:1885 : emq 对外监听的 tcp 端口,默认 1883。

listener.ssl.external = 8883 : emq 监听的 ssl 端口,默认 8883。

listener.ssl.external.keyfile = etc/certs/key.pem : 服务器的私钥(关于 ssl 认证的具体介绍见另一篇文档)。

listener.ssl.external.certfile = etc/certs/cert.pem : 服务器的公钥。

listener.ssl.external.cacertfile = etc/certs/cacert.pem : ca 证书。

listener.ssl.external.verify = verify_peer : 开启双向认证。

listener.ssl.external.fail_if_no_peer_cert = true : 如果客户端证书错误,则禁止连接。

如果开启单向认证,只需要配置服务器公钥和私钥,如果开启双向认证,则需要配置 ca、开启双向认证、并禁止客户端无证书连接。

另外,在 emqx-rel/_rel/emqx/etc/acl.conf 中,有一处配置需要注意。

{allow, {user, "dashboard"}, subscribe, ["$SYS/#"]}.

{allow, {ipaddr, "127.0.0.1"}, pubsub, ["$SYS/#", "#"]}.

%%{deny, all, subscribe, ["$SYS/#", {eq, "#"}]}.

{allow, all}.

这里对 emq 客户端的权限作了一些配置,对某些 topic 禁止客户端订阅。我们需要将第三行的配置注释掉,否则客户端无法订阅 $SYS/# 的 topic(具体作用见下文)。

3、emq 集群部署

emq 提供了多种去中心化的集群部署方案:

在 emqx-rel/_rel/emqx/etc/emqx.conf 中可以配置集群的创建方式,在此介绍一下手动创建集群的方法。

cluster.discovery = manual : 开启手动创建集群模式。

启动两台 emqx 节点(物理节点,非逻辑节点),假设两个节点分别为 emqx@node1 和 emqx@node2,在任意一台节点(以 node1 为例)上,执行命令:emqx-rel/_rel/emqx/bin/emqx_ctl clsuter join emqx@node2

节点退出集群:mqx-rel/_rel/emqx/bin/emqx_ctl cluster leave

4、emq 的管理和监控

emq 提供了方便用户管理监控的控制台、API 及系统消息。控制台可直接访问 http://{host}:18083,默认用户名 admin,密码 public。

此处是插件功能和 emq 提供的 HTTP API 列表,可直接在控制台中进行配置和插件的开关,emq 支持插件的热加载。

除此之外,emq 提供了一些用于监控 broker 状态的系统主题 $SYS。其中,我们的上下线通知中用到了下列两个 topic:

但是此处的上线通知流程存在问题,emq broker 会在客户端尝试连接(鉴权)时进行上线通知,而不是连接成功之后通知。还有一种解决方案是用插件进行通知,但这样会使用 http 同步调用,代价较大,因此暂时还是用系统消息进行异步通知。

5、插件的编写

插件位于 emqx-rel/deps 中,其中有若干已经由官方写好的插件,可以直接修改配置文件或直接在控制台中进行配置。

如果需要自己写插件,emq 也提供了插件模板,在 emqx-rel/deps/emqx_plugin_template 中。打开 emqx-rel/deps/emqx_plugin_template/src/emqx_plugin_template.erl,其中可以看到 emq 提供了一些钩子:

emqx:hook('client.authenticate', fun ?MODULE:on_client_authenticate/2, [Env]),

emqx:hook('client.check_acl', fun ?MODULE:on_client_check_acl/5, [Env]),

emqx:hook('client.connected', fun ?MODULE:on_client_connected/4, [Env]),

emqx:hook('client.disconnected', fun ?MODULE:on_client_disconnected/3, [Env]),

emqx:hook('client.subscribe', fun ?MODULE:on_client_subscribe/3, [Env]),

emqx:hook('client.unsubscribe', fun ?MODULE:on_client_unsubscribe/3, [Env]),

emqx:hook('session.created', fun ?MODULE:on_session_created/3, [Env]),

emqx:hook('session.resumed', fun ?MODULE:on_session_resumed/3, [Env]),

emqx:hook('session.subscribed', fun ?MODULE:on_session_subscribed/4, [Env]),

emqx:hook('session.unsubscribed', fun ?MODULE:on_session_unsubscribed/4, [Env]),

emqx:hook('session.terminated', fun ?MODULE:on_session_terminated/3, [Env]),

emqx:hook('message.publish', fun ?MODULE:on_message_publish/2, [Env]),

emqx:hook('message.deliver', fun ?MODULE:on_message_deliver/3, [Env]),

emqx:hook('message.acked', fun ?MODULE:on_message_acked/3, [Env]),

emqx:hook('message.dropped', fun ?MODULE:on_message_dropped/3, [Env]).

当达成这些条件事,会触发钩子函数,用户可以自己定义钩子函数,例如**目前鉴权所用到的:

on_client_authenticate(Credentials = #{client_id := ClientId, password := Password, username := Username}, _Env) ->

io:format("Client(~s) authenticate, Password:~p ~n, Username:~p ~n", [ClientId, Password, Username]),

inets:start(),

{ok, {{Version, 200, ReasonPhrase}, Headers, Body}} = httpc:request(string:join(["http://www.example.com/api/mqtt/authenticate/login?username=", binary_to_list(base64:encode(binary_to_list(Username))), "&password=", binary_to_list(Password), "&clientId=", binary_to_list(base64:encode(binary_to_list(ClientId)))], "")),

if

Body == "0" ->

{stop, Credentials#{auth_result => success}};

true ->

{stop, Credentials#{auth_result => fail}}

end.

插件编写完成后,需要到主目录 emqx-rel 中重新 make。注意,make 之后配置文件会重新生成,因此 make 之前最好备份一下配置文件。然后启动 emq,到控制台中开启插件即可。

6、管理监控 API

emq 提供了一些 API,可以获取服务器的一些信息。

首先在 App 中新增用户

然后通过 http://host:8080/{api} 访问,访问需要 http basic authentication,用刚刚创建的用户可以访问。

7、emq 使用过程中可能遇到的问题及注意事项

1)emqx start 指令后,卡住不动,没有出现 start successfully 的字样,可能是端口被其他进程占用。emq 会占用的端口如下:

这些端口都可以在配置文件中自己修改,但是只要有一个冲突就无法正常启动。

2)emqx stop 时,显示 emqx@xxx no response 字样,检查配置文件中的节点名是否正确。

3)在开启集群模式时,如果要关闭一个节点,最好先手动让该节点退出集群,否则下一次启动该节点时可能出现无法加入集群的情况(emq 会记住集群信息,重启时会自动恢复之前的集群状态,但这个过程经常会出现一些问题,所以最好的办法就是手动退出集群,然后重启之后再手动加入集群)。

4)emq 重启之后,会自动启动上一次启动过的插件,但是配置会回复初始化(除非修改配置文件)。

5)emq 的启动进程为 beam.smp,守护进程为 epmd,但是 Erlang 的进程结构比较奇怪,所以直接 kill 掉上述进程之后,emq 可能还在运行中。所以最好执行 emqx stop 指令来停止 emq。

8、部署架构

9、后记

在官方文档中有更为全面的说明和指南,本文只列出了部分实际用到的比较重要的功能。如果后续有扩展或本文中不详细之处,可参加官方文档:https://developer.emqx.io/docs/broker/v3/cn/getstarted.html

官方文档对于部分内容也并不十分详细,本文对实际中遇到的问题和注意事项作了部分补充。

emq 重启_emq 的部署、使用及维护相关推荐

  1. emq 重启_EMQ集群

    Erlang/OTP 语言平台的分布式程序,由分布互联的 Erlang 运行系统组成,每个 Erlang 运行系统被称为节点(Node),节点(Node) 间通过 TCP 互联,消息传递的方式通信: ...

  2. 统信UOS终端快速部署及批量维护

    项目场景: 之前参与过一个项目,项目中需要部署8000多台UOS系统的外网机终端,涉及20多家单位,我刚听说这个项目的时候,首先想到的两个问题就是,这么多终端怎么部署?后期怎么维护?本文详细介绍了制定 ...

  3. 重启服务器导致网站系统错误,win10怎么总是莫名其妙重启?_网站服务器运行维护...

    win10如何恢复输入法语言栏?_网站服务器运行维护 win10恢复输入法语言栏的方法:1.先打开设置,然后进入"时间和语言":2.点击"区域和语言",接着找到 ...

  4. 云原生|kubernetes部署和运行维护中的错误汇总(不定时更新)

    一, 安装的etcd版本是3.4,如果是安装的etcd3下面的配置应该不会报错. 查询etcd状态报错: conflicting environment variable "ETCD_NAM ...

  5. oneinstack 重启mysql_oneinstack一键部署linux生产环境那点事(ubuntu)

    http://oneinstack.com/install/ (1)将oneinstack-full.tar.gz最新版安装文件上传至/usr/local/下 (2)解压tar xzvf oneins ...

  6. Oracle 11.2.0.4.0 Dataguard部署和日常维护(7) - Dataguard Flashback篇

    1. 设置备库的闪回目录 show parameter db_recovery_file;NAME TYPE VALUE ------------------------------------ -- ...

  7. Oracle 12C DataGuard部署以及维护

    Oracle 12C DataGuard部署以及维护 Oracle 12C DataGuard部署 一.环境部署 二.维护使用 2.1 检查主备库的归档日志号 2.2 检查备库的归档日志同步情况以及应 ...

  8. 腾讯云服务器部署emq

    文章目录 部署宝塔面板 部署EMQ EMQ X 程序包下载 服务器版本: 使用储存库安装 EMQ X 使用微信小程序连接EMQ 必要条件 操作步骤 部署宝塔面板 使用 SSH 连接工具,如宝塔远程桌面 ...

  9. java 不重启部署_一篇文章带你搞定SpringBoot不重启项目实现修改静态资源

    一.通过配置文件控制静态资源的热部署 在配置文件 application.properties 中添加: #表示从这个默认不触发重启的目录中除去static目录 spring.devtools.res ...

最新文章

  1. 2021年大数据ELK(二十):FileBeat是如何工作的
  2. Minecraft Forge编程入门一 “环境搭建”
  3. 《机器人自动化:建模、仿真与控制》——2.3 仿真
  4. 安卓PopupWindow使用详解与源码分析(附项目实例)
  5. ABP vNext IOC替换原有Service实现
  6. React开发(148):componentWillReceiveProps
  7. servlet为什么要别名呢_servlet --2
  8. 在mysql数据库中,多表查询,事务,DCL,
  9. 笔试题--你准备好了吗
  10. 后台数据量太大传输慢_哪些因素会导致慢查询?
  11. java中resultset的previous_在 Java中,已获得默认类型的ResultSet对象rs,要获得结果集中的数据,必须执行的语句是( )。_学小易找答案...
  12. 重读浙大版《概率论与数理统计》
  13. 复现SCI图表-ggplot做花瓣图
  14. 计算机重启后一直黑屏转圈,电脑win10开机黑屏转圈十几秒怎么解决
  15. Classification-Driven Dynamic Image Enhancement
  16. 从中医的角度认识感冒
  17. 27岁,30岁,37岁...... 你是否已经把世界拱手让人?
  18. IT农民工如何来美国工作(续)
  19. 【深度之眼Python基础+数据科学入门训练营】第八章 文件、异常和模块
  20. 《Windows操作系统原理》好书推荐

热门文章

  1. 7-11 悄悄关注 新浪微博上有个“悄悄关注”,一个用户悄悄关注的人,不出现在这个用户的关注列表上,但系统会推送其悄悄关注的人发表的微博给该用户。现在我们来做一回网络侦探,根据某人的关注列表和其对
  2. vue击一个按钮跳转到新的页面
  3. 天涯社区谢巍:Facebook区块链转型难度可能大于初创公司
  4. 男人不得不知的100句话
  5. python 界面编程 并执行sh命令
  6. 【C++】详谈 auto
  7. Windows应用程序无法正常启动(0xc0000013)的解决
  8. 十二面体搜索算法python的实现
  9. 【苹果iMessage相册推】socket重要是指传输层的协议
  10. 字符串替换之正则替换