美文网首页
RocketMQ的部署

RocketMQ的部署

作者: G__yuan | 来源:发表于2021-06-24 11:49 被阅读0次

1.机器上先安装java环境(安装JDK,maven等)

2.下载RocketMQ的源码来编译构建

执行如下命令来构建Dledger:

git clone https://github.com/openmessaging/openmessaging-storage-dledger.git
cd openmessaging-storage-dledger
mvn clean install -DskipTests

执行下面命令构建RocketMQ

git clone https://github.com/apache/rocketmq.git
cd rocketmq
##git checkout -b store_with_dledger origin/store_with_dledger 新版已经删除该分支,直接checkout 发布的release最新版本即可,或者自己选定的版本。
git checkout -b release-4.9.3 origin/release-4.9.3
mvn -Prelease-all -DskipTests clean install -U
cd distribution/target/apache-rocketmq

在上述目录中修改三个文件,一个是bin/runserver.sh,一个是bin/runbroker.sh,另一个是bin/tools.sh在里面找到如下三行,然后将第二行和第三行都删除掉,同时将第一行的值修改为自己的JDK的主目录。

[ ! -e "$JAVA_HOME/bin/java" ] && JAVA_HOME=$HOME/jdk/java
[ ! -e "$JAVA_HOME/bin/java" ] && JAVA_HOME=/usr/java
[ ! -e "$JAVA_HOME/bin/java" ] && error_exit "Please set the JAVA_HOME variable in your environment, We need java(x64)!"

注:查看JDK的目录命令:/usr/libexec/java_home -V,
执行下面的命令进行快速RocketMQ集群的启动

sh bin/dledger/fast-try.sh start

这个命令会在当前这台机器上启动一个NameServer和三个Broker,三个Broker其中一个是Master,另外两个是Slave,瞬间就可以组成一个最小的Rocker集群
使用以下命令检查一下RocketMQ的集群状态

sh bin/mqadmin clusterList -n 127.0.0.1:9876
image.png
看到如上图就说明启动成功了,BID为0的就是Master,BID大于0的就是Slave。
尝试slave自动切换为master
##找到master的进程号
lsof -i:30931
kill -9 58798 ##干掉它

通过上面查看集群状态的命令再次查看集群状态详情


image.png

3.完成正式的三台NameServer的部署

还是先在三台机器上安装java环境,以及根据上述步骤把RockerMQ和Dledger全都构建好。
启动NameServer

nohup sh mqnamesrv & ##NameServer监听的接口默认就是9876,

4.完成一组Broker集群的部署

同样的还是在机器上先安装好java环境以及构建好Dledger和RockerMQ,然后编辑好对应的文件。
执行如下命令:

nohup sh bin/mqbroker -c conf/dledger/broker-n0.conf &

注:第一个Broker的配置文件是broker-n0.conf,第二个broker的配置文件可以是broker-n1.conf,第三broker
的配置文件可以是broker-n2.conf。
对broker-n0.conf配置文件的说明:

brokerClusterName = RaftCluster
这个是集群的名称,你整个broker集群都可以用这个名称

brokerName=RaftNode00
这是Broker的名称,比如你有一个Master和两个Slave,那么他们的Broker名称必须是一样的,因为他们三个是一个分组,如果你有另外一组Master和两个Slave,你可以给他们起个别的名字,比如说RaftNode01

listenPort=30911
这个就是你的Broker监听的端口号,如果每台机器上就部署一个Broker,可以考虑就用这个端口号,不用修改

namesrvAddr=127.0.0.1:9876
这里是配置NameServer的地址,如果你有很多个NameServer的话,可以在这里写入多个NameServer的地址

storePathRootDir=/tmp/rmqstore/node00
storePathCommitLog=/tmp/rmqstore/node00/commitlog
下面两个目录是存放Broker数据的地方,你可以换成别的目录,类似于是/usr/local/rocketmq/node00之类的

enableDLegerCommitLog=true
这个是非常关键的一个配置,就是是否启用DLeger技术,这个必须是true

dLegerGroup=RaftNode00
这个一般建议和Broker名字保持一致,一个Master加两个Slave会组成一个Group

dLegerPeers=n0-127.0.0.1:40911;n1-127.0.0.1:40912;n2-127.0.0.1:40913
这个很关键,对于每一组Broker,你得保证他们的这个配置是一样的,在这里要写出来一个组里有哪几个Broker,比如在这里假设有三台机器部署了Broker,要让他们作为一个组,那么在这里就得写入他们三个的ip地址和监听的端口号

dLegerSelfId=n0
这个是代表了一个Broker在组里的id,一般就是n0、n1、n2之类的,这个你得跟上面的dLegerPeers中的n0、
n1、n2相匹配

sendMessageThreadPoolNums=24
这个是发送消息的线程数量,一般建议你配置成跟你的CPU核数一样,比如我们的机器假设是24核的,那么这里就修改成24核

其实最关键的是,你的Broker是分为多组的,每一组是三个Broker,一个Master和两个Slave。对每一组Broker,他们的Broker名称、Group名称都是一样的,然后你得给他们配置好一样的dLegerPeers(里面是组内三台Broker的地址)然后他们得配置好对应的NameServer的地址,最后还有就是每个Broker有自己的ID,在组内是唯一的就可以了,比如说不同的组里都有一个ID为n0的broker,这个是可以的。

相关文章

  • RocketMQ 集群部署结构和模式

    1、RocketMQ 集群物理部署结构 RocketMQ 物理部署结构 RocketMQ的部署结构有以下特点: N...

  • RocketMQ产品架构

    RocketMQ产品架构 RocketMQ产品架构部署要求系统部署架构订阅模式 部署要求 消息队列 RocketM...

  • rocketmq总目录

    实战 rocketmq最简单的入门demo rocketmq的常用概念,接口和方法 rocketmq的正式部署 高...

  • RocketMQ部署以及调优

    RocketMQ的部署 RocketMQ的部署,这里不做太多的说明,因为官方文档上面写的已经非常清晰了,可以照着官...

  • RocketMQ学习

    RocketMQ 学习 安装部署** 下载rocketmq解压:下载地址 启动nameserver,进入bin目录...

  • docker-compose安装rocketmq

    部署说明 应用名称端口rocketmq-namesrv9876:9876rocketmq-broker10909:...

  • RocketMQ demo

    解决连接超时问题 我们采用 Docker 部署了 RocketMQ 服务,此时 RocketMQ Broker 暴...

  • RocketMQ环境搭建

    RocketMQ单机部署流程 1.下载源码包地址 http://rocketmq.apache.org/docs/...

  • RocketMQ 部署

    本节将介绍生产就绪的部署解决方案。一般来说,我们将部署一个弹性的RocketMQ集群,没有单点故障。 先决条件 在...

  • 部署rocketmq

    一.编译安装: 1.解压jdk-1.8,添加JAVA_HOME,目录路径添加PATH,测试:java -versi...

网友评论

      本文标题:RocketMQ的部署

      本文链接:https://www.haomeiwen.com/subject/qmswyltx.html