RocketMQ Operator-K8s平臺(tái)自動(dòng)化部署工具介紹

1、RocketMQ Operator-K8s平臺(tái)自動(dòng)化部署工具介紹技術(shù)創(chuàng)新，變革未來(lái)背景介紹Operator介紹RocketMQ-Operator技術(shù)原理搭建k8s上的RocketMQ服務(wù)集群目錄背景介紹2Master 2Slave1. RocketMQ集群部署單Master模式多Master模式多Master多Slave模式2. Docker及Kubernetes簡(jiǎn)介Docker：用容器的方式解決應(yīng)用執(zhí)行環(huán)境標(biāo)準(zhǔn)化的問(wèn)題Kubernetes：解決分布式環(huán)境下容器化的應(yīng)用程序管理的問(wèn)題背景介紹背景介紹1. 使用Kubernetes時(shí)存在的一些問(wèn)題傳統(tǒng)方式復(fù)雜繁冗的YAML文件配置K8S原生資源對(duì)

2、于有狀態(tài)應(yīng)用的局限性一般Kubernetes應(yīng)用部署的做法：編寫Deployment、StatefulSet等YAML配置文件Kubectl apply 部署到K8S上YAML YAML YAMLRocketMQ作為有狀態(tài)應(yīng)用，在K8S上實(shí)際部署時(shí)的諸多需求：新擴(kuò)容的Name Server 能否自動(dòng)被所有Broker感知？新擴(kuò)容的Broker元數(shù)據(jù)注冊(cè)？順序消息Broker如何擴(kuò)容？Topic遷移？能否將這一切自動(dòng)化？Operator: 能！Operator介紹2. 什么是Operator？旨在解決復(fù)雜有狀態(tài)應(yīng)用在K8S上的管理問(wèn)題基于Kubernetes API云原生領(lǐng)域生態(tài)發(fā)展的一種趨勢(shì)3

3、. Operator能做什么？自動(dòng)應(yīng)用部署和配置管理應(yīng)用擴(kuò)縮容灰度/滾動(dòng)更新應(yīng)用/數(shù)據(jù)的全生命周期管理日志指標(biāo)監(jiān)控，自動(dòng)預(yù)警等RocketMQ-Operator技術(shù)原理1. 架構(gòu)RocketMQ Operator is to manage RocketMQ service instances deployed on the Kubernetes cluster.RocketMQ-Operator技術(shù)原理2. Operator編程模式CRD + ControllerRocketMQ Operator項(xiàng)目結(jié)構(gòu)+自定義資源配置文件RocketMQ-Operator技術(shù)原理NameServicenam

4、eservice_types.go中對(duì)應(yīng)代碼：NameService資源配置示例yaml文件：3. 自定義資源（CRD）RocketMQ-Operator技術(shù)原理3. 自定義資源（CRD）Brokerbroker_types.go中對(duì)應(yīng)代碼：Broker資源配置示例yaml文件：RocketMQ-Operator技術(shù)原理4. 控制器（Controller）Broker Controller核心函數(shù)：Reconcile函數(shù)RocketMQ-Operator技術(shù)原理4. 控制器（Controller）Name Service Controller將RocketMQ Admin Tool植入Oper

5、ator鏡像，Operator與Admin Tool協(xié)作完成集群管理例如name server擴(kuò)容時(shí)通知所有broker更新參數(shù)：RocketMQ-Operator技術(shù)原理4. 控制器（Controller）Name Service ControllerOperator容器啟動(dòng)狀態(tài)反饋和更新通知所有broker更新參數(shù)注：省略了Kubernetes API ServerRocketMQ Admin ToolRocketMQ OperatorRocketMQ-Operator基本使用1. 環(huán)境準(zhǔn)備1）準(zhǔn)備Kubernetes集群環(huán)境2）安裝RocketMQ Operator$ git clone

6、 /apache/rocketmq-operator$ cd rocketmq-operator$ ./install-operator.sh對(duì)于 NFS StorageClass：3）根據(jù)存儲(chǔ)方式進(jìn)行存儲(chǔ)環(huán)境準(zhǔn)備工作：對(duì)于 EmptyDir：Nothing對(duì)于 HostPath：RocketMQ-Operator基本使用2. 資源配置文件Kind: NameService定義Name Service集群的規(guī)模等2. 資源配置文件Kind: Broker定義Broker集群的規(guī)模、副本數(shù)等RocketMQ-Operator基本使用3. 應(yīng)用自定義資源以部署RocketMQ集群部署Name Service集群查看集群PodRocketMQ-Operator基本使用3. 應(yīng)用自定義資源以部署RocketMQ集群部署B(yǎng)roker集群查看當(dāng)前集群PodRocketMQ-Operator基本使用4. 擴(kuò)容RocketMQ集群NameService集群擴(kuò)容：修改nameservice自定義資源配置文件中的sizeBroker集群擴(kuò)容：修改Broke