RocketMQ實(shí)戰(zhàn)與原理解析

讀書(shū)筆記模板RocketMQ實(shí)戰(zhàn)與原理解析01思維導(dǎo)圖讀書(shū)筆記目錄分析內(nèi)容摘要精彩摘錄作者介紹目錄0305020406思維導(dǎo)圖原理實(shí)戰(zhàn)維度經(jīng)驗(yàn)作者實(shí)踐經(jīng)驗(yàn)書(shū)小結(jié)消息第章處理功能流程集群隊(duì)列機(jī)制角色底層示例本書(shū)關(guān)鍵字分析思維導(dǎo)圖內(nèi)容摘要內(nèi)容摘要本書(shū)作者是阿里資深數(shù)據(jù)專(zhuān)家，對(duì)RocketMQ有深入的研究，并有大量的實(shí)踐經(jīng)驗(yàn)。在寫(xiě)這本書(shū)之前，作者不僅系統(tǒng)、深入地閱讀了RocketMQ的源代碼，而且還向RocketMQ的官方開(kāi)發(fā)團(tuán)隊(duì)深入了解了它的諸多設(shè)計(jì)細(xì)節(jié)。作者結(jié)合自己多年使用RocketMQ的經(jīng)驗(yàn)，從開(kāi)發(fā)和運(yùn)維兩個(gè)維度，給出了大部分場(chǎng)景下的優(yōu)秀實(shí)踐，能幫助讀者在學(xué)會(huì)使用和用好RocketMQ的同時(shí)，盡量少“踩坑”。讀書(shū)筆記讀書(shū)筆記首先，有一定的收獲，不過(guò)感覺(jué)有點(diǎn)虎頭蛇尾，前面講概念講原理還可以，后面有湊字?jǐn)?shù)之嫌。好像各種牛逼的中間件皆如此，不過(guò)有些基礎(chǔ)的原理知識(shí)沒(méi)有太深入，比如：零拷貝，大概知道是減少拷貝次數(shù)來(lái)省時(shí)間的。自己該咋弄？當(dāng)然先從簡(jiǎn)單的做起或者思考？比如：就一個(gè)producer、broker、consumer或者更簡(jiǎn)單一點(diǎn)你一個(gè)broker，收發(fā)消息的客戶(hù)端先不支持。不管是基礎(chǔ)概念還是深入部分都還需要結(jié)合博客，總體來(lái)說(shuō)還是很棒的。所謂實(shí)戰(zhàn)大概就是教你本地安裝，原理又淺嘗輒止，整本書(shū)叫rocket概述比較合適。部分培訓(xùn)機(jī)構(gòu)的課程講解內(nèi)容大部分來(lái)源于這本書(shū)，能理解這里的內(nèi)容已經(jīng)比大部分開(kāi)發(fā)者理解的深入了吧培訓(xùn)機(jī)構(gòu)就是把書(shū)本的內(nèi)容做成視頻給你講一遍，自己不看書(shū)，去花1w多聽(tīng)別人講，唉。簡(jiǎn)要介紹了RocketMQ的使用方式及一些原理，底層代碼實(shí)現(xiàn)介紹比較簡(jiǎn)略?；居梅ǘ加兄v到，簡(jiǎn)單易上手，非常適用于想要快速應(yīng)用rocketmq的同學(xué)。這本書(shū)比較偏重實(shí)現(xiàn)邏輯，沒(méi)有太去挖掘源碼，適合有一定經(jīng)驗(yàn)的朋友快速瀏覽RocketMQ的主要特性。這本書(shū)太TM垃圾了，實(shí)戰(zhàn)沒(méi)講清楚，原理就只是貼了一段代碼？？？作者自己都沒(méi)看過(guò)吧！。精彩摘錄精彩摘錄一是發(fā)信者，二是收信者，三是負(fù)責(zé)暫存、傳輸?shù)泥]局，四是負(fù)責(zé)協(xié)調(diào)各個(gè)地方郵局的管理機(jī)構(gòu)。對(duì)應(yīng)到RocketMQ中，這四個(gè)角色就是Producer、Consumer、Broker和NameServer。如果一個(gè)Topic要發(fā)送和接收的數(shù)據(jù)量非常大，需要能支持增加并行處理的機(jī)器來(lái)提高處理速度，這時(shí)候一個(gè)Topic可以根據(jù)需求設(shè)置一個(gè)或多個(gè)MessageQueue,MessageQueue類(lèi)似分區(qū)或Partition。Topic有了多個(gè)MessageQueue后，消息可以并行地向各個(gè)MessageQueue發(fā)送，消費(fèi)者也可以并行地從多個(gè)MessageQueue讀取消息并消費(fèi)。“長(zhǎng)輪詢(xún)”的核心是，Broker端HOLD住客戶(hù)端過(guò)來(lái)的請(qǐng)求一小段時(shí)間，在這個(gè)時(shí)間內(nèi)有新消息到達(dá)，就利用現(xiàn)有的連接立刻返回消息給Consumer?！伴L(zhǎng)輪詢(xún)”的主動(dòng)權(quán)還是掌握在Consumer手中，Broker即使有大量消息積壓，也不會(huì)主動(dòng)推送給Consumer。分布式消息隊(duì)列可以提供應(yīng)用解耦、流量消峰、消息分發(fā)等功能，已經(jīng)成為大型互聯(lián)網(wǎng)服務(wù)架構(gòu)里標(biāo)配的中間件解決消息重復(fù)有兩種方法：第一種方法是保證消費(fèi)邏輯的冪等性（多次調(diào)用和一次調(diào)用效果相同）；另一種方法是維護(hù)一個(gè)已消費(fèi)消息的記錄，消費(fèi)前查詢(xún)這個(gè)消息是否被消費(fèi)過(guò)。這兩種方法都需要使用者自己實(shí)現(xiàn)。目錄分析1.1消息隊(duì)列功能介紹1.2RocketMQ簡(jiǎn)介1.3快速上手RocketMQ1.4本章小結(jié)第1章快速入門(mén)2.1RocketMQ各部分角色介紹2.2多機(jī)集群配置和部署2.3發(fā)送/接收消息示例2.4常用管理命令第2章生產(chǎn)環(huán)境下的配置和使用2.6本章小結(jié)2.5通過(guò)圖形界面管理集群第2章生產(chǎn)環(huán)境下的配置和使用3.1不同類(lèi)型的消費(fèi)者3.3如何存儲(chǔ)隊(duì)列位置信息3.2不同類(lèi)型的生產(chǎn)者第3章用適合的方式發(fā)送和接收消息3.5本章小結(jié)3.4自定義日志輸出第3章用適合的方式發(fā)送和接收消息4.1NameServer的功能4.2各個(gè)角色間的交互流程4.3底層通信機(jī)制4.4本章小結(jié)第4章分布式消息隊(duì)列的協(xié)調(diào)者5.1消息存儲(chǔ)和發(fā)送5.2消息存儲(chǔ)結(jié)構(gòu)5.3高可用性機(jī)制5.4同步刷盤(pán)和異步刷盤(pán)第5章消息隊(duì)列的核心機(jī)制5.6本章小結(jié)5.5同步復(fù)制和異步復(fù)制第5章消息隊(duì)列的核心機(jī)制6.1順序消息6.2消息重復(fù)問(wèn)題6.3動(dòng)態(tài)增減機(jī)器6.4各種故障對(duì)消息的影響第6章可靠性?xún)?yōu)先的使用場(chǎng)景6.6本章小結(jié)6.5消息優(yōu)先級(jí)第6章可靠性?xún)?yōu)先的使用場(chǎng)景7.1在Broker端進(jìn)行消息過(guò)濾7.2提高Consumer處理能力7.3Consumer的負(fù)載均衡7.4提高Producer的發(fā)送速度第7章吞吐量?jī)?yōu)先的使用場(chǎng)景7.6本章小結(jié)7.5系統(tǒng)性能調(diào)優(yōu)的一般流程第7章吞吐量?jī)?yōu)先的使用場(chǎng)景8.1在SpringBoot中使用RocketMQ8.2直接使用云上RocketMQ8.3RocketMQ與Spark、Flink對(duì)接8.4自定義開(kāi)發(fā)運(yùn)維工具8.5本章小結(jié)12345第8章和其他系統(tǒng)交互9.1RocketMQ的前世今生9.2Apache頂級(jí)項(xiàng)目（TLP）之路9.3源碼結(jié)構(gòu)9.4不斷迭代的代碼9.5本章小結(jié)12345第9章首個(gè)Apache中間件頂級(jí)項(xiàng)目10.1模塊入口代碼的功能10.3核心業(yè)務(wù)邏輯處理10.2NameServer的總控邏輯第10章NameServer源碼解析10.5本章小結(jié)10.4集群狀態(tài)存儲(chǔ)第10章NameServer源碼解析11.1整體流程11.2消息的并發(fā)處理11.3生產(chǎn)者消費(fèi)者的底層類(lèi)11.4本章小結(jié)第11章最常用的消費(fèi)類(lèi)12.1同步屬性信息12.2同步消息體12.3sync_master和async_master12.4本章小結(jié)第12章主從同步機(jī)制13.1Netty介紹13.3Netty用法示例13.2N