亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 學院 > 開發設計 > 正文

消息隊列----RabbitMQ基礎概念詳細介紹

2019-11-14 10:22:37
字體:
來源:轉載
供稿:網友

    你是否遇到過兩個(多個)系統間需要通過定時任務來同步某些數據?你是否在為異構系統的不同進程間相互調用、通訊的問題而苦惱、掙扎?如果是,那么恭喜你,消息服務讓你可以很輕松地解決這些問題。    消息服務擅長于解決多系統、異構系統間的數據交換(消息通知/通訊)問題,你也可以把它用于系統間服務的相互調用(RPC)。本文將要介紹的RabbitMQ就是當前最主流的消息中間件之一。    RPC(Remote PRocedure Call Protocol)——遠程過程調用協議,它是一種通過網絡從遠程計算機程序上請求服務,而不需要了解底層網絡技術的協議。RPC協議假定某些傳輸協議的存在,如TCP或UDP,為通信程序之間攜帶信息數據。在OSI網絡通信模型中,RPC跨越了傳輸層和應用層。RPC使得開發包括網絡分布式多程序在內的應用程序更加容易。    RPC采用客戶機/服務器模式。請求程序就是一個客戶機,而服務提供程序就是一個服務器。首先,客戶機調用進程發送一個有進程參數的調用信息到服務進程,然后等待應答信息。在服務器端,進程保持睡眠狀態直到調用信息到達為止。當一個調用信息到達,服務器獲得進程參數,計算結果,發送答復信息,然后等待下一個調用信息,最后,客戶端調用進程接收答復信息,獲得進程結果,然后調用執行繼續進行。

RabbitMQ簡介

    AMQP,即Advanced Message Queuing Protocol,高級消息隊列協議,是應用層協議的一個開放標準,為面向消息的中間件設計。消息中間件主要用于組件之間的解耦,消息的發送者無需知道消息使用者的存在,反之亦然。    AMQP的主要特征是面向消息、隊列、路由(包括點對點和發布/訂閱)、可靠性、安全。    RabbitMQ是一個開源的AMQP實現,服務器端用Erlang語言編寫,支持多種客戶端,如:Python、Ruby、.NET、java、JMS、C、php、ActionScript、XMPP、STOMP等,支持Ajax。用于在分布式系統中存儲轉發消息,在易用性、擴展性、高可用性等方面表現不俗。下面將重點介紹RabbitMQ中的一些基礎概念,了解了這些概念,是使用好RabbitMQ的基礎。

ConnectionFactory、Connection、Channel

    ConnectionFactory、Connection、Channel都是RabbitMQ對外提供的API中最基本的對象。Connection是RabbitMQ的socket鏈接,它封裝了socket協議相關部分邏輯。ConnectionFactory為Connection的制造工廠。Channel是我們與RabbitMQ打交道的最重要的一個接口,我們大部分的業務操作是在Channel這個接口中完成的,包括定義Queue、定義Exchange、綁定Queue與Exchange、發布消息等。

Queue

Queue(隊列)是RabbitMQ的內部對象,用于存儲消息,用下圖表示。

queue

   RabbitMQ中的消息都只能存儲在Queue中,生產者(下圖中的P)生產消息并最終投遞到Queue中,消費者(下圖中的C)可以從Queue中獲取消息并消費。qq

多個消費者可以訂閱同一個Queue,這時Queue中的消息會被平均分攤給多個消費者進行處理,而不是每個消費者都收到所有的消息并處理。2014-2-21 9-46-43

Message acknowledgment

    在實際應用中,可能會發生消費者收到Queue中的消息,但沒有處理完成就宕機(或出現其他意外)的情況,這種情況下就可能會導致消息丟失。為了避免這種情況發生,我們可以要求消費者在消費完消息后發送一個回執給RabbitMQ,RabbitMQ收到消息回執(Message acknowledgment)后才將該消息從Queue中移除;如果RabbitMQ沒有收到回執并檢測到消費者的RabbitMQ連接斷開,則RabbitMQ會將該消息發送給其他消費者(如果存在多個消費者)進行處理。這里不存在timeout概念,一個消費者處理消息時間再長也不會導致該消息被發送給其他消費者,除非它的RabbitMQ連接斷開。    這里會產生另外一個問題,如果我們的開發人員在處理完業務邏輯后,忘記發送回執給RabbitMQ,這將會導致嚴重的bug——Queue中堆積的消息會越來越多;消費者重啟后會重復消費這些消息并重復執行業務邏輯…另外pub message是沒有ack的。

Message durability

    如果我們希望即使在RabbitMQ服務重啟的情況下,也不會丟失消息,我們可以將Queue與Message都設置為可持久化的(durable),這樣可以保證絕大部分情況下我們的RabbitMQ消息不會丟失。但依然解決不了小概率丟失事件的發生(比如RabbitMQ服務器已經接收到生產者的消息,但還沒來得及持久化該消息時RabbitMQ服務器就斷電了),如果我們需要對這種小概率事件也要管理起來,那么我們要用到事務。由于這里僅為RabbitMQ的簡單介紹,所以這里將不講解RabbitMQ相關的事務。

Prefetch count

    前面我們講到如果有多個消費者同時訂閱同一個Queue中的消息,Queue中的消息會被平攤給多個消費者。這時如果每個消息的處理時間不同,就有可能會導致某些消費者一直在忙,而另外一些消費者很快就處理完手頭工作并一直空閑的情況。我們可以通過設置prefetchCount來限制Queue每次發送給每個消費者的消息數,比如我們設置prefetchCount=1,則Queue每次給每個消費者發送一條消息;消費者處理完這條消息后Queue會再給該消費者發送一條消息。

2014-2-21 9-49-08

Exchange

    在上一節我們看到生產者將消息投遞到Queue中,實際上這在RabbitMQ中這種事情永遠都不會發生。實際的情況是,生產者將消息發送到Exchange(交換器,下圖中的X),由Exchange將消息路由到一個或多個Queue中(或者丟棄)。

2014-2-21 9-51-03    Exchange是按照什么邏輯將消息路由到Queue的?這個將在Binding一節介紹。    RabbitMQ中的Exchange有四種類型,不同的類型有著不同的路由策略,這將在Exchange Types一節介紹。

routing key

    生產者在將消息發送給Exchange的時候,一般會指定一個routing key,來指定這個消息的路由規則,而這個routing key需要與Exchange Type及binding key聯合使用才能最終生效。    在Exchange Type與binding key固定的情況下(在正常使用時一般這些內容都是固定配置好的),我們的生產者就可以在發送消息給Exchange時,通過指定routing key來決定消息流向哪里。    RabbitMQ為routing key設定的長度限制為255 bytes。

Binding

    RabbitMQ中通過Binding將Exchange與Queue關聯起來,這樣RabbitMQ就知道如何正確地將消息路由到指定的Queue了。

2014-2-21 9-52-46

Binding key

    在綁定(Binding)Exchange與Queue的同時,一般會指定一個binding key;消費者將消息發送給Exchange時,一般會指定一個routing key;當binding key與routing key相匹配時,消息將會被路由到對應的Queue中。這個將在Exchange Types章節會列舉實際的例子加以說明。    在綁定多個Queue到同一個Exchange的時候,這些Binding允許使用相同的binding key。    binding key 并不是在所有情況下都生效,它依賴于Exchange Type,比如fanout類型的Exchange就會無視binding key,而是將消息路由到所有綁定到該Exchange的Queue。

Exchange Types

    RabbitMQ常用的Exchange Type有fanout、direct、topic、headers這四種(AMQP規范里還提到兩種Exchange Type,分別為system與自定義,這里不予以描述),下面分別進行介紹。

fanout

    fanout類型的Exchange路由規則非常簡單,它會把所有發送到該Exchange的消息路由到所有與它綁定的Queue中。

2014-2-21 9-54-26上圖中,生產者(P)發送到Exchange(X)的所有消息都會路由到圖中的兩個Queue,并最終被兩個消費者(C1與C2)消費。

direct

    direct類型的Exchange路由規則也很簡單,它會把消息路由到那些binding key與routing key完全匹配的Queue中。

2014-2-21 9-55-20    以上圖的配置為例,我們以routingKey=”error”發送消息到Exchange,則消息會路由到Queue1(amqp.gen-S9b…,這是由RabbitMQ自動生成的Queue名稱)和Queue2(amqp.gen-Agl…);如果我們以routingKey=”info”或routingKey=”warning”來發送消息,則消息只會路由到Queue2。如果我們以其他routingKey發送消息,則消息不會路由到這兩個Queue中。

topic

    前面講到direct類型的Exchange路由規則是完全匹配binding key與routing key,但這種嚴格的匹配方式在很多情況下不能滿足實際業務需求。topic類型的Exchange在匹配規則上進行了擴展,它與direct類型的Exchage相似,也是將消息路由到binding key與routing key相匹配的Queue中,但這里的匹配規則有些不同,它約定:  1).routing key為一個句點號“. ”分隔的字符串(我們將被句點號“. ”分隔開的每一段獨立的字符串稱為一個單詞),如“stock.usd.nyse”、“nyse.vmw”、“quick.orange.rabbit”  2).binding key與routing key一樣也是句點號“. ”分隔的字符串  3).binding key中可以存在兩種特殊字符“*”與“#”,用于做模糊匹配,其中“*”用于匹配一個單詞,“#”用于匹配多個單詞(可以是零個)

2014-2-21 9-57-37    以上圖中的配置為例,routingKey=”quick.orange.rabbit”的消息會同時路由到Q1與Q2,routingKey=”lazy.orange.fox”的消息會路由到Q1與Q2,routingKey=”lazy.brown.fox”的消息會路由到Q2,routingKey=”lazy.pink.rabbit”的消息會路由到Q2(只會投遞給Q2一次,雖然這個routingKey與Q2的兩個bindingKey都匹配);routingKey=”quick.brown.fox”、routingKey=”orange”、routingKey=”quick.orange.male.rabbit”的消息將會被丟棄,因為它們沒有匹配任何bindingKey。

headers

    headers類型的Exchange不依賴于routing key與binding key的匹配規則來路由消息,而是根據發送的消息內容中的headers屬性進行匹配。    在綁定Queue與Exchange時指定一組鍵值對;當消息發送到Exchange時,RabbitMQ會取到該消息的headers(也是一個鍵值對的形式),對比其中的鍵值對是否完全匹配Queue與Exchange綁定時指定的鍵值對;如果完全匹配則消息會路由到該Queue,否則不會路由到該Queue。    該類型的Exchange沒有用到過(不過也應該很有用武之地),所以不做介紹。

RPC

    MQ本身是基于異步的消息處理,前面的示例中所有的生產者(P)將消息發送到RabbitMQ后不會知道消費者(C)處理成功或者失?。ㄉ踔吝B有沒有消費者來處理這條消息都不知道)。    但實際的應用場景中,我們很可能需要一些同步處理,需要同步等待服務端將我的消息處理完成后再進行下一步處理。這相當于RPC(Remote Procedure Call,遠程過程調用)。在RabbitMQ中也支持RPC。

2014-2-21 9-59-04

RabbitMQ中實現RPC的機制是:

    1).客戶端發送請求(消息)時,在消息的屬性(MessageProperties,在AMQP協議中定義了14中properties,這些屬性會隨著消息一起發送)中設置兩個值replyTo(一個Queue名稱,用于告訴服務器處理完成后將通知我的消息發送到這個Queue中)和correlationId(此次請求的標識號,服務器處理完成后需要將此屬性返還,客戶端將根據這個id了解哪條請求被成功執行了或執行失敗)    2).服務器端收到消息并處理    3).服務器端處理完消息后,將生成一條應答消息到replyTo指定的Queue,同時帶上correlationId屬性    4).客戶端之前已訂閱replyTo指定的Queue,從中收到服務器的應答消息后,根據其中的correlationId屬性分析哪條請求被執行了,根據執行結果進行后續業務處理總結    本文介紹了RabbitMQ中個人認為最重要的概念,充分利用RabbitMQ提供的這些功能就可以處理我們絕大部分的異步業務了。

參考博文:http://blog.csdn.net/whycold/article/details/41119807


發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
欧美多人爱爱视频网站| 亚洲天堂av高清| 欧美大胆在线视频| 自拍偷拍亚洲精品| 亚洲欧美激情视频| 亚洲无av在线中文字幕| 亚洲欧美国产精品| 国产精品久久久精品| 国产日韩欧美一二三区| 成人在线视频福利| 亚洲最大在线视频| 欧美大片网站在线观看| 91免费在线视频网站| 欧美大胆a视频| 国产精品大陆在线观看| 97国产一区二区精品久久呦| 日韩福利在线播放| 亚洲成人黄色在线| 久久免费视频在线| 精品成人av一区| 精品国产鲁一鲁一区二区张丽| 欧美巨乳美女视频| 欧美性videos高清精品| 26uuu国产精品视频| 俺也去精品视频在线观看| 久久久国产精品视频| 欧美xxxx综合视频| 亚洲欧美在线x视频| zzjj国产精品一区二区| 欧美日韩裸体免费视频| 欧美性xxxx| 久久777国产线看观看精品| 国产亚洲精品久久久| xvideos国产精品| 91精品国产乱码久久久久久蜜臀| 97国产精品视频人人做人人爱| 国产欧美在线视频| 69av在线播放| 国产aaa精品| 久久久免费在线观看| 国产欧美精品日韩| 亚洲乱码av中文一区二区| 日韩亚洲成人av在线| 色妞久久福利网| 久久最新资源网| 欧美激情亚洲另类| 久久久久久久久久久av| 欧美亚洲国产另类| 亚洲人在线观看| 揄拍成人国产精品视频| 亚洲精品狠狠操| 韩国视频理论视频久久| 91丝袜美腿美女视频网站| 国产精品高精视频免费| 麻豆成人在线看| 久久久国产视频91| 国模精品系列视频| 欧美色欧美亚洲高清在线视频| 精品亚洲永久免费精品| 成人免费大片黄在线播放| 日韩视频免费大全中文字幕| 在线午夜精品自拍| 高清在线视频日韩欧美| 日韩有码在线电影| 中文字幕日韩电影| 中文字幕日韩精品在线观看| 成人激情av在线| 91成人在线视频| 成人网欧美在线视频| 国产精品综合网站| 欧美剧在线观看| 亚洲欧美日韩图片| 欧美视频不卡中文| 一区二区亚洲欧洲国产日韩| 国内精品久久影院| 欧美极品少妇与黑人| 福利一区福利二区微拍刺激| 欧美日韩国产综合视频在线观看中文| 亚洲偷熟乱区亚洲香蕉av| 国自在线精品视频| 欧美视频精品一区| 国产精品高精视频免费| 国产精品99久久99久久久二8| 国内精品免费午夜毛片| 国模精品视频一区二区三区| 欧美体内谢she精2性欧美| 欧美成人午夜视频| 国产精品∨欧美精品v日韩精品| 欧美激情日韩图片| 亚洲精品免费一区二区三区| 日韩中文字幕国产| 国产精品美女在线观看| 国产日产久久高清欧美一区| 不卡毛片在线看| 国产精品第100页| 岛国av一区二区| 欧美日韩国产中文字幕| 久久久久国产精品免费| 欧美成年人视频网站欧美| 国产精品ⅴa在线观看h| 欧美精品九九久久| 91精品久久久久久| 亚洲欧美精品一区| 国产精品成人免费视频| 亚洲人成五月天| 久久久精品亚洲| 2019最新中文字幕| 久久av中文字幕| 欧美午夜片欧美片在线观看| 91久久精品一区| 91精品国产色综合久久不卡98口| 亚洲国产精品一区二区三区| 在线国产精品视频| 一区二区三区动漫| 国产亚洲一级高清| 超碰91人人草人人干| 国产精品久久久久久av| 麻豆国产精品va在线观看不卡| 精品国产美女在线| 欧美在线视频一区二区| 亚洲国产精品va在线看黑人| 色www亚洲国产张柏芝| 精品伊人久久97| 亚洲精品aⅴ中文字幕乱码| 隔壁老王国产在线精品| 久久久视频免费观看| 九色精品美女在线| 欧美日韩在线视频首页| 欧美激情亚洲综合一区| 日韩电影免费观看中文字幕| 久久国产精品久久国产精品| 久久久久久综合网天天| 成人在线视频网站| 亚洲精品一区二区网址| 成人在线小视频| 欧美成人黑人xx视频免费观看| 国产精品久久不能| 中文字幕亚洲天堂| 亚洲精品日韩激情在线电影| 成人高h视频在线| 色综合色综合久久综合频道88| 欧美日韩国产色视频| 亚洲综合中文字幕68页| 57pao国产精品一区| 国产精品久久久久久久久男| www.欧美免费| 亚洲国产精久久久久久久| 97在线视频免费播放| 欧美日韩国产一区二区三区| 国产亚洲日本欧美韩国| 欧美最猛黑人xxxx黑人猛叫黄| 日本免费久久高清视频| 欧美成人精品一区二区| 欧美日韩亚洲国产一区| 国产91亚洲精品| 日韩精品视频在线| 国产综合色香蕉精品| 91在线无精精品一区二区| 亚洲三级黄色在线观看| 日韩成人小视频| 国产精品69久久久久| 欧美在线视频观看| 欧美成人精品在线视频| 日韩欧美在线中文字幕|