Danny AJ

RabbitMQ分佈式集群架構和高可用性（HA） (一） 功能和原理 設計集群的目的 允許消費者和生產者在RabbitMQ節點崩潰的情況下繼續運行 通過增加更多的節點來擴展消息通信的吞吐量 1 集群配置方式 RabbitMQ可以通過三種方法來部署分佈式集群系統，分別是：cluster,federation,shovel cluster: 不支持跨網段，用於同一個網段內的局域網 可以隨意的動態增加或者減少 節點之間需要運行相同版本的RabbitMQ和Erlang federation: 應用於廣域網，允許單台服務器上的交換機或隊列接收發佈到另一台服務器上交換機或隊列的消息，可以是單獨機器或集群。 federation隊列類似於單向點對點連接，消息會在聯盟隊列之間轉發任意次，直到被消費者接受。 通常使用federation來連接internet上的中間服務器，用作訂閱分發消息或工作隊列。 shovel: 連接方式與federation的連接方式類似，但它工作在更低層次。 可以應用於廣域網。 2 節點類型 RAM node: 內存節點將所有的隊列、交換機、綁定、用戶、權限和vhost的 元數據 定義存儲在內存中，好處是可以使得像交換機和隊列聲明等操作更加的快速。 Disk node: 將元數據存儲在磁盤中，單節點系統只允許磁盤類型的節點，防止重啟RabbitMQ的時候，丟失系統的配置信息。 問題說明： RabbitMQ要求在集群中至少有一個磁盤節點，所有其他節點可以是內存節點，當節點加入或者離開集群時，必須要將該變更通知到至少一個磁盤節點。 如果集群中唯一的一個磁盤節點崩潰的話，集群仍然可以保持運行，但是無法進行其他操作（增刪改查），直到節點恢復。 解決方案： 設置兩個磁盤節點，至少有一個是可用的，可以保存元數據的更改。 3 Erlang Cookie Erlang Cookie 是保證不同節點可以相互通信的密鑰，要保證集群中的不同節點相互通信必須共享相同的Erlang Cookie。 具體的目錄存放在/var/lib/rabbitmq/.erlang.cookie。 說明： 這就要從rabbitmqctl命令的工作原理說起，Ra...

你是否遇到過兩個（多個）系統間需要通過定時任務來同步某些數據？你是否在為異構系統的不同進程間相互調用、通訊的問題而苦惱、掙扎？如果是，那麼恭喜你，消息服務讓你可以很輕鬆地解決這些問題。 消息服務擅長於解決多系統、異構系統間的數據交換（消息通知/通訊）問題，你也可以把它用於系統間服務的相互調用（RPC）。本文將要介紹的RabbitMQ就是當前最主流的消息中間件之一。 RabbitMQ簡介 AMQP，即Advanced Message Queuing Protocol，高級消息隊列協議，是應用層協議的一個開放標準，為面向消息的中間件設計。消息中間件主要用於組件之間的解耦，消息的發送者無需知道消息使用者的存在，反之亦然。 AMQP的主要特徵是面向消息、隊列、路由（包括點對點和發布/訂閱）、可靠性、安全。 RabbitMQ是一個開源的AMQP實現，伺服器端用Erlang語言編寫，支持多種客戶端，如：Python、Ruby、.NET、Java、JMS、C、PHP、ActionScript、XMPP、STOMP等，支持AJAX。用於在分布式系統中存儲轉發消息，在易用性、擴展性、高可用性等方面表現不俗。 下面將重點介紹RabbitMQ中的一些基礎概念，了解了這些概念，是使用好RabbitMQ的基礎。 ConnectionFactory、Connection、Channel ConnectionFactory、Connection、Channel都是RabbitMQ對外提供的API中最基本的對象。Connection是RabbitMQ的socket連結，它封裝了socket協議相關部分邏輯。ConnectionFactory為Connection的製造工廠。 Channel是我們與RabbitMQ打交道的最重要的一個接口，我們大部分的業務操作是在Channel這個接口中完成的，包括定義Queue、定義Exchange、綁定Queue與Exchange、發布消息等。 Queue Queue（隊列）是RabbitMQ的內部對象，用於存儲消息，用下圖表示。 RabbitMQ中的消息都只能存儲在Queue中，生產者（下圖中的P）生產消息並最終投遞到Queue中，消費者（下圖中的C）可以從Queue中獲取消息並消費。 多...

從 2016 年開始寫  Go  程式語言，在這一年我向很多朋友介紹了 Go 語言，很多人就不經問到為什麼我這麼喜歡 Go 語言，在公司內同事或主管更會問，為什麼要從 Node.js 或其他語言轉換到 Go，Go 語言有什麼地方可以帶給公司更大的利益，否則為什麼要多花時間跟人力去嘗試 Go 語言。如果團隊要建置一個商業 Web 服務，那我覺得底下的優點，是讓您選擇 Go 語言的最主要原因。 Go 優勢 快速又簡單部署 支援跨平台編譯 保護原始程式碼 善用多核心處理 底下會針對上述提到的優點進行詳細說明。 1. 快速部署 傳統部署 大家都知道 Golang 可以將專案程式碼編譯成一個二進制檔案，直接部署此檔案會比上傳上百的或上千個檔案還要來得容易。傳統上傳多個檔案是非常慢的，這就是為什麼我們在部署之前會將所有檔案透過 zip 或 tar 的方式打包成一個檔案再部署到機器上，除此之外，上傳後，伺服器端要另外解壓縮或者做其他事情，想想看要寫多少 Shell Script 才能完成此事情，而這些事情都是要靠  DevOps  工程師去撰寫，以及花時間去調整  CI  伺服器 (像是  Jenkins )。 伺服器設定 當然還沒完，檔案上傳完後，每一台伺服器都需要準備相關軟體及設定，這時候可以透過  Docker  及  Puppet  或  Chef  完成這些事情，這些都是要花很大量的時間去處理，另外還要處理相對應安全性問題，像是  PHP  或  Python  或  Ruby  甚至  Node.js  版本的升級，太多層面需要考量。 用 Go 語言 在 Go 語言，你只需要將程式碼編譯出二進制執行檔，就可以直接丟到多台伺服器，直接啟動，並不需要準備各種環境或軟體設定，省下來的時間就是大量的金錢。如果是用 Go 語言，我相信團隊內的 DevOps 工程師會很感謝你。假如團隊還沒將 DevOps 流程納入公司的商業考量，那您就落伍了。一位好的 DevOps 工程師可以幫團隊省下很多資金。 2. 不需要 Web...