Skip to main content

Red Hat JBoss Fuse/A-MQ - Fabric 建立與設定。

因為一些關係,這幾天花了一些些時間看JBoss Fuse, 然後那個Data Grid 只好往後延了~科科 (現在排隊的TODO 清單實在是太多了..,有人要來幫我的忙嗎?不然我都沒空去逛街,都快變成黃臉婆了.. )!

基本上Fuse 的架構病不複雜,Fuse 的底層並不是大家熟悉的EE, JBoss Fuse 基本上就是等於一個ESB. JBoss Fuse 為了最輕量化,所以底層使用OSGI 模組化的Container,而不是Java EE 這種大的,整包的Container.

Fuse 的架構比較特別的是它上面有個叫做Fabric的元件。特別對它研究了一下。 之後再慢慢補上Camel 還有 A-MQ 的部分。

Fabric 是啥鬼?Fabric 是拿來管理用的。所以也適用A-MQ. 根據定義,這時,首先到腦子裡的,就是為啥要管理,有什麼好管理的呢?在Fuse 上,你可以啓動Camel 和 A-MQ 的instance, 想當然爾,就會有很多"設定",因為Fabric 統一管理了上面的設定,所以它就可以幫助橫向擴展的部署你的Fuse 或是 A-MQ 的Container(容器)了,像是遠端安裝,開啓,分配Container(容器) 的設定,負載平衡(Load balance),容錯(Failover)甚至可以讓你做到程式版本上線rollout. 所以一個Fabric就是一個管理範圍的定義。



以上的設定,就以註冊的方式被納入管理,Fabric 是透過Apache 的ZooKeeper 做到可以再分散的環境記錄所有叢集跟分散的設定內容,讓你可以橫跨網路去部署跟建置整個環境。它在Fuse 與 A-MQ 裡面就叫做Registry.



以上講的註冊只是儲存資料內容,那由誰去負責提供這些資料出去給整個Fabric 管理範圍裡面的Container 容器呢?就是 Fabric 伺服器 (server) ,每個Fabric 伺服器都有自己獨立的一套註冊的內容,他們之間會自動互相的同步修改的內容,一個Fabric 管理範圍,通常Fabric 伺服器都是要單數的,因為Fabric 計算是用 quorum-based 的計算公式方式。通常在一個正式環境,Fabric server 的數量最少最少都要三台來備援。


以上所有的設定啊,管理什麼的,都是為了真正可執行的程式來準備的,而真正跑這些應用程式的環境,就叫做 Fabric 容器(被管理容器) 。 它上面可以裝A-MQ 的Broker, ESB 啊等等的。每一個 Fabric 容器都是一個獨立的JVM.

那應用程式要怎麼樣部署在Container 上面呢??!!會透過Fuse Fabric 這個特別的管理機制,我想啦~(不負責任中..)~是為了配合OSGi 的關係,因為OSGi 是把應用程式與應用程式之間的關係,變成Bundle, 透過設定把互相的依賴性建立起來。不像早期寫程式的時候,一般使用者會不管3721的把認識的不認識的Lib jar 全部一股腦放進來 (這台灣許多專案非常常見。。。。)OSGi 的概念有點像是模組化,要執行的時候就會把需要的程式讀取進來。所以要部署在OSGi 這個容器上,部署就像疊樂高一樣。同樣的,因為我們的底層是Karaf ,所以一樣有許多Feature, 這也像是樂高的其中一個積木吧。(只是讀取,設定的方式不同。)把需要用到的Bundle ,Feature 還有依賴的程式疊一疊,放在Fabric 的Container 上就可以跑了。 去定義樂高積木般會用到的Bundle, Feature還有程式等等,就叫做Profile。至於Feature 怎麼樣去設定,以後有機會再寫。(Fuse 內建已經有幾個Feature 與Profile 了。) 重要的是,Profile 也可以去繼承某個Profile。


好啦~講了阿裡阿咂,一大堆,我相信看到這裡應該頭都暈了吧.. 先來實作個Fabric 的小環境吧。

這次我想要做的事是這樣滴~:


  1. 建立一個Fabric 的管理環境,一台Fabric 伺服器。
  2. 建立三個Fabric 容器
    • mgtConsole - 安裝網頁的GUI 管理畫面
    • child1- 安裝A-MQ環境
    • child2 - 安裝有 JMS 的 Camel環境
  3. 把child1 與 child2 加入Fabric 管理環境中。

如下圖:




1. 廢話不多說,請先去下載JBoss Fuse 6.0 (6.1 現在正在Beta, 聽說他有更好的網路管理畫面,hawtio, 請期待我的分享。) 老樣子,請解壓縮到電腦裡面的某目錄。



2. 把使用者與密碼設定上去,請到$FUSE/etc/users.properties 在裡面新增一個admin 的使用者,
USER=PASSWORD,ROLE1,ROLE2,...
最簡單就是把 #admin=admin,admin 這段的#拿掉。然後儲存。


3. 啓動FUSE, 到$FUSE/bin/ 下,執行 fuse, 或是 fuse.bat (如果你是windows環境)


4. 定義一個Fabric 管理環境,

JBossFuse:karaf@root> fabric:create --zookeeper-password admin
Using specified zookeeper password:admin
5. 建立一個叫做mgtConsole 的Fabric 容器,
JBossFuse:karaf@root> fabric:container-create-child root mgtConsole
The following containers have been created successfully:
Container: mgtConsole.

容器裡面放fmc 內建的Profile, 這個Profile 就是Web GUI 界面。
JBossFuse:karaf@root> fabric:container-add-profile mgtConsole fmc

Web GUI 的界面需要定義一個Port 給它。
JBossFuse:karaf@root> fabric:profile-edit -p org.ops4j.pax.web/org.osgi.service.http.port=8182 fmc

幫這個容器安裝Fabric Agent feature,所以Fabric 伺服器才可以透過Agent 設定,分配安裝。
JBossFuse:karaf@root> fabric:profile-edit --features fabric-agent/0.0.0 fmc

把fmc Profile 的明細印出來看一下。
JBossFuse:karaf@root> fabric:profile-display fmc
Profile id: fmc
Version   : 1.0
Attributes: 
parents: default
Containers: mgtConsole

Container settings
----------------------------
Repositories : 
mvn:org.apache.karaf.assemblies.features/enterprise/2.3.0.redhat-60024/xml/features
mvn:org.apache.karaf.assemblies.features/standard/2.3.0.redhat-60024/xml/features
mvn:org.fusesource.fabric/fuse-fabric/7.2.0.redhat-024/xml/features
mvn:org.jclouds.karaf/jclouds-karaf/1.5.7/xml/features

Features : 
fabric-webui
fabric-jclouds
war
fabric-agent/0.0.0
fabric-rest


Configuration details
----------------------------
PID: org.ops4j.pax.web
  org.osgi.service.http.port 8182


Configuration details
----------------------------
PID: org.ops4j.pax.web
  org.osgi.service.http.port 8281

重新啓動mgtConsole 容器。
JBossFuse:karaf@root> fabric:container-stop mgtConsole 
JBossFuse:karaf@root> fabric:container-start mgtConsole 

在瀏覽器中,去 http://localhost 8182, 請用admin/admin 登入。


這時你可以看到裡面有兩個建好的Containers 。


5. 建立child1 與 child2 的Fabric 容器, 輸入Fabric 的 ID與密碼, admin/admin.

JBossFuse:karaf@root> fabric:container-create-child root child1
Jmx Login for root: admin
Jmx Password for root: 
The following containers have been created successfully:
Container: child1.
JBossFuse:karaf@root> fabric:container-create-child root child2
The following containers have been created successfully:
Container: child2.

印出Fabric 管理範圍內的容器。
JBossFuse:karaf@root> fabric:container-list 
[id]                           [version] [alive] [profiles]                     [provision status]
root*                          1.0       true    fabric, fabric-ensemble-0000-1, jboss-fuse-full success
  mgtConsole                   1.0       true    fmc, default                   success
  child1                       1.0       true    default                        success
  child2                       1.0       true    default                        success
  
6. 建立兩個Profile, 一個繼承A-MQ, 一個繼承有JMS 的 Camel.

JBossFuse:karaf@root> fabric:profile-create --parents a-mq  myAMQ
JBossFuse:karaf@root> fabric:profile-create --parents camel-jms  myCamel

一樣幫兩個容器安裝Fabric Agent feature
JBossFuse:karaf@root> fabric:profile-edit --features fabric-agent/0.0.0 myAMQ 
JBossFuse:karaf@root> fabric:profile-edit --features fabric-agent/0.0.0 myCamel 

在兩個容器裡,分別安裝剛剛建的兩個Profile
JBossFuse:karaf@root> fabric:container-add-profile child1 myAMQ 
JBossFuse:karaf@root> fabric:container-add-profile child2 myCamel 

印出Fabric 管理範圍內的容器跟內容。
JBossFuse:karaf@root> fabric:container-list 
[id]                           [version] [alive] [profiles]                     [provision status]
root*                          1.0       true    fabric, fabric-ensemble-0000-1, jboss-fuse-full success
  mgtConsole                   1.0       true    fmc, default                   success
  child1                       1.0       true    myAMQ, default                 finalizing
  child2                       1.0       true    myCamel, default               success

7. 最後一步,把兩個容器,child1 還有 child2 加入這個Fabric 管理環境內。
JBossFuse:karaf@root> fabric:join --zookeeper-password admin localhost child1
You are about to change the container name. This action will restart the container.
The local shell will automatically restart, but ssh connections will be terminated.
The container will automatically join: localhost the cluster after it restarts.
Do you wish to proceed (yes/no):
JBossFuse:karaf@root> fabric:join --zookeeper-password admin localhost child2
A container with the name: child1 is already member of the cluster. You can specify a different name as an argument.You are about to change the container name. This action will restart the container.
The local shell will automatically restart, but ssh connections will be terminated.
The container will automatically join: localhost the cluster after it restarts.
Do you wish to proceed (yes/no):

JBossFuse:karaf@root> config:edit org.fusesource.fabric.zookeeper
JBossFuse:karaf@root> config:proplist
   service.pid = org.fusesource.fabric.zookeeper
   zookeeper.password = admin
   zookeeper.url = ChristinatekiMacBook-Air.local:2181
   fabric.zookeeper.pid = org.fusesource.fabric.zookeeper
JBossFuse:karaf@root> config:cancel

管理畫面大概是這樣。有四個Container, 其中每個Profile 安裝的 feature.



以上,設定完成了,如果有興趣玩得更深,請參考原廠文件囉~:原廠文件

Comments

littlehoi said…
nice, amqp 有心跳等, 連結硬件,是不是一定要有運行OS, client等?

Popular posts from this blog

JBoss EAP 6 - 效能調校 (一) DataSource 的 Connection Pool

效能沒有什麼Best Practice, 反正能調整的就那些。 通常,一個程式的效能大概有70-80% 都跟程式怎麼寫的其實比較有關係。

最近我最疼愛的小貓Puji 因為膀胱結石開刀的時候過世了,心情很差請原諒我的口氣沒有很好,也沒有心情寫部落格。

Puji R.I.P.

=======================正文=======================

這個題目很多人叫我寫,可是這題目好大,這分明就是整死我咩~
所以我會分幾段慢慢寫。

JBoss 的 SubsystemDatasource WebWeb Service EJB Hibernate JMSJCAJVM 調校OS (作業系統)

先來看一下 DataSource Subsystem, DataSource 的部分主要是針對Connection Pool 做調校。

通常,程式都會需要跟資料庫界接,電腦在本機,尤其是在記憶體的運算很快,但是一旦要外部的資源連接,就是會非常的耗資源。所以現在的應用程式伺服器都會有個Pool 放一些先連接好的 資料庫connection,當程式有需要的時候就可以馬上提供,而不用花那些多餘的資源去連接資料庫。

這就是為什麼要針對Connection Pool 去做調校。

以下會討論到的參數,都是跟效能比較有關係,Datasource 還有很多參數,像是檢核connection 是否正確的,我都不會提到。如果你追求的是非常快速的效能,那我建議你一個檢核都不要加。當然,這樣就會為伺服器上面執行的程式帶來風險。這就是你要在效能與正確,安全性上面的取捨了。 (套句我朋友說的話,不可能又要馬兒好,又要馬兒不吃草的..)

最重要的調校參數就是 Connection 的 Pool 數量。(也就是那個Pool 裡面要放幾條的connection.) 這個參數是每一個應用程式都不一樣的。

min-pool-size 

Connection Pool 最少會存留的connection 數量

max-pool-size 

Connection Pool 最多可以開啓的 connection 數量

prefill

事先將connection pool 裡面建立好min-pool-size 的connection.

我的建議是觀察一下平常程式要用到的量設定為 min-pool-size 。
加上…

Red Hat Fuse - Announcing Fuse 7 Tech preview 3 release.

Red Hat Fuse 7.0 technical preview three is out today! On the pathway to become one of the best cloud-native integration platform, Fuse gives developer freedom to choose how they want to develop the integration solution, where they want to deploy it and capabilities to address new integration personas that do not have development experience.
By supporting the three major runtime, developer is free to work on the runtime of their choice.By supporting standalone and cloud deployment, it simplifies the complexity to distinguish between these environments, allowing application to deploy freely among the environment of your choice. All levels of developers are welcome, you can either dive deep into creating customize complex integration logic, or using the new low code platform to quickly build a simple integration. In this Tech Preview release you get it all.
Fuse StandaloneSpring-boot for microserviceKaraf 4 for OSGi loverJBoss EAP for JavaEE developersFuse on OpenShiftPlugins for easy co…

The rise of Agile Integration, Integration is not DEAD nor LAME!

I wanted to blog about this for a very long time, but because of work and being too lazy to turn on my laptop on the weekends, now I finally have a couple of hours to sit down and start blogging.

"Integration is DEAD."
"No, no, let's talk about microservice!!"
"What is that again? Integration, you mean SOA? It's lame... ".

These makes the majority of the percentage when I talk about Integration. In fact, if you happen to be in any the software conference, you see the rooms full when it's about "container" and "microservice." I understand the nature of a developer, always seeking for the latest and greatest technology out there. BUT!! In my opinion, I don't think Integration is going AWAY if you containerize your application. Neither does it will DISAPPEAR in a microservice architecture. In fact, Integration just gets more complicated and tricky when you try to break an application into smaller pieces and have them runni…