Skip to main content

JEAP 5 - Class Loading

常常遇到在從其他AP Server搬家到J老闆小朋友們都會因為Jar檔的衝突,很慘烈的把檔案砍來砍去。不停的咒罵J老闆。

其實。。你還不夠瞭解它。一旦你知道了,也許就不會這麼痛苦了。

JBoss 的Class Loading 分成兩個對程式人員比較大的問題,一個Loading的順序,另一個則是isolation, 我個人認為,isolation造成的問題比順序更為嚴重。

先來看看JBoss EAP 5 的Loading方式,

1. JBoss 啓動之後,會先將一些基本的檔案(放在JBOSS_INSTALL_PATH/jboss-as/lib下)讀進JBoss 這個大容器裡面。再由這些檔案負責開始真的將部署的檔案Loading 進 JBoss 身上了。



2. 接下來,就是每個WAR的檔案。根據J2EE的規範,每個WAR檔都不能看見對方的檔案,所以每個WAR檔都是獨立的個體,分別被讀入JBoss大容器中。

3. 而後就是EAR裡面的 EJB 與 lib檔案,而這個大容器裡面,就只會有一份,大家一起共用來看。如果遇到重複名稱的class, 那就會以最先loading進入的為主。


4. 讀取全域的資源,如,部署在deploy目錄下的EJB.這些同樣都只有一份會存在於JBoss 這個容器中。



5. 最後讀進 EE 跟 JDK 的內容。
  
以上是讀取的順序。

現在來講講isolation,所謂的isolation是指你的程式在JBoss這個大容器的能見度。
以JBoss default 的設定來說,唯一會對其他人封閉的部分只有WAR檔。

以"蘋果"這個Class為例(PS, 我不是果粉,我不是果粉!)
如果我是把它放在WAR裡面,那JBoss 這個Container就會有兩個"蘋果"的instance,
WAR-1 會讀到蘋果A,WAR-2 會讀到蘋果B.

但是,如果這個蘋果是放在EAR 的 lib中,因為EAR檔是只會存一份在 Container裡面,所以最後一個被load到的EAR建起來的蘋果,就是大家以後共用的蘋果了




所以,以上就是isolation, 看,所有東西換成蘋果就多麼的簡單啊 (哇哈哈,下次用香蕉好了)
當然拉,如果要解決這些問題怎麼辦?

J老闆以他的彈性著稱,如果連這個都不能解的話,那就太遜了!
(魯夫是橡膠人,所以他也很有彈性!誤...)

JBoss EAP 5 的調整方式,就是在你的專案裡面放jboss-classloading.xml, 三種常見的檔案, JAR, WAR 跟 EAR 放置的位置稍有不同。

JAR , 請放在 META-INF/ 下, 也就是 xx.jar/META-INF/jboss-classloading.xml
WAR, 請放在 WEB-INF/ 下, 也就是 xx.war/WEB-INF/jboss-classloading.xml
EAR, 請放在 META-INF/ 下, 也就是 xx.ear/META-INF/jboss-classloading.xml

當然,也可以設定在java 程式裡,不過,如果是我,我不會這樣做,因為這樣就喪失了城市的獨立性。(如果你還是有興趣,請參考這個文件。)

jboss-classloading.xml的內容如下:


<classloading xmlns="urn:jboss:classloading:1.0"
              domain="xxx.war" 
              export-all="NON_EMPTY" 
              import-all="true" 
              name="xxx.war" 
              parent-domain="xxx.ear" 
              parent-first="true" >
</classloading>

domain 你想要取給你的這個loader 的 domain 名稱,但是通常都會用AP 的名稱,如xx.war, xx.ear 等。
parent-domain 如果你沒設定這個,那他default就是設定給全容器看(DefaultDomain),如果你要特別設定到前一個loader, 那可以設定成.ear等..
export-all "NON_EMPTY" 將所有的class 都暴露出去
import-all 將其他AP 暴露出來的class都load近來
name  war, ear 或是jar的名稱
parent-first 是否遵照J2EE規範,若是true, 那就是遵照J2EE的規範,從parent的上層讀下來,但是如果你是直接deploy WAR檔,那就會是從WAR檔開始。

這邊來打個比方,如果說,你同時在common的lib下與EAR的lib裡面已經各放了一個蘋果。
以先前的loading方式,那最後一個被load 進的,就是common lib裡面的蘋果。

在EAR裡面,增加,設定一個domain的名字給他。這樣兩個蘋果就可以同時存在在容器裡。
從WAR檔裡面讀,因為要follow JavaEE standard, 所以是從底下讀取,所以會去讀EAR裡面的蘋果。

在EAR-2的META-INF 下建立jboss-classloading.xml


<classloading xmlns="urn:jboss:classloading:1.0"
              domain="2.ear" 
              export-all="NON_EMPTY" 
              import-all="true" 
              name="2.ear">
</classloading>


那在這個情況下,如果我想要去讀common/lib裡面的蘋果,很簡單,加上parent-first="false" 就可以了。


<classloading xmlns="urn:jboss:classloading:1.0"
              domain="2.ear" 
              export-all="NON_EMPTY" 
              import-all="true" 
              parent-first="true" >
</classloading>



在WAR檔中也是同理可証。只是是放在WEB-INF裡面而已.
以上。希望幫助大家多多瞭解J老闆拉!





Comments

Max Lin said…
看到這篇文章真的受用良多,想再多請教老師一個問題,就是似乎JBoss到了AS 7的版本,針對ClassLoading的作法用了Module的概念來管理,不知道這部分與JBoss 5是否差異頗大呢?(我實際是遇到了MBean引用了外部Jar的Class,在Eclipse裡面測試都還OK,但是到了JBoss AS 7底下跑卻會出現很多找不到Class定義的Exception出來。)
Christina Lin said…
那就要看你用的jar 檔事本身就存在於Module 之下的嗎?如果沒有,那我建議你自己弄一個 Module 然後把你要的jar 檔放進去比較好。詳見: http://wei-meilin.blogspot.tw/2012/10/jeap-6-modules.html
Max Lin said…
抱歉過了這麼久才回復~~學業比較忙~~到了寒假才有機會繼續做嘗試...感謝老師的提示,我有先拿老師的範例JAR,並製作MBEAN(包成.sar)放到JBOSS上跑跑看,結果是成功的,不過當我嘗試用我自己的Module(放了很多resource,因為有很多外部的jar),他就開始出現一些奇怪的問題....大部分都是java.lang.ClassNotFoundException,不過很怪的是連org.w3c.dom.DOMException也會找不到...還在找可能的原因。
Max Lin said…
發現出現了Failed to define class org.w3c.dom.DOMException in Module這類的Warning訊息...似乎就是因為有些Module內的class都出現了類似的情況,所以最後才會變成java.lang.ClassNotFoundException的Error。
Christina Lin said…
因為沒看過程式所以無法確定,但看起來很像是Library 衝突的問題,要不要先把一些與JBoss 重複的jar檔從你的程式包裡面移調呢? 如,log, hibernate等等...
Max Lin said…
多謝老師的回覆!其實我自己也不太確定問題的癥結點...這是我在跑JBoss AS 7.1 Final的視窗畫面,裡面有相關的錯誤訊息,想請老師過目。
https://dl.dropbox.com/u/73908482/ERRORLOG.txt

我在想這段會不會是關鍵呢...
Failed to define class org.apache.activemq.ActiveMQConnectionFactory in Module "asiaflow.TAService:main" from local module loader @c05d3b (roots: /home/luca/jboss-as-7.1.1.Final/modules): java.lang.LinkageError: Failed to link org/apache/activemq/ActiveMQConnectionFactory (Module "asiaflow.TAService:main" from local module loader
Christina Lin said…
Post 一下你的module.xml出來?
Max Lin said…
好的,這是我的module.xml,請老師過目。

https://dl.dropbox.com/u/73908482/module.xml
Christina Lin said…
跟我猜測一樣。。。
第一,你要可以看一下,有些jar檔是否有loading的需要。例如說logging 的jar檔,把不必要的東西砍掉吧。

第二,JEAP 6 的module loading 需要自己先設定dependency. (所以可能是你裡面的jar檔需要 jdom 的class) 但你沒有設定dependencies....



所以他不知道要先load.... 因此出了問題..

還有,怕你誤會,我這篇文章是 JEAP 5 所以跟你JBoss EAP 6 的方式完全是兩碼子事喔!
以後我有空~~的話, 再寫EAP 6吧 >x<
Max Lin said…
原來如此!!但是看起來真的跟JBOSS AS 7的許多設定頗像的...不過還是感謝老師耐心地看完我的提問還有回答!我會再嘗試看看
Max Lin said…
我又嘗試了一段時間,雖然錯誤訊息還是一樣,但是我仔細看過ERRORLOG之後,大致上可以統整出,主要是找不到javax.naming.Referenceable還有org.w3c.dom.DOMException這兩個CLASS所造成。

1. 很懸疑的是,這兩個Class在jdk底下的rt.jar裡面應該都有的,我有嘗試過在sun.jdk的module底下加入


但是還是沒有改善

2. 後來查詢後,發現jboss-as-7.1.1 Final的javax.api module底下也包含了這兩個class path,所以我除了自己的module的dependency之外,也加入了javax.api的dependency,但是仍然不見改善XD||

還在繼續找尋可能的原因!!
Max Lin said…
老師!!!!!!我突然有進展了!!!!
我後來就在JBoss的Module資料夾底下亂翻一通,發現到javaee.api這個module,他有javax.api的dependency!
於是我把我的自訂module.xml改成如下
https://dl.dropbox.com/u/73908482/module.xml

我把javaee.api的dependency加到我的自訂module底下,結果ActiveMQ的部分就成功運行了!也成功利用程式自動產生MBean並且註冊到MbeanServer底下了!

雖然還有一些小ERROR,不過基本上最關鍵的地方已經可以跑了!(QQ太感動了!!!!)

這是運行的過程!!
https://dl.dropbox.com/u/73908482/ERRORLOG/ERRORLOG4.txt
Max Lin said…
目前剩下兩個問題:
1.log4j的Appender的衝突問題:似乎是因為同樣的class被兩個不同的classloader所讀取,所以產生衝突,經過查詢後,我在
jboss-deployment-structure.xml
加入了exclusions,把org.apache.log4j還有org.slf4j兩個module放在裡面,之後就排解了!!!

2.在deserialize的時候會出現ClassNotFoundException:
經過查詢...似乎在所謂osgi環境下,好像不能直接使用傳統簡單的方法來反序列化我們的資料...JBOSS好像有TCCL可以支援這方面的需求??還在研究當中~~

參考資料:
http://tech-tauk.blogspot.tw/2010/05/thread-context-classlaoder-in.html

Popular posts from this blog

JBoss EAP 6 - 效能調校 (一) DataSource 的 Connection Pool

效能沒有什麼Best Practice, 反正能調整的就那些。 通常,一個程式的效能大概有70-80% 都跟程式怎麼寫的其實比較有關係。

最近我最疼愛的小貓Puji 因為膀胱結石開刀的時候過世了,心情很差請原諒我的口氣沒有很好,也沒有心情寫部落格。

Puji R.I.P.

=======================正文=======================

這個題目很多人叫我寫,可是這題目好大,這分明就是整死我咩~
所以我會分幾段慢慢寫。

JBoss 的 SubsystemDatasource WebWeb Service EJB Hibernate JMSJCAJVM 調校OS (作業系統)

先來看一下 DataSource Subsystem, DataSource 的部分主要是針對Connection Pool 做調校。

通常,程式都會需要跟資料庫界接,電腦在本機,尤其是在記憶體的運算很快,但是一旦要外部的資源連接,就是會非常的耗資源。所以現在的應用程式伺服器都會有個Pool 放一些先連接好的 資料庫connection,當程式有需要的時候就可以馬上提供,而不用花那些多餘的資源去連接資料庫。

這就是為什麼要針對Connection Pool 去做調校。

以下會討論到的參數,都是跟效能比較有關係,Datasource 還有很多參數,像是檢核connection 是否正確的,我都不會提到。如果你追求的是非常快速的效能,那我建議你一個檢核都不要加。當然,這樣就會為伺服器上面執行的程式帶來風險。這就是你要在效能與正確,安全性上面的取捨了。 (套句我朋友說的話,不可能又要馬兒好,又要馬兒不吃草的..)

最重要的調校參數就是 Connection 的 Pool 數量。(也就是那個Pool 裡面要放幾條的connection.) 這個參數是每一個應用程式都不一樣的。

min-pool-size 

Connection Pool 最少會存留的connection 數量

max-pool-size 

Connection Pool 最多可以開啓的 connection 數量

prefill

事先將connection pool 裡面建立好min-pool-size 的connection.

我的建議是觀察一下平常程式要用到的量設定為 min-pool-size 。
加上…

Red Hat JBoss Fuse/A-MQ - Fuse and A-MQ Version 6.3 GA is released!

Fuse and A-MQ 6.3 GA has just went out. Maybe, you would think this is just only a minor version release why should I care? Hold your thoughts on that! Because they have done a lot of improvements and also added many new features into this release.

Besides various bug fixes and making sure Fuse Fabric is much more stable. There are two major change in this version update:

New Tooling in JBoss Developer Studio (JBDS) 9.1 GA. Newer Apache Camel version – Camel v2.17. I was really impressed by the work put in to make developing Camel application much simpler. First is the installation of tooling itself. Now it has a all-in-one installer so you don't need to worry about which plugins you need to check. See the videos below to see the new "Getting Started" of Fuse 6.3.



And If you notice from the above video, the presentation of camel route in JBDS has also updated. It fixed some of the miss representation of logic and making it easier to read.

Old Camel Route
New Camel Route
On …

Red Hat JBoss Fuse - Getting Started with Fuse Integration Service 2.0 Tech preview

I just realized that I did not do a getting started for Fuse Integration Service 2.0 Tech preview before I did the pipeline demo, thanks for those of you who reminded me! :)

To get started with FIS 2.0, for people who has just getting to know the technology, here is how I interpret it. Basically, it's divide into two aspect,

1. Integration development, FIS uses Apache Camel as the core technology that creates, orchestrate, compose microservices into a super lightweight thin integration layer, and become the API provider and service orchestrator through exposing RESTful or messaging service endpoints. And you can choose to either package and run it with Spring-Boot or Karaf.


2. Application Deployment and Management, FIS takes advantages of OpenShift platform, and allows you to separately deploy the micro-integration service among distributed environment, at the same time takes care of the failover, high availability, load balancing and service lookup problem for you.


So, now we know …