專案背景
大型企業內部辦公系統:2 萬用戶、分級管理分公司資料隔離。平台提供商負責底層框架,系統整合商二次開發。部署環境:IBM AIX 小型機、32GB RAM、16 CPU、WebLogic 9.2、Oracle 10.2.0.2。
問題一:上線跑得比貓慢
現象
生產環境比開發環境 Tomcat 還慢。
排查
- SQL 監控發現大量迴圈查詢:典型 N+1 問題(如查用戶名逐筆查詢)
- Hibernate 導致開發忽略 DB 操作成本,PO 疊加邏輯產生大量 SQL
優化
- SQL 調優 + 大量業務快取
- 效能略有提升但未根治
真兇:WebLogic 32/64 位相容性
現場部署的 WebLogic 預設 32 位模式運行於 64 位 AIX,IO 層不相容。BEA 前工程師提供替換 JAR 包(需 License 才能取得),替換後速度提升 30%+。盜版 WebLogic 無技術支援,根本拿不到補丁。
問題二:記憶體耗盡 (OOM)
現象
每天幾乎必發生 OOM。
本地壓測
- Tomcat + Sun JDK + JProfiler:100 併發 → 記憶體暴漲 150MB → 再 100 併發 → 再漲 150MB → 觸發 GC 穩定 200MB,大量
char[] 物件
- 疲勞測試無記憶體洩漏趨勢
- WebLogic + JRockit:GC 更頻繁,記憶體穩定
結論
非記憶體洩漏,而是 JVM 堆配置與 GC 策略問題。JRockit 伺服器端 GC 更激進適合生產負載。
教訓總結
- 授權軟體是獲取關鍵補丁的前提
- 中介軟體預設配置未必適配硬體架構
- 記憶體暴漲 ≠ 記憶體洩漏,需分析 GC 行為與物件分佈
- 平台方與整合商需建立共同效能基線與責任邊界