Re: [新聞] 戶政系統大塞車 內政部請IBM抓錯
看板Soft_Job (軟體人)作者mephiliu (Mephi)時間12年前 (2014/03/16 19:13)推噓13(13推 0噓 31→)留言44則, 9人參與討論串23/30 (看更多)
※ 引述《ggg12345 (ggg)》之銘言:
: ※ 引述《mephiliu (Mephi)》之銘言:
: : 其實不是版本不相容, 我的推測(沒實際看到log就只能推測)基本上是weblogic內含的
: : JVM 在AIX 6.1 上面有一個bug, 在concurrent session 超過200個的時候會
: : crash. 如果壓力測試沒測到當然就再見.
: : 這件事分別有weblogic端的patch與aix端的patch, 要看看log分析結果來決定上哪一種
: : 不過我覺得從weblogic這邊看比較有效.事實上這問題應該是解掉了.
: : 最後, 大型商用系統是不會亂上patch的, 更不要說是上到最新.
: : 常常這樣幹的人通常很快就要換工作了.
: ========
: 超過 200 個會當, 這是那個檢驗報告說到的.
: 這問題是超載? 還是 race dead-lock 或是 類似recursive stack overflow
: 是能被區分的.
以System P 的狀況來說, 每機最小的配置都有64GB Memory以上, 再加上記憶體壓縮
所以200Client 是不可造成記憶體超載的.
這個其實是BUG, 他會在connection 到達200-250個時發生I/O socket錯誤, 導致所有
的Thread 都被block/pending
: 只負擔200個, 確實很鳥! 但不深究, 表面的解法就是增加機器避免超載.
: 不買 cpu 買 SSD 加速 disk access 就是減輕 access delay 也是一解.
如果在當機時memory 使用 20%, CPU 使用40%, Disk I/O 使用不到1%
加再多的機器也不會解. 詳參考BEA-000337
: 但請測試公司再測就知 SSD 是否有效? 顯然是無效, 可能就懷疑IBM AIX
: 鎖了process/thread 數, 所以才去求 IBM ? 但顯然也沒解套.
其實是PM 沒有系統經驗所以沒辦法在第一時間判斷問題點, 僅猜測是資源不足造成
才會選擇加資源. 以EMC CX system 使用15 Disks 做成的Array, IOPS 在最佳狀態
是超過SSD 的IOPS的, 加SSD(而且沒買Disk Cache Lic)對系統運行是完全沒有幫助的.
求IBM 是因為本來就有軟體維護, 資拓自己的PM 找不到問題又不能分析core dump
當然是找IBM 處理. 不過在這方面我個人認為IBM support team 不如 Oracle support
team專業.
: Queue 拉長了, 再進來的不被drop行嗎?
: 研考會的 "向上集中" 應該是 "集中式單一管理, 分散式平行處理", 但太
: 容易被誤會倒退回 "全集中管制處理". 戶役政的資料庫應該還是分散在各
: 戶政所的. 程式架構不分析好, 算法不想好, 自然就怪網路與儲存不夠快.
我倒不覺得架構有問題, 戶役政系統的Bussiness Logic 也不會牽涉到算法的問題
純粹是PM 不OK 沒有進行適當的風險規避以及沒有足夠的經驗判斷問題點.
至於分散式平行處理, 坦白說, 基本上台灣都是在local site處理, 沒有人在
metro-wide做分散式平行處理. 光network latency就會造成不輸給這次事件的delay
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 1.34.160.27
推
03/16 19:59, , 1F
03/16 19:59, 1F
→
03/16 19:59, , 2F
03/16 19:59, 2F
推
03/16 20:12, , 3F
03/16 20:12, 3F
推
03/16 20:12, , 4F
03/16 20:12, 4F
→
03/16 20:17, , 5F
03/16 20:17, 5F
→
03/16 20:18, , 6F
03/16 20:18, 6F
→
03/16 20:30, , 7F
03/16 20:30, 7F
→
03/16 20:57, , 8F
03/16 20:57, 8F
→
03/16 20:58, , 9F
03/16 20:58, 9F
→
03/16 20:59, , 10F
03/16 20:59, 10F
→
03/16 20:59, , 11F
03/16 20:59, 11F
→
03/16 21:00, , 12F
03/16 21:00, 12F
推
03/16 21:12, , 13F
03/16 21:12, 13F
→
03/16 21:14, , 14F
03/16 21:14, 14F
→
03/16 21:17, , 15F
03/16 21:17, 15F
→
03/16 21:20, , 16F
03/16 21:20, 16F
→
03/16 21:25, , 17F
03/16 21:25, 17F
→
03/16 21:31, , 18F
03/16 21:31, 18F
推
03/16 21:56, , 19F
03/16 21:56, 19F
→
03/16 21:57, , 20F
03/16 21:57, 20F
→
03/16 21:58, , 21F
03/16 21:58, 21F
推
03/16 22:04, , 22F
03/16 22:04, 22F
推
03/16 22:04, , 23F
03/16 22:04, 23F
→
03/16 22:06, , 24F
03/16 22:06, 24F
→
03/16 22:06, , 25F
03/16 22:06, 25F
→
03/16 22:07, , 26F
03/16 22:07, 26F
→
03/16 22:07, , 27F
03/16 22:07, 27F
推
03/16 22:09, , 28F
03/16 22:09, 28F
推
03/16 22:15, , 29F
03/16 22:15, 29F
推
03/17 00:09, , 30F
03/17 00:09, 30F
→
03/17 00:18, , 31F
03/17 00:18, 31F
→
03/17 00:20, , 32F
03/17 00:20, 32F
→
03/17 00:24, , 33F
03/17 00:24, 33F
推
03/17 00:28, , 34F
03/17 00:28, 34F
→
03/17 00:32, , 35F
03/17 00:32, 35F
→
03/17 00:36, , 36F
03/17 00:36, 36F
→
03/17 00:37, , 37F
03/17 00:37, 37F
→
03/17 00:43, , 38F
03/17 00:43, 38F
推
03/17 00:50, , 39F
03/17 00:50, 39F
→
03/17 00:57, , 40F
03/17 00:57, 40F
→
03/17 01:03, , 41F
03/17 01:03, 41F
推
03/17 01:44, , 42F
03/17 01:44, 42F
→
03/17 09:36, , 43F
03/17 09:36, 43F
→
03/17 09:36, , 44F
03/17 09:36, 44F
討論串 (同標題文章)
Soft_Job 近期熱門文章
41
133
PTT職涯區 即時熱門文章