1、北京農(nóng)商銀行新一代綜合柜面業(yè)務(wù)系統(tǒng)性能測試報(bào)告1北京農(nóng)商銀行新一代綜合柜面業(yè)務(wù)系統(tǒng)性能測試報(bào)告1北京農(nóng)商銀行新一代綜合柜面業(yè)務(wù)系統(tǒng)性能測試報(bào)告1北京農(nóng)商銀行新一代綜合柜面業(yè)務(wù)系統(tǒng)性能測試報(bào)告1新一代綜合柜面業(yè)務(wù)系統(tǒng)性能測試報(bào)告文檔編號(hào)保密等級(jí)作者最后修他日期審核人最后審批日期批準(zhǔn)人最后批準(zhǔn)日期修訂記錄日期版本修訂講明修訂人2011-10-120.1編寫測試報(bào)告中的方案部分王曉華2011-10-130.2對測試腳本、測試數(shù)據(jù)、測試場景進(jìn)行描繪王曉華2011-10-250.3整理測試履行結(jié)果王時(shí)磊2011-10-280.4數(shù)據(jù)解析和修訂王曉華目錄測試簡介11.1項(xiàng)目背景11.2測試目標(biāo)11.3測試

2、范圍11.4性能測試指標(biāo)要求1測試方案22.1壓力模型22.2交易選擇22.3測試腳本22.4資源監(jiān)控32.5測試場景3測試環(huán)境43.1網(wǎng)絡(luò)拓?fù)鋱D43.2軟硬件配置43.3測試工具54測試實(shí)施情形64.1測試時(shí)刻和地址64.2參加測試人員64.3測試實(shí)施進(jìn)度6測試結(jié)果65.1基準(zhǔn)測試65.1.1測試結(jié)果65.1.2解析圖表75.2并發(fā)測試75.2.1測試結(jié)果75.2.2解析圖表8數(shù)據(jù)解析11系統(tǒng)評(píng)判128測試遺留咨詢題129附錄129.1性能測試記錄表139.20210交易辦理腳本13測試簡介項(xiàng)目背景為解決原有字符終端柜面系統(tǒng)不能辦理非線性數(shù)據(jù)（如圖像）的缺陷、解決業(yè)務(wù)中的柜員離柜咨詢題，并對

3、交易前端的功能性梳理和整合，北京農(nóng)商銀行將實(shí)施現(xiàn)有字符終端向圖形終端的改造，實(shí)施新一代綜合柜面業(yè)務(wù)系統(tǒng)項(xiàng)目。在新一代綜合柜面業(yè)務(wù)系統(tǒng)全面推廣上線前，需要對新系統(tǒng)平臺(tái)進(jìn)行性能測試，獵取系統(tǒng)的并發(fā)辦理能力、交易響應(yīng)時(shí)刻等性能指標(biāo)。測試目標(biāo)此次性能測試的測試目標(biāo)為：SocketSocket獵取新一代綜合柜面業(yè)務(wù)系統(tǒng)在測試環(huán)境中的性能指標(biāo)數(shù)據(jù)圖形終端新柜面系統(tǒng)應(yīng)用服務(wù)器AS400覺察性能瓶頸，輔助開發(fā)人員進(jìn)行性能調(diào)優(yōu)，對系統(tǒng)上線提供性能建講和評(píng)估核心業(yè)務(wù)系統(tǒng)測試范圍新一代綜合柜面系統(tǒng)的架構(gòu)示意圖如下列圖所示，圖中紅線虛框?yàn)榇舜涡阅軠y試范圍新柜面系統(tǒng)數(shù)據(jù)庫服務(wù)器性能新測一試代的綜合范柜疇面，系統(tǒng)包括AB

4、SABS辦理平臺(tái)的后臺(tái)應(yīng)用服務(wù)器和數(shù)據(jù)庫服務(wù)器。性能測試指標(biāo)要求指標(biāo)分類序號(hào)指標(biāo)描繪是否需求性能指標(biāo)備注需求數(shù)值1每秒事務(wù)數(shù)TPS否經(jīng)過性能測試獵取系統(tǒng)辦理能力峰值2典型交易平均交易否獵取實(shí)際指標(biāo)值響應(yīng)時(shí)刻ART系統(tǒng)3批辦理效率否柜面系統(tǒng)無大數(shù)據(jù)量批辦理能力辦理任務(wù)4最大是全行柜面終端數(shù)約為并發(fā)用戶數(shù)5028005交易成功率是99%系統(tǒng)6CPU占用率是80%資源利用率7內(nèi)存使用率是80%LoadRunner模擬圖Socket是Socket80%8I/O使用率形終端倡始交易壓力測試方案新柜面系統(tǒng)應(yīng)用服務(wù)器AS400壓力模型核心業(yè)務(wù)系統(tǒng)此次性能測試采納如下的簡單壓力模型：經(jīng)過LoadRunner模

5、擬圖形終端各柜員向ABS平臺(tái)倡始交易壓力經(jīng)過測試環(huán)境中的核心業(yè)新務(wù)柜系面統(tǒng)系響統(tǒng)數(shù)應(yīng)據(jù)柜庫面服務(wù)交器易要求新一代柜面綜合系統(tǒng)（后臺(tái)）交易選擇按照和開發(fā)組的交流，選擇如下前端辦理比較復(fù)雜的典型交易：編號(hào)交易碼交易名交易占比參數(shù)化域備注10210個(gè)人客戶信息成立100%無辦理較復(fù)雜的交易測試腳本按照上述的系統(tǒng)架構(gòu)示意圖，經(jīng)過LoadRunner的Socket協(xié)議錄制柜面前端向柜面系統(tǒng)應(yīng)用服務(wù)器倡始的柜面交易，覺察Socket交互次數(shù)（一組send和receive算一次交互）特意多（0210交易51次Socket交互），而且腳本回放時(shí)報(bào)接收報(bào)文長度不匹配錯(cuò)誤。新柜面系統(tǒng)開發(fā)組提供了一個(gè)測試用的Jar

6、包，將圖形前端ABC和后臺(tái)應(yīng)用服務(wù)器ABS之間的通訊過程進(jìn)行了封裝，經(jīng)過解析描繪型的交易數(shù)據(jù)文件后向后臺(tái)提交交易，為此，使用LoadRunner的Java協(xié)議，測試腳本中經(jīng)過調(diào)用Jar包中的對象提交柜面交易。使用此測試腳本方案臨時(shí)也有如下缺點(diǎn)：無法實(shí)現(xiàn)交易數(shù)據(jù)的參數(shù)化腳本中只能定義各柜面交易履行全過程的長事務(wù)，無法對交易中各時(shí)期進(jìn)行分解解析（比方頁面控件響應(yīng)時(shí)刻、交易提交響應(yīng)時(shí)刻、打印響應(yīng)時(shí)刻等）測試腳本中無法獵取交易履行結(jié)果：交易提交后不返反響應(yīng)特點(diǎn)碼，從測試腳本中無法判斷交易履行的情形，需要解析后臺(tái)日志文件或數(shù)據(jù)庫流水表解析交易是否成功（性能測試交易量龐大可能會(huì)惹起大量的交易結(jié)果解析工作量

7、）LoadRunner統(tǒng)計(jì)解析數(shù)據(jù)失真（因失敗交易也看作成功交易進(jìn)行統(tǒng)一解析）資源監(jiān)控按照壓力測試模型，此次性能測試需要監(jiān)控如下主機(jī)的一些性能指標(biāo)數(shù)據(jù)：新柜面系統(tǒng)應(yīng)用服務(wù)器主機(jī)（Linux操作系統(tǒng)）CPUCPUUtilization（CPU使用率%）MemoryPagingrate（內(nèi)存頁互換速率）I/ODiskTraffic（磁盤互換速率）新柜面系統(tǒng)數(shù)據(jù)庫服務(wù)器主機(jī)（AIX操作系統(tǒng)）CPUCPUUtilization（CPU使用率%）MemoryPagingrate（內(nèi)存頁互換速率）I/ODiskTraffic（磁盤互換速率）LoadRunner操縱器和壓力產(chǎn)生器主機(jī)（WindowsXP操作

8、系統(tǒng)）CPU%TotalProcessorTime（總的CPU使用率）MemoryAvailableMbytes（物理內(nèi)存的可用數(shù)，單位Mbytes）MemoryPageFaults/sec（頁面錯(cuò)誤致使的頁互換計(jì)數(shù)）I/O%DiskTime（磁盤驅(qū)動(dòng)器讀寫要求已用時(shí)刻所占百分比）主機(jī)資源指標(biāo)數(shù)據(jù)監(jiān)控的方法：優(yōu)先經(jīng)過LoadRunner進(jìn)行監(jiān)控經(jīng)過操作系統(tǒng)內(nèi)部指令（如top、vmstat等）測試場景設(shè)計(jì)如下種類的測試場景：基準(zhǔn)測試：獵取系統(tǒng)辦理各典型交易在無壓力情形下單筆交易的耗時(shí)，為并發(fā)場景提供一個(gè)差不多半據(jù)參照。并發(fā)測試：查驗(yàn)服務(wù)器端對每個(gè)典型交易多個(gè)并發(fā)用戶的辦理能力，獵取系統(tǒng)辦理性能指

9、標(biāo)值。各測試場景設(shè)置信息如下：編并發(fā)用連續(xù)退出方探索時(shí)交易組刻/迭代號(hào)場景種類場景名戶數(shù)加壓方式式備注時(shí)刻延遲合1基準(zhǔn)測試JZ_0210_1_1001運(yùn)行同時(shí)無0210同時(shí)達(dá)成2并發(fā)測試BF_0210_1010運(yùn)行同時(shí)無0210同時(shí)達(dá)成3并發(fā)測試BF_0210_2020運(yùn)行同時(shí)無0210同時(shí)達(dá)成4并發(fā)測試BF_0210_3030運(yùn)行同時(shí)無0210同時(shí)達(dá)成5并發(fā)測試BF_0210_4040運(yùn)行同時(shí)無0210同時(shí)達(dá)成6并發(fā)測試BF_0210_50_10m50每15秒每15秒無021010m減10VU加10VU7并發(fā)測試BF_0210_100_10m100每15秒每15秒無021010m減20VU加

10、200VU8并發(fā)測試BF_0210_150_10m150每15秒每15秒無021010m減30VU加300VU9并發(fā)測試BF_0210_200_10m200每待15測秒系統(tǒng)每15秒無021010m減40VU加40VU10并發(fā)測試BF_0210_250_10m250每15秒每15秒無021010m減50VU加50VU11并發(fā)測試BF_0210_300_10m300每15秒每15秒無021010m減60VU加60VULR控制器/壓力產(chǎn)生器新柜面系統(tǒng)應(yīng)用服務(wù)器核心業(yè)務(wù)系統(tǒng)注：按照全行柜面終端數(shù)約2800的統(tǒng)計(jì)數(shù)據(jù)，最大并發(fā)數(shù)為終端數(shù)的(172.16.15.14)(192.156.33.6)(172.

11、16.12.6)10%15%（意會(huì)值），選擇最大300并發(fā)的場景。測試環(huán)境網(wǎng)絡(luò)拓?fù)鋱D此次性能測試環(huán)境的網(wǎng)絡(luò)拓?fù)鋱D如下：（其中核心系統(tǒng)使用測試環(huán)境中的主機(jī)）軟硬件配置新柜面系統(tǒng)數(shù)據(jù)庫服務(wù)器(192.156.33.18)新一代柜面系統(tǒng)應(yīng)用服務(wù)器主機(jī)型號(hào)CPU物理內(nèi)存8G硬件配置276G硬盤容量IP地址網(wǎng)絡(luò)設(shè)施100M局域網(wǎng)卡種類名稱版本軟件配置操作系統(tǒng)SUSELinuxEnterpriseServer10(x86_64)應(yīng)用軟件JDK/JRE新一代柜面系統(tǒng)數(shù)據(jù)庫服務(wù)器主機(jī)型號(hào)IBM8202-E4BCPUPower6，4C8U3000MHz硬件配置物理內(nèi)存16G硬盤容量70GIP地址網(wǎng)絡(luò)設(shè)施100M

12、局域網(wǎng)卡種類名稱版本軟件配置操作系統(tǒng)AIXVersion5.3數(shù)據(jù)庫Oracle10g核心業(yè)務(wù)系統(tǒng)主機(jī)主機(jī)型號(hào)IBMAS400CPU硬件配置物理內(nèi)存硬盤容量IP地址網(wǎng)絡(luò)設(shè)施100M局域網(wǎng)卡種類名稱版本軟件配置操作系統(tǒng)OS400數(shù)據(jù)庫LR操縱器/壓力產(chǎn)生器主機(jī)型號(hào)PCCPU2C2.2G硬件配置物理內(nèi)存1G硬盤容量160GIP地址網(wǎng)絡(luò)設(shè)施100M局域網(wǎng)卡種類名稱版本軟件配置操作系統(tǒng)MicrosoftXPProfessionalSP2應(yīng)用軟件HPLoadRunner8.1英文版測試工具序號(hào)工具名稱用途及講明廠商版本性能測試工具，Java協(xié)議（License1LoadRunner300）HP8.1英文

13、版并發(fā)數(shù)為測試實(shí)施情形測試時(shí)刻和地址時(shí)刻：2011年10月08日2011年10月21日地址：北京農(nóng)商銀行空港辦公區(qū)3樓測試機(jī)房參加測試人員參加此次性能測試的人員包括：王鵬：測試經(jīng)理，性能測試總體友善高偉：開發(fā)組支持，測試腳本錄制和調(diào)試王曉華：性能測試專家，制訂方案、指導(dǎo)測試王時(shí)磊：性能測試工程師，測試工具、測試場景預(yù)備、測試履行測試實(shí)施進(jìn)度編號(hào)任務(wù)開始日期終止日期責(zé)任人1議論和制訂測試方案2011-10-082011-10-10王曉華2測試工具預(yù)備2011-10-082011-10-08王時(shí)磊3測試腳本編制、調(diào)試2011-10-082011-10-13王時(shí)磊4測試場景預(yù)備2011-10-122

14、011-10-12王時(shí)磊5測試環(huán)境預(yù)備2011-10-132011-10-13王鵬6測試履行2011-10-212011-10-21王時(shí)磊7編寫測試報(bào)告2011-10-252011-10-28王曉華測試結(jié)果基準(zhǔn)測試測試結(jié)果使用測試工具LoadRunner運(yùn)行測試腳本，統(tǒng)計(jì)出測試結(jié)果如下（TPS、ART、CPU%均為平均值）：并發(fā)交失敗TPS應(yīng)用服數(shù)據(jù)庫編易用戶成功交易ART（秒）務(wù)器服務(wù)器場景名稱總交易（筆號(hào)數(shù)交易數(shù)成功率CPU%CPU%數(shù)數(shù)/秒）1JZ_0210_1_10011001000100.00%2.10.4183.0%1.1%在無壓力的情形下，0210（個(gè)人客戶信息成立）的平均交易響

15、應(yīng)時(shí)刻為418ms，其中該交易包括如下完整的交易辦理過程（可參見附錄2中02交易辦理腳本）：輸入交易碼后，獵取Frame框架顯示內(nèi)容各輸入場輸入數(shù)據(jù)時(shí)與后臺(tái)系統(tǒng)的交互提交交易，獵取核心系統(tǒng)返回結(jié)果解析圖表測試工具LoadRunnerAnalysis的TPS圖表：測試工具LoadRunnerAnalysis的ART圖表：并發(fā)測試測試結(jié)果使用測試工具LoadRunner運(yùn)行測試腳本，統(tǒng)計(jì)出測試結(jié)果如下（TPS、ART、CPU%均為平均值）：并發(fā)交失敗TPS應(yīng)用服數(shù)據(jù)編易成功交易庫服場景名稱用戶交易（筆ART（秒）務(wù)器號(hào)總交易數(shù)成功率務(wù)器數(shù)數(shù)/秒）CPU%數(shù)CPU%1BF_0210_10_10m10

16、11,45111,4510100.00%19.00.52412.9%3.4%2BF_0210_20_10m2015,53215,5320100.00%25.70.77917.5%6.4%3BF_0210_30_10m3015,96715,966199.99%26.41.13618.2%7.3%4BF_0210_40_10m4015,98715,9870100.00%26.41.49718.0%7.7%5BF_0210_50_10m5022,15221,79136198.37%30.61.45221.6%7.7%6BF_0210_100_10m10023,62919,2144,41581.32%

17、32.62.86120.9%6.5%7BF_0210_150_10m15022,68319,7472,93687.06%31.24.46621.1%7.2%8BF_0210_200_10m20026,13319,0777,05673.00%36.04.95522.8%6.9%9BF_0210_250_10m25028,69616,06612,63055.99%39.55.69323.7%7.2%10BF_0210_300_10m30022,40922,3159499.58%30.88.75722.3%6.2%在并發(fā)場景時(shí)，展現(xiàn)了如下兩種交易失敗致使交易成功率不高：并發(fā)數(shù)達(dá)到50時(shí)，ABS交易流

18、水表展現(xiàn)記錄狀態(tài)為x的記錄（未收到核心系統(tǒng)對交易的辦理結(jié)果），并發(fā)數(shù)為10、20、30、40時(shí)差不多正常并發(fā)數(shù)達(dá)到100及以上時(shí)，ABS交易流水表中記錄數(shù)小于LoadRunner中記錄的實(shí)際發(fā)送的交易筆數(shù)（部分交易數(shù)據(jù)扔掉，未發(fā)往核心系統(tǒng)）其他，從表中可以看出：在目前測試環(huán)境配置下，新柜面系統(tǒng)的最大辦理能力約為40tps在50并發(fā)時(shí)，0210交易的平均交易響應(yīng)時(shí)刻為1.452秒在各并發(fā)場景下，應(yīng)用服務(wù)器和數(shù)據(jù)庫服務(wù)器的CPU占用率均不高解析圖表場景BF_0210_10_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主

19、機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線場景BF_0210_20_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線場景BF_0210_30_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線場

20、景BF_0210_40_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線場景BF_0210_50_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線場景BF_0210_100_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)

21、時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線場景BF_0210_150_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線場景BF_0210_200_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)

22、數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線場景BF_0210_250_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線場景BF_0210_300_10m結(jié)果解析圖1)交易吞吐量TPS-虛構(gòu)用戶數(shù)量VU歸并曲線2)交易響應(yīng)時(shí)刻ART-虛構(gòu)用戶數(shù)量VU歸并曲線3)應(yīng)用服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線4)數(shù)據(jù)庫服務(wù)器主機(jī)CPU占用率-虛構(gòu)用戶數(shù)量VU歸并曲線數(shù)據(jù)解析對并發(fā)場景，按照不同并發(fā)數(shù)對重要性

23、能指標(biāo)（TPS、ART、CPU%）進(jìn)行圖表解析如下：10.04.000數(shù)據(jù)庫CPU使用率CPU%15.0%10.0%.02.00010.0%10203040501001502002503005.0%U0.25.726.426.430.632.631.236.039.530.8PTPS19000.并發(fā)用戶數(shù)5.0%1020304050100150200250300C0.0%3040并發(fā)用戶數(shù)200250300數(shù)據(jù)102050100150并發(fā)用戶數(shù)0.520.771.131.491.452.864.464.955.698.75庫ARTCPU12.917.518.218.021.620.921.122.823.722.3CPU%0.0%1020304050100150200250300數(shù)據(jù)庫CPU3.4%6.4%7.3%7.7%7.7%6.