- 相關(guān)推薦
洪水預(yù)報(bào)軟件測評方案征求意見稿
一、總則
1、 測評目的
為進(jìn)一步服務(wù)洪水預(yù)報(bào)系統(tǒng)建設(shè),促進(jìn)水利科技推廣管理工作,水利部科技推廣中心、水利部防洪抗旱減災(zāi)工程技術(shù)研究中心、中國水利學(xué)會減災(zāi)專業(yè)委員會聯(lián)合組織開展洪水預(yù)報(bào)軟件的測評工作。
2、 參評單位
國內(nèi)已經(jīng)獲得洪水預(yù)報(bào)軟件著作權(quán)的單位單獨(dú)或聯(lián)名參加。報(bào)送的洪水預(yù)報(bào)軟件,必須為報(bào)送單位自主研發(fā)或聯(lián)合研發(fā),代理銷售的不具備報(bào)名資格。
3、 測評方式
測評含軟件測試和專家評審兩部分。
(1)軟件測試。由具有中國合格評定國家認(rèn)可委員會(CNAS)資質(zhì)的國家級軟件檢測機(jī)構(gòu)對各參評產(chǎn)品進(jìn)行軟件測試。
(2)專家評審。參評單位對參評產(chǎn)品進(jìn)行應(yīng)用功能演示,由專家組現(xiàn)場評審。
4、 評分辦法
軟件測評結(jié)果以分值表示,100 分為滿分,其中軟件測試部分占70%,專家評審部分占30%?偡帧85分的為“優(yōu)良”產(chǎn)品; 85分
>總分≥60分的為“合格”產(chǎn)品;總分≤60分為“需改進(jìn)”產(chǎn)品。
二、軟件測試大綱
1、 測試依據(jù)
GB/T 25000.51-2017 《軟件工程 軟件產(chǎn)品質(zhì)量要求與評價(jià)(SQuaRE)商業(yè)現(xiàn)貨(COTS)軟件產(chǎn)品的質(zhì)量要求和測試細(xì)則》;
SL323-2011《實(shí)時(shí)雨水情數(shù)據(jù)庫表結(jié)構(gòu)及標(biāo)識符標(biāo)準(zhǔn)》; GB/T 22482-2017《水文情報(bào)預(yù)報(bào)規(guī)范》。
2、 測試準(zhǔn)備
(1)測試環(huán)境
軟件測試地點(diǎn)設(shè)在檢測機(jī)構(gòu),檢測機(jī)構(gòu)按照《軟件工程 軟件產(chǎn)品質(zhì)量要求與評價(jià)(SQuaRE)商業(yè)現(xiàn)貨(COTS)軟件產(chǎn)品的質(zhì)量要求和測試細(xì)則》中的設(shè)備配置,統(tǒng)一準(zhǔn)備測試環(huán)境,參評單位負(fù)責(zé)在統(tǒng)一的測試環(huán)境上安置應(yīng)用軟件。
參評單位應(yīng)在規(guī)定的時(shí)間進(jìn)行系統(tǒng)安置工作(時(shí)間最長為一個(gè)工作日),并簽署相關(guān)測試委托書。
(2)測試文檔
在系統(tǒng)測試開始前,參評單位向檢測機(jī)構(gòu)提供用戶手冊或操作手冊等系統(tǒng)相關(guān)文檔。
3、 軟件功能測試
(1)系統(tǒng)建模
1)模型/方法庫管理
多種產(chǎn)匯流、模型/方法,各模型/方法可任意組合
模型/方法構(gòu)件封裝,僅通過數(shù)據(jù)接口機(jī)制實(shí)現(xiàn)信息交換 各模型/方法對同一輸入、輸出要素具有相同格局的數(shù)據(jù)接口定義
對模型/方法可進(jìn)行添加、修改、刪除、導(dǎo)入導(dǎo)出、運(yùn)行等維護(hù)操作
2)預(yù)報(bào)方案構(gòu)建
方案定義
流域圈畫
確定方案模型雨量站控制權(quán)重
3)參數(shù)率定/檢驗(yàn)
歷史數(shù)據(jù)處理
參數(shù)優(yōu)選
率定資料選取
預(yù)報(bào)方案維護(hù)
(2)作業(yè)預(yù)報(bào)
實(shí)時(shí)雨水情查詢
數(shù)值降雨預(yù)報(bào)
單河段(流域)預(yù)報(bào)、河系連續(xù)預(yù)報(bào)、水庫洪水預(yù)報(bào)
實(shí)時(shí)洪水校正
預(yù)報(bào)誤差統(tǒng)計(jì)
洪水預(yù)報(bào)精度評定
預(yù)報(bào)成果優(yōu)選
預(yù)報(bào)方案自動(dòng)運(yùn)行、校正、成果發(fā)布
預(yù)報(bào)成果管理
4、 測試數(shù)據(jù)說明
為了體現(xiàn)公平原則,統(tǒng)一測試標(biāo)準(zhǔn),由測評組織單位統(tǒng)一提供洪水預(yù)報(bào)基礎(chǔ)數(shù)據(jù)。
5、 軟件系統(tǒng)缺陷嚴(yán)重程度等級
缺陷嚴(yán)重程度等級的設(shè)定如下:
S1級 :發(fā)現(xiàn)影響被測系統(tǒng)正確運(yùn)行的嚴(yán)重問題
——導(dǎo)致系統(tǒng)崩潰
——出現(xiàn)不可挽救的數(shù)據(jù)丟失或損壞
——主業(yè)務(wù)流程出現(xiàn)斷點(diǎn)
——導(dǎo)致死機(jī)
——內(nèi)存泄漏
S2級:發(fā)現(xiàn)影響被測模塊正確運(yùn)行的嚴(yán)重問題
——導(dǎo)致程序模塊丟失或未實(shí)現(xiàn)
——軟件錯(cuò)誤導(dǎo)致數(shù)據(jù)丟失
——被測數(shù)據(jù)處理錯(cuò)誤
——需求未實(shí)現(xiàn)
S3級:發(fā)現(xiàn)影響被測功能正確實(shí)現(xiàn)的問題
S4級:一般性的錯(cuò)誤或功能實(shí)現(xiàn)有不完善處
S5級:建議性問題
6、 預(yù)報(bào)精度等級
參見GB/T 22482-2017《水文情報(bào)預(yù)報(bào)規(guī)范》,以作業(yè)預(yù)報(bào)精度等級進(jìn)行評價(jià),即用預(yù)報(bào)誤差與許可誤差之比的百分?jǐn)?shù)作為分級指標(biāo),分級指標(biāo)≤25.0的為優(yōu)秀;25.0分級指標(biāo)≤50.0的為良好;50.0﹤分級指標(biāo)≤100.0的為合格;分級指標(biāo)﹥100.0的為不合格。
7、 測試結(jié)果判定標(biāo)準(zhǔn)
檢測機(jī)構(gòu)對測試過程中發(fā)現(xiàn)的問題進(jìn)行分析匯總,向參評單位出具《系統(tǒng)測試問題確認(rèn)單》,并且雙方簽字確認(rèn)。
在系統(tǒng)測試中,檢測機(jī)構(gòu)依據(jù)已確認(rèn)的《系統(tǒng)測試問題確認(rèn)單》,對每一項(xiàng)測試內(nèi)容給出其檢測結(jié)果。檢測結(jié)果分為“通過”、“基本通過”、“不通過”和“功能缺失”。
(1) 通過
在測試過程中,針對某測試過程的測試用例執(zhí)行后,結(jié)果與預(yù)期的一致,未發(fā)現(xiàn)S5級以外的缺陷,該測試過程的檢測結(jié)果可判定為“通過”。
(2) 不通過
在測試過程中,針對某測試過程的測試用例執(zhí)行后,發(fā)生S1級或S2級缺陷,該測試過程判定為“不通過”。
(3) 基本通過
在測試過程中,結(jié)果屬上述“通過”、“不通過”以外的情況,該測試過程判定為“基本通過”。
(4) 功能缺失
因系統(tǒng)原因而無法提供測試的功能點(diǎn),在測試結(jié)果中注明“功能缺失”。
8、 測試內(nèi)容及評分標(biāo)準(zhǔn)
本次測試的內(nèi)容包括系統(tǒng)的功能性、可靠性、易操作性和效率4個(gè)方面,以及自選演示項(xiàng)目,其評分安排如下:
(1)功能性
(2)精度評定
(3)可靠性
(4)效率
(5)易操作性
三、專家評審大綱
1、 評審準(zhǔn)備
參評單位自行準(zhǔn)備軟硬件及網(wǎng)絡(luò)環(huán)境,以及相應(yīng)的軟件產(chǎn)品和測試數(shù)據(jù)。
2、 評審內(nèi)容及技術(shù)要求
專家評審的內(nèi)容包括系統(tǒng)的主要功能及自選演示項(xiàng)目的實(shí)用性、易用性、時(shí)效性、美觀性、先進(jìn)性等方面進(jìn)行評價(jià),評審內(nèi)容和其要求如下:
【洪水預(yù)報(bào)軟件測評方案征求意見稿】相關(guān)文章:
方案征求意見稿03-25
實(shí)施方案征求意見稿03-25
校慶慶典方案征求意見稿03-25
軟件正版化管理制度征求意見稿03-25
整改方案征求意見05-19
征求意見稿03-25
績效考核方案修訂征求意見稿03-25