李 嘉，付智斌，夏 雪

（江西省氣象災(zāi)害防御技術(shù)中心，南昌 330046）

1 引言

氣象事業(yè)是科技型、基礎(chǔ)性社會(huì)公益事業(yè)，氣象工作的各個(gè)領(lǐng)域都離不開(kāi)標(biāo)準(zhǔn)的支撐與引領(lǐng)，做好氣象標(biāo)準(zhǔn)化工作對(duì)促進(jìn)氣象事業(yè)科學(xué)發(fā)展具有重要意義。[1]黨的十八大以來(lái)，氣象標(biāo)準(zhǔn)化工作已取得了長(zhǎng)足發(fā)展，呈現(xiàn)出新增標(biāo)準(zhǔn)數(shù)量逐年增長(zhǎng)，標(biāo)準(zhǔn)覆蓋范圍越來(lái)越廣的特征[2]。經(jīng)查詢(xún)中國(guó)氣象標(biāo)準(zhǔn)化網(wǎng)發(fā)現(xiàn)，截至2022 年底，我國(guó)現(xiàn)行氣象標(biāo)準(zhǔn)共1782 項(xiàng)，其中國(guó)家標(biāo)準(zhǔn)209 項(xiàng)、行業(yè)標(biāo)準(zhǔn)578 項(xiàng)、地方標(biāo)準(zhǔn)960 項(xiàng)、團(tuán)體標(biāo)準(zhǔn)35 項(xiàng)。雖然如此，面對(duì)氣象高質(zhì)量發(fā)展新形勢(shì)新要求，現(xiàn)行氣象標(biāo)準(zhǔn)及標(biāo)準(zhǔn)體系還存在許多不足，迫切需要進(jìn)一步發(fā)揮好氣象標(biāo)準(zhǔn)的技術(shù)支撐和引領(lǐng)作用，加快構(gòu)建支撐保障氣象高質(zhì)量發(fā)展的標(biāo)準(zhǔn)體系，全面提升氣象標(biāo)準(zhǔn)化治理效能。為此，應(yīng)及時(shí)掌握現(xiàn)行氣象標(biāo)準(zhǔn)的實(shí)施和應(yīng)用推廣情況，準(zhǔn)確評(píng)估其社會(huì)價(jià)值和現(xiàn)實(shí)意義，有的放矢發(fā)現(xiàn)標(biāo)準(zhǔn)存在的不足，進(jìn)而為進(jìn)一步加強(qiáng)氣象標(biāo)準(zhǔn)制修訂工作，持續(xù)優(yōu)化完善現(xiàn)行氣象標(biāo)準(zhǔn)體系奠定堅(jiān)實(shí)基礎(chǔ)。目前，關(guān)于氣象標(biāo)準(zhǔn)評(píng)估相關(guān)研究，國(guó)內(nèi)尚未見(jiàn)公開(kāi)發(fā)表的內(nèi)容。本研究以氣象服務(wù)類(lèi)標(biāo)準(zhǔn)為例，通過(guò)層次分析法（AHP）對(duì)該類(lèi)標(biāo)準(zhǔn)的質(zhì)量水平及實(shí)施效果進(jìn)行分析評(píng)估。

2 標(biāo)準(zhǔn)評(píng)估指標(biāo)體系構(gòu)建及權(quán)重計(jì)算

2.1 層次評(píng)估模型構(gòu)建

AHP 層次分析法是一種解決多目標(biāo)復(fù)雜問(wèn)題的定性和定量相結(jié)合進(jìn)行計(jì)算決策權(quán)重的研究方法，具有靈活簡(jiǎn)潔、系統(tǒng)性強(qiáng)的顯著特點(diǎn)，被廣泛應(yīng)用于社會(huì)、經(jīng)濟(jì)、科技、規(guī)劃等諸多領(lǐng)域的評(píng)價(jià)、決策、預(yù)測(cè)、規(guī)劃等。本研究基于AHP 層次分析法，以現(xiàn)行氣象服務(wù)類(lèi)標(biāo)準(zhǔn)為研究對(duì)象，對(duì)同類(lèi)型、具有可比性的指標(biāo)進(jìn)行分析，分層分級(jí)確定評(píng)估因素和子因素，從而建立起氣象服務(wù)類(lèi)標(biāo)準(zhǔn)的評(píng)估指標(biāo)體系（見(jiàn)圖1）。該體系包含一級(jí)指標(biāo)3 項(xiàng)，即技術(shù)因素、經(jīng)濟(jì)因素、社會(huì)因素；二級(jí)指標(biāo)15 項(xiàng)，即制定方法、參數(shù)設(shè)定、評(píng)定指標(biāo)、編制嚴(yán)謹(jǐn)、可操作性、資源節(jié)約、工作效率、經(jīng)濟(jì)效益、精細(xì)化管理、滿(mǎn)意率、普及程度、環(huán)保能力提升、政策一致性、技術(shù)促進(jìn)、規(guī)范社會(huì)行為[3-4]。

2.2 指標(biāo)權(quán)重計(jì)算及一致性校驗(yàn)

組織多名專(zhuān)家對(duì)各指標(biāo)進(jìn)行兩兩比較，并采用1～9 標(biāo)度法進(jìn)行打分。根據(jù)專(zhuān)家組打分結(jié)果構(gòu)建兩兩判斷矩陣，并運(yùn)用SPSS 軟件計(jì)算出準(zhǔn)則層和要素層的各指標(biāo)權(quán)重值，以及要素層各指標(biāo)相對(duì)于目標(biāo)層的綜合權(quán)重，完成整體權(quán)重的分配（見(jiàn)表1）。

表1 氣象服務(wù)類(lèi)標(biāo)準(zhǔn)評(píng)估指標(biāo)體系權(quán)重分配表

一致性檢驗(yàn)是為了檢驗(yàn)各指標(biāo)重要度性間的協(xié)調(diào)性和合理性，避免指標(biāo)兩兩比較時(shí)出現(xiàn)A ＞B，B ＞C，而C ＞A 的矛盾情況。當(dāng)一致性比率CR 值＜0.1 時(shí)，表明該組數(shù)據(jù)通過(guò)一致性檢驗(yàn)，且CR 值越趨近于0，則一致性越好。經(jīng)計(jì)算，體系內(nèi)各指標(biāo)CR 值均＜0.1，通過(guò)一致性檢驗(yàn)。

3 樣本采集和數(shù)據(jù)分析

3.1 選定評(píng)估樣本

為實(shí)現(xiàn)對(duì)標(biāo)準(zhǔn)量化評(píng)估的目的，被選取作為評(píng)估樣本的標(biāo)準(zhǔn)應(yīng)具有代表性。評(píng)估樣本選取時(shí)主要考慮到四項(xiàng)因素：一是在業(yè)務(wù)工作中使用頻次較高，二是可操作性強(qiáng)，三是對(duì)具體業(yè)務(wù)有明顯指導(dǎo)作用，四是應(yīng)用群體背景具有多樣性。綜上，本項(xiàng)目選取了56 項(xiàng)已公布實(shí)施1 年以上的江西省現(xiàn)行氣象服務(wù)類(lèi)標(biāo)準(zhǔn)（含國(guó)家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)、江西省地方標(biāo)準(zhǔn)）作為評(píng)估對(duì)象，并將其分布編號(hào)為bz01～bz56（見(jiàn)表2）。這些標(biāo)準(zhǔn)涵蓋了氣象災(zāi)害防御、人工影響天氣、氣候論證、氣象科技服務(wù)等多方面內(nèi)容。

表2 標(biāo)準(zhǔn)評(píng)估對(duì)象表

3.2 數(shù)據(jù)采集

根據(jù)上述標(biāo)準(zhǔn)評(píng)估體系模型，設(shè)計(jì)標(biāo)準(zhǔn)質(zhì)量水平及實(shí)施效果調(diào)查問(wèn)卷。該問(wèn)卷包含姓名、職務(wù)、職稱(chēng)、單位、工作崗位、工作時(shí)間等答卷人的基本信息；以易于量化、表述客觀、簡(jiǎn)潔方便的選擇題為主，便于答卷人做出適配選擇；按照問(wèn)題邏輯順序分類(lèi)設(shè)置內(nèi)容，以便后期統(tǒng)計(jì)歸類(lèi)分析；問(wèn)卷內(nèi)容與要素層的15 項(xiàng)指標(biāo)一一對(duì)應(yīng)；另外提供部分開(kāi)放性問(wèn)題供答卷人表達(dá)意見(jiàn)。為保持評(píng)分的一致性，除基本信息外，問(wèn)卷調(diào)查表中相關(guān)內(nèi)容選項(xiàng)使用Likert 5 點(diǎn)量表法進(jìn)行測(cè)試[5]，以1（完全不同意）、3（不太同意）、5（一般同意）、7（比較同意）、9（完全同意），五檔分?jǐn)?shù)區(qū)分、量化問(wèn)卷指標(biāo)數(shù)據(jù)。問(wèn)卷發(fā)放對(duì)象為各標(biāo)準(zhǔn)使用單位及相關(guān)人員。本項(xiàng)目設(shè)計(jì)的問(wèn)卷于2021 年7月正式在網(wǎng)絡(luò)上發(fā)布，歷時(shí)3 個(gè)月，最終共收集有效問(wèn)卷樣本1627 份。

3.3 信度分析

信度即可靠性，是指采用同樣的方法對(duì)同一對(duì)象重復(fù)測(cè)量時(shí)所得結(jié)果的一致性程度。為衡量本項(xiàng)目中問(wèn)卷答案的可信程度，將問(wèn)卷中15 項(xiàng)指標(biāo)因素編號(hào)為Q1～Q15，對(duì)其數(shù)據(jù)進(jìn)行信度分析。

本項(xiàng)目采用α 信度系數(shù)法。α 系數(shù)評(píng)價(jià)的是問(wèn)卷中各題得分一致性，為內(nèi)在一致性系數(shù)，可用于態(tài)度、意見(jiàn)式問(wèn)卷的信度分析。一般而言，問(wèn)卷整體的α 系數(shù)在0.8 以上為好，0.7～0.8 屬于可接受范圍，在0.6 以下則表明其內(nèi)容需重新編輯。此處以標(biāo)準(zhǔn)bz01 為例，信度分析結(jié)果如表3 所示，其Cronbach α 系數(shù)為0.92，通過(guò)信度檢驗(yàn)。其余55 項(xiàng)標(biāo)準(zhǔn)經(jīng)分析計(jì)算，也均通過(guò)信度檢驗(yàn)。

表3 Cronbach 信度分析表（標(biāo)準(zhǔn)bz01）

3.4 效度分析

效度即正確性，是指一個(gè)測(cè)驗(yàn)或測(cè)量工具能真實(shí)地測(cè)量出所要測(cè)量的事物的程度。效度分析用于研究題項(xiàng)是否有效表達(dá)研究變量或者維度的概念信息，簡(jiǎn)單來(lái)說(shuō)就是研究題項(xiàng)設(shè)計(jì)是否合理，或者題項(xiàng)某個(gè)變量是否合適，即問(wèn)卷設(shè)計(jì)的準(zhǔn)確程度。

本項(xiàng)目采用因子分析驗(yàn)證預(yù)期變量與問(wèn)卷題項(xiàng)之間的對(duì)應(yīng)關(guān)系。此處以標(biāo)準(zhǔn)bz01 為例，效度分析結(jié)果如表4 所示，Q1～Q5、Q6～Q10、Q11～Q15 的各項(xiàng)因子荷載系數(shù)最大值均分別與因子1、因子2、因子3 相對(duì)應(yīng)，且所有題項(xiàng)的共同度均大于0.7，說(shuō)明效度良好，通過(guò)效度檢驗(yàn)。其余55 項(xiàng)標(biāo)準(zhǔn)經(jīng)分析計(jì)算，也均通過(guò)效度檢驗(yàn)。

表4 效度分析表（標(biāo)準(zhǔn)bz01）

4 標(biāo)準(zhǔn)特征分析

4.1 標(biāo)準(zhǔn)評(píng)分

以bz01 為例，結(jié)合評(píng)估指標(biāo)體系權(quán)重和問(wèn)卷調(diào)查所得分?jǐn)?shù)（該標(biāo)準(zhǔn)有效問(wèn)卷樣本數(shù)為33），對(duì)其進(jìn)行綜合水平評(píng)價(jià)分析，即標(biāo)準(zhǔn)的評(píng)估得分為要素層各指標(biāo)綜合權(quán)重與該指標(biāo)調(diào)查問(wèn)卷得分平均值的乘積之和。如表5 所示，標(biāo)準(zhǔn)bz01 的評(píng)分為8.5061。

表5 標(biāo)準(zhǔn)bz01 評(píng)估得分表

按上述方法，根據(jù)1627 份有效問(wèn)卷樣本，計(jì)算出56 項(xiàng)江西省現(xiàn)行氣象服務(wù)類(lèi)標(biāo)準(zhǔn)的最終得分情況，如表6 所示。最終得分由8.3728 至8.8809 不等，整體標(biāo)準(zhǔn)的平均得分為8.6152，其中27 項(xiàng)標(biāo)準(zhǔn)得分高于平均分，29 項(xiàng)標(biāo)準(zhǔn)得分低于平均分。

表6 標(biāo)準(zhǔn)評(píng)估得分總表

4.2 指標(biāo)主導(dǎo)分型

以bz01 為例，其3 項(xiàng)準(zhǔn)則層指標(biāo)的得分情況及歸一化值如表7 所示。該標(biāo)準(zhǔn)的準(zhǔn)則層指標(biāo)中，技術(shù)因素得分的歸一化值為0.3278，分值最高，因此認(rèn)為該標(biāo)準(zhǔn)為技術(shù)主導(dǎo)型標(biāo)準(zhǔn)。

表7 標(biāo)準(zhǔn)bz01 準(zhǔn)則層指標(biāo)得分表

將56 項(xiàng)被評(píng)估標(biāo)準(zhǔn)的準(zhǔn)則層指標(biāo)的得分?jǐn)?shù)據(jù)都進(jìn)行歸一化處理，繪制出對(duì)比圖（見(jiàn)圖2）。根據(jù)歸一化值將標(biāo)準(zhǔn)分類(lèi)，其中29 項(xiàng)為技術(shù)主導(dǎo)型，10 項(xiàng)為經(jīng)濟(jì)主導(dǎo)型，17 項(xiàng)為社會(huì)主導(dǎo)型。

圖2 評(píng)估對(duì)象準(zhǔn)則層指標(biāo)的歸一化得分對(duì)比圖

5 結(jié)語(yǔ)

5.1 研究結(jié)論

標(biāo)準(zhǔn)的種類(lèi)繁多，分類(lèi)型對(duì)其進(jìn)行評(píng)估更具科學(xué)性和可靠性。本研究基于AHP 層次分析法，從現(xiàn)行氣象服務(wù)類(lèi)標(biāo)準(zhǔn)中提取出共性評(píng)價(jià)指標(biāo)，并構(gòu)建起氣象服務(wù)類(lèi)標(biāo)準(zhǔn)的評(píng)估指標(biāo)體系。之后選取56 項(xiàng)江西省現(xiàn)行氣象服務(wù)類(lèi)標(biāo)準(zhǔn)作為評(píng)估對(duì)象，對(duì)照評(píng)估體系各項(xiàng)指標(biāo)設(shè)計(jì)出標(biāo)準(zhǔn)質(zhì)量水平及實(shí)施效果的調(diào)查問(wèn)卷，并以網(wǎng)絡(luò)問(wèn)卷調(diào)查的形式收集有效問(wèn)卷樣本1627 份。再通過(guò)加權(quán)計(jì)算，得出被選取標(biāo)準(zhǔn)的最終評(píng)分。結(jié)果表明，江西省現(xiàn)行氣象服務(wù)類(lèi)標(biāo)準(zhǔn)以技術(shù)主導(dǎo)型為主，社會(huì)效益較經(jīng)濟(jì)效益表現(xiàn)更突出，符合公共服務(wù)類(lèi)標(biāo)準(zhǔn)的核心理念。

5.2 研究局限性

本研究具有一定的局限性。一是樣本選擇有偏差，由于評(píng)估樣本中的地方標(biāo)準(zhǔn)均為江西省地方標(biāo)準(zhǔn)，其地域性強(qiáng)，而代表性不足，可能影響到研究結(jié)果的可靠性和普適性；二是數(shù)據(jù)收集有偏差，調(diào)查問(wèn)卷主要針對(duì)氣象服務(wù)類(lèi)標(biāo)準(zhǔn)的應(yīng)用單位及工作人員，其與標(biāo)準(zhǔn)的關(guān)聯(lián)性強(qiáng)，可能會(huì)導(dǎo)致標(biāo)準(zhǔn)得分偏高的情況發(fā)生；三是研究方法本身帶來(lái)的偏差，基于層次分析法的標(biāo)準(zhǔn)評(píng)估指標(biāo)體系模型在指標(biāo)設(shè)置及權(quán)重設(shè)立上具有較強(qiáng)的主觀性，易受主觀意識(shí)、專(zhuān)家經(jīng)驗(yàn)等因素的影響；四是研究深度不夠，在依據(jù)評(píng)分結(jié)果對(duì)標(biāo)準(zhǔn)進(jìn)行主導(dǎo)分型后，未繼續(xù)展開(kāi)進(jìn)行更深一步的研究。

5.3 研究展望

本研究基于層次分析法，構(gòu)建了氣象服務(wù)類(lèi)標(biāo)準(zhǔn)評(píng)估指標(biāo)體系，并對(duì)江西省現(xiàn)行氣象服務(wù)類(lèi)標(biāo)準(zhǔn)進(jìn)行了評(píng)估。該方法為評(píng)價(jià)氣象標(biāo)準(zhǔn)的質(zhì)量水平、實(shí)施效果及社會(huì)價(jià)值提供了較為客觀、準(zhǔn)確的依據(jù)，有利于提高標(biāo)準(zhǔn)制修訂效率，增強(qiáng)氣象標(biāo)準(zhǔn)的科學(xué)性和可操作性，進(jìn)而優(yōu)化完善現(xiàn)行氣象標(biāo)準(zhǔn)體系，助力支撐氣象高質(zhì)量發(fā)展。此外，該方法對(duì)于其他類(lèi)型標(biāo)準(zhǔn)的評(píng)估也具有一定參考作用。但需要注意的是，由于標(biāo)準(zhǔn)評(píng)估涉及諸多復(fù)雜因素，本研究具有一定的局限性，在研究方法、評(píng)估專(zhuān)家、樣本對(duì)象的選擇，評(píng)估指標(biāo)及權(quán)重的設(shè)立，調(diào)查問(wèn)卷的設(shè)計(jì)與發(fā)放，以及調(diào)查數(shù)據(jù)的校驗(yàn)與處理等方面，都還有進(jìn)一步優(yōu)化的空間，有待后續(xù)研究探討。