李筱竹 張曉美 呂明輝

（中國(guó)氣象局公共氣象服務(wù)中心，北京 100081）

0 引言

氣象與體育賽事關(guān)系密切，氣象服務(wù)保障對(duì)體育賽事的安全及順利舉辦影響重大。科學(xué)、定量評(píng)估體育賽事期間氣象服務(wù)所產(chǎn)生的社會(huì)經(jīng)濟(jì)效益，是賽事氣象服務(wù)的一項(xiàng)重要工作，既可以讓社會(huì)各界、政府決策部門更好地了解和支持氣象事業(yè)發(fā)展，也可以量化氣象產(chǎn)出和服務(wù)滿足用戶需求的程度[1]。

早在20世紀(jì)50年代，國(guó)外的一些水文或氣象和經(jīng)濟(jì)團(tuán)體就已經(jīng)關(guān)注水文氣象服務(wù)經(jīng)濟(jì)效益評(píng)估[2]。世界氣象組織（WMO）在1987年召開(kāi)的第十屆世界氣象大會(huì)上通過(guò)關(guān)于所有國(guó)家氣象部門都可以通過(guò)向公眾提供氣象服務(wù)而獲益的相關(guān)意見(jiàn)。并且認(rèn)識(shí)到需要找到如何滿足天氣服務(wù)用戶的需求方法，至此，氣象水文服務(wù)的經(jīng)濟(jì)效益評(píng)估被提出。在此背景下WMO于1991年批準(zhǔn)了公共天氣服務(wù)計(jì)劃，目的是幫助成員國(guó)家的氣象部門了解用戶為何需要?dú)庀蠓?wù)以及如何在決策中使用服務(wù)，以便可以根據(jù)用戶需求來(lái)定制服務(wù)。此后，WMO分別于1990、1994、2007、2009、2011、2013和2015年召開(kāi)了關(guān)于“氣象和水文服務(wù)的社會(huì)經(jīng)濟(jì)效益”專題技術(shù)研討會(huì)[1,3-5]?？傮w來(lái)看，WMO主要側(cè)重于社會(huì)經(jīng)濟(jì)效益評(píng)估這一領(lǐng)域，以及出臺(tái)一些政策、措施以便更好地協(xié)調(diào)各成員國(guó)的氣象服務(wù)提供者之間、成員國(guó)的氣象服務(wù)提供者與用戶之間的相關(guān)事務(wù)。如WMO在2019年發(fā)布的關(guān)于“2018年城市調(diào)查”結(jié)果中指出“在特別活動(dòng)中，強(qiáng)調(diào)了提供氣象服務(wù)方需要與用戶保持良好關(guān)系，以便協(xié)助有關(guān)責(zé)任部門或組織者做出決策”[6]。

美國(guó)氣象服務(wù)效益評(píng)估始于20世紀(jì)60年代，從那時(shí)起美國(guó)的天氣局就開(kāi)始陸續(xù)進(jìn)行了氣象服務(wù)效益與成本分析，研發(fā)出相關(guān)評(píng)價(jià)技術(shù)手段[7]。澳大利亞氣象局自1997年開(kāi)始以問(wèn)卷的形式調(diào)查氣象服務(wù)的滿意度、準(zhǔn)確性等內(nèi)容，對(duì)公眾用戶的滿意度非常重視，調(diào)查結(jié)果成為重要的部門考核指標(biāo)和改進(jìn)服務(wù)的重要依據(jù)[8]。從目前來(lái)看，國(guó)外學(xué)者一般針對(duì)氣象服務(wù)的某一領(lǐng)域進(jìn)行效益評(píng)估，如農(nóng)業(yè)、林業(yè)部門等，或者針對(duì)不同用戶對(duì)氣象信息內(nèi)容的需求進(jìn)行評(píng)估，而針對(duì)體育賽事的氣象服務(wù)評(píng)估方法目前研究相對(duì)較少。

我國(guó)開(kāi)展的氣象服務(wù)效益評(píng)估已初成體系[1,9-11]，但針對(duì)體育賽事的氣象服務(wù)研究還相對(duì)較少[12]，體育賽事氣象服務(wù)社會(huì)效益評(píng)估的研究始于2008年奧運(yùn)會(huì)前后，相關(guān)學(xué)者分別對(duì)2006年女壘奧運(yùn)測(cè)試賽、2007年青島國(guó)際帆船賽、廣州亞運(yùn)會(huì)、2011年深圳大運(yùn)會(huì)做了氣象服務(wù)效益評(píng)估。從研究方式上看，以定量研究居多，定量與定性相結(jié)合的研究相對(duì)較少。如青島國(guó)際帆船賽、廣州亞運(yùn)會(huì)和深圳大運(yùn)會(huì)是以調(diào)查問(wèn)卷形式進(jìn)行的定量研究，優(yōu)勢(shì)是收集的數(shù)據(jù)是客觀的，可量化進(jìn)行對(duì)比分析，評(píng)價(jià)結(jié)果直觀，但對(duì)評(píng)估內(nèi)容的細(xì)節(jié)和深度挖掘不夠。再如女壘奧運(yùn)測(cè)試賽運(yùn)用了定性和定量結(jié)合的研究方式進(jìn)行評(píng)估，相對(duì)于單憑定量調(diào)查得出的結(jié)論既具有客觀性還有一定的深度和廣度。從研究對(duì)象上看，以往體育賽事氣象服務(wù)效益評(píng)估要么關(guān)注賽事決策管理用戶，要么面向觀賽公眾，對(duì)服務(wù)用戶的覆蓋不夠全面。如女壘奧運(yùn)測(cè)試賽和青島國(guó)際帆船賽，僅針對(duì)決策層進(jìn)行調(diào)查。而廣東亞運(yùn)會(huì)和深圳大運(yùn)會(huì)的評(píng)估又僅針對(duì)觀賽公眾進(jìn)行調(diào)查。可見(jiàn)這些評(píng)估結(jié)果（表1）對(duì)評(píng)價(jià)整個(gè)賽事服務(wù)來(lái)說(shuō)不夠全面[13-16]。

本文將在以往研究的基礎(chǔ)上，從評(píng)估方法設(shè)計(jì)的角度，通過(guò)討論研究對(duì)象的選擇、調(diào)查方法的應(yīng)用、評(píng)估指標(biāo)的設(shè)計(jì)以及環(huán)節(jié)的把握，研究如何科學(xué)、全面地獲取評(píng)估數(shù)據(jù)，建立能夠客觀反映出賽事氣象服務(wù)效果的評(píng)估方法。

表1 體育賽事氣象服務(wù)效益評(píng)估研究方式和研究對(duì)象對(duì)比Table 1 Comparison of research methods and research objects of meteorological service benefit assessment on some past sports events

1 調(diào)查方法

1.1 定量調(diào)查

定量調(diào)查是利用結(jié)構(gòu)式問(wèn)卷將數(shù)據(jù)量化后進(jìn)行統(tǒng)計(jì)分析的研究方法，其研究對(duì)象應(yīng)具有一定代表性，數(shù)量上有一定規(guī)模[17]。根據(jù)現(xiàn)有的樣本量計(jì)算方法[18-20]，一般來(lái)講，允許誤差控制在5%之內(nèi)，至少保證400個(gè)樣本量的調(diào)查結(jié)果與現(xiàn)實(shí)基本一致，是最低的樣本量。在進(jìn)行定量調(diào)查樣本量設(shè)計(jì)時(shí)，具體需要多少樣本量應(yīng)該根據(jù)可接受樣本誤差以及調(diào)查經(jīng)費(fèi)等具體情況而定。定量調(diào)查的優(yōu)點(diǎn)是科學(xué)、客觀、公正、系統(tǒng)[21]，得出的結(jié)果是直觀數(shù)據(jù)，容易進(jìn)行對(duì)比分析。它的缺點(diǎn)是由于問(wèn)題的結(jié)構(gòu)性太強(qiáng)，對(duì)于研究問(wèn)題缺少了靈活性和深入性，研究結(jié)果對(duì)細(xì)節(jié)的深挖不足。

1.2 定性調(diào)查

與定量調(diào)查不同，定性調(diào)查的問(wèn)題是非格式化的，多為開(kāi)放式的問(wèn)題，主要有訪談、觀察和實(shí)物分析三種[22]。在氣象服務(wù)定性調(diào)查中，主要采用“深度訪談”的方式收集材料。

對(duì)于樣本量的要求，關(guān)注的不是樣本數(shù)量的多少，而是樣本是否可以比較完整地、相對(duì)準(zhǔn)確地回答所要研究的問(wèn)題。通常來(lái)說(shuō)，深度訪談遵循“信息飽和原則”，即當(dāng)研究人員發(fā)現(xiàn)在訪談中所獲得的信息開(kāi)始重復(fù)，不再有新的、重要的主題出現(xiàn)時(shí)，就可以認(rèn)為信息已經(jīng)飽和，不再需要繼續(xù)進(jìn)行訪談了[23]。根據(jù)經(jīng)驗(yàn)，通常在深度訪談樣本量設(shè)計(jì)時(shí)，特征相同的人群訪問(wèn)3～5個(gè)就可以滿足“信息飽和原則”。

定性調(diào)查的特點(diǎn)是對(duì)待特定問(wèn)題的研究具有相當(dāng)?shù)纳疃萚21]。它的優(yōu)點(diǎn)是能獲得豐富的資料，可以給研究者帶來(lái)較大的詮釋空間。缺點(diǎn)是過(guò)分強(qiáng)調(diào)主觀性和參與性，而偏重個(gè)案的研究，結(jié)果不夠客觀。

2 調(diào)查方法的設(shè)計(jì)

2.1 研究人群的確定

按照國(guó)際賽事慣例，大型體育賽事的籌備期，各類氣象產(chǎn)品即提供至賽事組委會(huì)，主辦地所在政府各部門和體育場(chǎng)館負(fù)責(zé)人等各類用戶。鑒于這一氣象服務(wù)特征，氣象產(chǎn)品的重點(diǎn)應(yīng)用人群可以歸納為三種類型，分別是決策管理用戶、賽事服務(wù)用戶以及觀賽公眾（表2）。

表2 研究對(duì)象人群和職責(zé)特征分析Table 2 Detailed information of research object

決策管理用戶會(huì)根據(jù)氣象信息部署賽事相關(guān)工作，從而保障賽事的正常舉辦。賽事服務(wù)用戶從事保障賽事順利進(jìn)行的相關(guān)工作，其工作崗位受氣象條件影響較大。觀賽公眾是賽事期間最大的氣象服務(wù)用戶群體，對(duì)賽事氣象服務(wù)的評(píng)價(jià)會(huì)影響社會(huì)輿論評(píng)價(jià)。在選擇研究人群時(shí)，為了覆蓋重點(diǎn)服務(wù)人群，保證評(píng)估工作的全面，將上述的重點(diǎn)服務(wù)人群均納入評(píng)價(jià)目標(biāo)人群。此外，為對(duì)比研究氣象部門與用戶的需求與產(chǎn)品提供之間的匹配度，將參與賽事服務(wù)的氣象部門工作人員也納入到研究對(duì)象中。

2.2 調(diào)查方法的選擇

定量調(diào)查偏向客觀和量化，而定性調(diào)查可更加深入的研究?jī)?nèi)容，兩種調(diào)查方法各有其優(yōu)勢(shì)。通過(guò)分析不同研究對(duì)象的特點(diǎn)，可以發(fā)現(xiàn)：決策管理用戶會(huì)根據(jù)天氣情況部署各場(chǎng)館的賽事工作和調(diào)配各類資源保護(hù)賽事順利進(jìn)行，氣象服務(wù)人員向用戶提供氣象服務(wù)產(chǎn)品，但這兩類人群人數(shù)較少，不滿足定量調(diào)查所需的樣本量，考慮其工作性質(zhì)和人數(shù)情況，適合深度訪談這種定性調(diào)查方式；賽事服務(wù)用戶所在崗位受天氣影響較大，天氣情況將直接影響賽事的開(kāi)展，是我們的研究重點(diǎn)，而從人數(shù)上看，多于決策管理用戶而明顯少于觀賽公眾，因此可以同時(shí)進(jìn)行定性和定量調(diào)查。觀賽公眾人數(shù)多，并且在特定時(shí)間段和場(chǎng)館進(jìn)行觀賽，更適合用攔截訪問(wèn)的定量調(diào)查方式。根據(jù)上述分析，設(shè)計(jì)確定了不同研究對(duì)象所采用的調(diào)查方式和樣本量（表3）。

表3 不同研究對(duì)象調(diào)查方式和樣本量設(shè)計(jì)Table 3 Design of research methods and sample sizes of various research objects

2.3 評(píng)估指標(biāo)的設(shè)計(jì)

不同研究人群獲取氣象服務(wù)產(chǎn)品的用途不同，決策管理用戶為了做出科學(xué)決策，賽事服務(wù)用戶為了開(kāi)展工作和參與賽事，觀賽公眾為了觀賽。進(jìn)而，獲取氣象信息的方式、內(nèi)容等都有明顯差異。因此根據(jù)研究人群的不同目的、行為、習(xí)慣等，明確不同的研究目標(biāo)和設(shè)計(jì)調(diào)查指標(biāo)是十分必要的。

在定性研究時(shí)，決策管理用戶和賽事服務(wù)用戶的研究重點(diǎn)在對(duì)氣象服務(wù)的需求和采納度上，具體指標(biāo)包括需求、內(nèi)容評(píng)價(jià)、傳播效果及采納度、服務(wù)重點(diǎn)等（表4）。而氣象人員的研究重點(diǎn)在于了解氣象工作開(kāi)展情況，具體指標(biāo)包括，氣象服務(wù)工作情況、流程、服務(wù)對(duì)象及傳播模式、賽事氣象服務(wù)關(guān)鍵點(diǎn)等（表4）。

表4 各類研究人群的定性評(píng)估指標(biāo)設(shè)計(jì)Table 4 Qualitative assessment indexes of various research objects

在定量研究時(shí)，根據(jù)賽事服務(wù)用戶和觀賽公眾的服務(wù)特點(diǎn)，對(duì)定量評(píng)估指標(biāo)進(jìn)行了區(qū)別設(shè)計(jì)，二者在氣象服務(wù)信息內(nèi)容、傳輸渠道、發(fā)布評(píng)價(jià)、產(chǎn)品采納效果和滿意度等方面的評(píng)估目標(biāo)一致，但由于賽事服務(wù)用戶是與賽事氣象服務(wù)結(jié)合最緊密的用戶，因此賽事服務(wù)用戶的研究目標(biāo)還增加了與賽事工作相關(guān)的研究?jī)?nèi)容，具體包括：服務(wù)需求與落實(shí)情況、氣象服務(wù)與賽事服務(wù)用戶工作的匹配程度、氣象服務(wù)培訓(xùn)效果以及氣象服務(wù)與工作相關(guān)程度和對(duì)氣象服務(wù)的關(guān)注度，具體指標(biāo)詳見(jiàn)表5。

表5 各類研究人群的定量評(píng)估指標(biāo)設(shè)計(jì)Table 5 Quantitative assessment indexes of various research objects

2.4 評(píng)估環(huán)節(jié)設(shè)計(jì)

由于青奧會(huì)氣象服務(wù)周期時(shí)間跨度較長(zhǎng)，針對(duì)不同階段需要解決的問(wèn)題不同，例如賽前需要發(fā)現(xiàn)服務(wù)問(wèn)題，以便在賽事期可以改進(jìn)服務(wù)水平，賽事時(shí)期的重點(diǎn)工作是解讀服務(wù)效果，而賽后的重點(diǎn)工作是要對(duì)整個(gè)賽事的氣象服務(wù)做一個(gè)客觀全面的評(píng)估，以期為將來(lái)的賽事氣象服務(wù)提供決策參考依據(jù)。因此分別在賽事籌備期（賽前）、賽事期及賽后三個(gè)階段共設(shè)計(jì)了兩次調(diào)查和三次評(píng)估（圖1）。

3 討論與展望

通過(guò)上面的分析，在設(shè)計(jì)體育賽事氣象服務(wù)效益評(píng)估的技術(shù)方法時(shí)，需要注意以下幾個(gè)方面的問(wèn)題。

1）應(yīng)深入分析賽事氣象服務(wù)的情況，明確賽事服務(wù)的重點(diǎn)用戶，并將其作為評(píng)估對(duì)象。不同用戶對(duì)氣象服務(wù)的需求不同，氣象部門提供的氣象服務(wù)側(cè)重點(diǎn)有所不同，應(yīng)從這些用戶中找到賽事服務(wù)的重點(diǎn)用戶，并將其歸為評(píng)估對(duì)象。在調(diào)查設(shè)計(jì)時(shí)，應(yīng)盡量涵蓋這些評(píng)估對(duì)象。

圖1 青奧會(huì)氣象服務(wù)效益評(píng)估流程Fig.1 Benefit assessment procedure of 2014 Youth Olympic Games

2）根據(jù)研究對(duì)象的特點(diǎn)，綜合運(yùn)用定性、定量的社會(huì)調(diào)查方法，收集評(píng)價(jià)數(shù)據(jù)。定性研究可使研究者更加深入地了解用戶的細(xì)節(jié)信息，使評(píng)價(jià)結(jié)果具有廣度和深度。定量研究則可根據(jù)客觀數(shù)據(jù)得出結(jié)論，具有客觀性。應(yīng)根據(jù)研究對(duì)象的特點(diǎn)，發(fā)揮這兩種方法的優(yōu)勢(shì)，綜合運(yùn)用兩種調(diào)查方法來(lái)收集數(shù)據(jù)，使數(shù)據(jù)更客觀和深入。

3）根據(jù)不同用戶群體的服務(wù)特點(diǎn)，確定其研究目標(biāo)和評(píng)估指標(biāo)。由于不同用戶群體氣象服務(wù)目的和需求不同，獲取氣象服務(wù)的方式和內(nèi)容會(huì)有較大差異，在設(shè)計(jì)評(píng)估指標(biāo)時(shí)應(yīng)根據(jù)用戶群體的服務(wù)特征來(lái)確定研究目標(biāo)和評(píng)價(jià)指標(biāo)。

4）對(duì)于周期較長(zhǎng)的大型賽事氣象服務(wù)，可開(kāi)展分階段的效益評(píng)估。一般來(lái)講，一場(chǎng)體育賽事的舉辦包括籌備期、賽事期和賽后三個(gè)時(shí)期，氣象服務(wù)保障工作也貫穿其中，因而進(jìn)行分階段的效益評(píng)估，可以最大程度的提升評(píng)估的及時(shí)性、應(yīng)用價(jià)值以及全面性。

隨著我國(guó)經(jīng)濟(jì)的飛速發(fā)展以及在國(guó)際地位上的提高，未來(lái)舉行國(guó)際賽事以及國(guó)際大型活動(dòng)的機(jī)會(huì)將越來(lái)越多，氣象要素對(duì)賽事環(huán)境、競(jìng)賽規(guī)定、運(yùn)動(dòng)員成績(jī)和觀眾心理會(huì)造成一定影響[24]，因此氣象服務(wù)作為一項(xiàng)基本的保障服務(wù)必然也會(huì)參與其中，同時(shí)也會(huì)給我們的氣象服務(wù)水平提出更高的要求，如北京將在2022年舉辦冬奧會(huì)和冬殘奧會(huì)，氣象服務(wù)將全程參與到賽事保障中，如在前期規(guī)劃建設(shè)中氣象部門需開(kāi)展山地場(chǎng)館風(fēng)險(xiǎn)評(píng)估與防護(hù)措施研究，賽事期參與賽事保障及專項(xiàng)保障。