吳曉霞 徐小穎 丁海東
摘要:問卷調(diào)查法決定數(shù)據(jù)信度和效度的關(guān)鍵是所設計的問卷的信效度。文章以某校生物學教育碩士論文中的部分問卷內(nèi)容為例,指出了設計問卷中常出現(xiàn)的一些問題,如題項設計隨意、題型設計不當、題干表述不清等。并以問卷編制流程為主線,給出問卷設計中的一些策略性建議如目標分級法、反饋自查法等。
關(guān)鍵詞:教育研究;調(diào)查問卷設計;常見問題;反饋自查法
中圖分類號:G642.0 ? ? 文獻標志碼:A ? ? 文章編號:1674-9324(2020)11-0083-03
問卷調(diào)查法是教育研究中廣泛使用的實證研究方法[1],高信度和效度的調(diào)查問卷可以對選擇教育研究方向及教育決策起到正確的導向作用[2]。由于在調(diào)查報告及研究論文中通常不出現(xiàn)問卷本身,導致問卷本身的信度和效度成了問卷調(diào)查研究中的隱性問題,盡管非常重要,卻常常被忽略[2,4],而問卷有效性的基礎(chǔ)就是問卷中的問題設計[3]。
教育碩士論文是教育碩士在教育教學研究中針對我國基礎(chǔ)教育事業(yè)改革與管理及教育教學實踐中存在問題進行的基礎(chǔ)性、實證性研究結(jié)果的體現(xiàn);由于教育碩士群體多為從本科直接進入碩士階段的學生,對研究對象缺乏實踐性了解,因此調(diào)查問卷法就成為其研究的重要手段。但抽樣分析結(jié)果卻表明,教育碩士畢業(yè)論文調(diào)查問卷設計方面存在的問題相當突出[2,5]。本文以所收集的某校部分生物學教育類碩士畢業(yè)論文中的問卷為例,歸類分析教育類調(diào)查問卷設計中常見的問題,并結(jié)合教育研究方法論指導,提出科學編制教育類調(diào)查問卷的一般原則和策略。
一、常見問題分析
(一)問題缺乏針對性
問卷的調(diào)查問題應與調(diào)查目標密切關(guān)聯(lián);但分析發(fā)現(xiàn)很多問卷中普遍存在的問題是問題缺乏針對性,根據(jù)調(diào)查者自己以為相關(guān)而隨意設計。如在“初中生物學實驗教學改進的研究”教師調(diào)查問卷中,提問“您所在學校的相關(guān)領(lǐng)導是否了解教科書中生物學實驗存在的問題?”就很牽強;在調(diào)查“生物學教學中傳統(tǒng)文化要素分析”時提問“你的生物任課老師是否只強調(diào)記憶,不注重滲透傳統(tǒng)文化教育”等。
(二)題型選擇不當
調(diào)查問卷一般有三種題型:封閉式、開放式和半封閉式(表1),不適當?shù)念}型選擇可能影響作答者的真實作答,常見問題為題型選擇不當,如:“你喜歡/不喜歡生物學課程的原因是什么?”調(diào)查內(nèi)容為主觀感受,因此開放式題型更適應本題,但作者設計成封閉式選項:“A.老師講得不好 B.沒有實驗課 C.生物課不好玩 D.沒有原因”,導致調(diào)查對象的隨意勾選,或推測調(diào)查者提問意圖進行選擇,從而會影響調(diào)查結(jié)果的信度。
(三)題干表述不清
常見問題表現(xiàn)為,同一問題題干中出現(xiàn)多個提問主體,如“課堂上,學生自主探究、合作討論的時間是否大于教師講解的時間?”中自主探究與合作討論是兩個不同的問題主體。部分問卷中問題的陳述帶有傾向性或權(quán)威性引導,如“你是否具有良好的個人衛(wèi)生習慣?”,這里良好的個人衛(wèi)生習慣是一種傾向性引導,如果改為“你一般多久打掃一次房間?”可能更適宜;部分題干中還會加入權(quán)威性引導,如“中學生物教育傾向于主動探索與合作交流的教學方式,而現(xiàn)行的教學方式仍以教師講課為主,你對此的看法?”中的前半句為權(quán)威性引導;有些問卷的題干中還會出現(xiàn)一些有歧義的概念,如“上網(wǎng)對你的學習有影響嗎?”中的“上網(wǎng)”“影響”均為有歧義的概念,上網(wǎng)干什么?影響是正面影響還是負面影響?……這種題干會使被調(diào)查者不知如何作答,或者會按照自己的主觀理解作答;部分問卷題干的語言缺乏邏輯性、語意模糊、不通順或冗長復雜也會影響調(diào)查結(jié)果的信度。如“你對有關(guān)生物教育的評價制度如學生綜合素質(zhì)評價和學分制的看法是”,這一問題陳述冗長復雜、提問主體過多、語意不清。部分問卷中的問題還存在對敏感性問題的直接發(fā)問,這也會引起調(diào)查對象反感拒答或不能如實回答。
二、編制教育類調(diào)查問卷的一般流程與實施策略
(一)問卷設計前的準備工作
1.確定調(diào)查目的與調(diào)查對象:教育類問卷調(diào)查目的一般包括對教育/教學某一方面的現(xiàn)狀調(diào)查、教學/教育策略的可行性與存在問題的預測調(diào)查、被調(diào)查者對某種教育觀點的認同度調(diào)查、對引起某一教育問題或教育現(xiàn)象產(chǎn)生原因的析因調(diào)查等。
無論哪一類調(diào)查,問卷設計的第一步都需要對所調(diào)查的“教育問題”進行明確的定義,對于現(xiàn)狀調(diào)查類問卷,應分析定義問題的內(nèi)涵與外延,結(jié)合調(diào)查對象的實際情況,盡量窮盡列舉研究問題的組成方面;對于析因問題,主要分析影響調(diào)查問題的可能影響因素,并設計調(diào)查問卷,探討“典型問題”產(chǎn)生的主要原因。調(diào)查者在確定調(diào)查目的時可以從以下幾個問題入手:為什么要進行調(diào)查?通過調(diào)查想要獲得哪些信息資料?問卷調(diào)查能否幫助你獲得所需資料?利用所獲得的信息資料能做什么?以上幾個問題可以幫助調(diào)查者明確調(diào)查目的,并根據(jù)研究需要,選擇適宜的調(diào)查對象(抽樣樣本)和確定調(diào)查范圍(抽樣樣本量的大小),調(diào)查時應選擇具有代表性的樣本來代表整體。
2.確定問卷題項:問卷中的每一題項(提問的項目)都應有利于說明調(diào)查目標中的對應點,題項的全面性與針對性是確定調(diào)查內(nèi)容完整和結(jié)果有效的關(guān)鍵環(huán)節(jié)。
確定題項時可采用目標分級法,從研究目標入手,通過對目標核心概念分級分解,認識其內(nèi)涵,并通過操作性定義的方法使內(nèi)涵的各個方面具體化,只有具體可操作化的內(nèi)容才是設計問卷題項的直接依據(jù)。以李志專[6]的“中學教師情感教學技能的理論構(gòu)建”問卷編制為例(圖1),作者首先確定核心概念“教師情感技能”,接著從中學教師情感教學技能的理論構(gòu)建入手,分析得出中學教師情感技能的四個維度,然后通過可操作化分析,提煉能夠體現(xiàn)中學教師運用情感教學技能的各種可能的具體教學行為,最后結(jié)合對教學技能內(nèi)部結(jié)構(gòu)的理論推演,將所提煉出的115種教學行為歸納到情感教學技能的不同維度中,完成了問卷框架的系統(tǒng)構(gòu)建,經(jīng)與專家深度訪談,最終確定62個項目53頂樣例作為問卷題項。
3.確定題型:調(diào)查問卷的題型中,封閉式因其“方便快捷、簡潔明了、被調(diào)查者比較愿意配合作答”等優(yōu)點而成為問卷調(diào)查中的主體形式,根據(jù)問題回答的方式又可以分為多選式(對于一個問題列舉多個限定答案)、五步量表式(對于一個問題列舉被調(diào)查者態(tài)度/觀點由強到弱或由弱到強的5個答案)以及二分式(把問題簡化成是與否兩種答案)。
在確定問題形式時,應根據(jù)所問問題的特點選擇合適的題型(表1),對于態(tài)度類問題建議采用五步量表式,將問題設計為“非常同意/符合”“同意/符合”“不一定”“不同意/符合”“非常不同意/符合”五種回答,其優(yōu)點在于可以通過將五個選頂換位1到5進行賦值,根據(jù)受測者的各個項目的分數(shù)計算代數(shù)和,得到個人態(tài)度總得分,有利于進行量化分析。
(二)設計問卷
1.問題表述:問卷正文中的一系列題目,都是圍繞調(diào)查目標而設計的,要獲取科學可靠的信息,就必須做到合理地、科學地、藝術(shù)地提出每一個問題[7],問題的陳述應盡可能地清晰、中性,不要帶有傾向性或引導性,每一個問題中只能出現(xiàn)一個調(diào)查事件主體,表述問題時避免使用專業(yè)術(shù)語,如果必須出現(xiàn)時最好先對術(shù)語給予解釋,語句盡量以簡潔明了的短句呈現(xiàn);為了激發(fā)被調(diào)查者回答問題的興趣,可通過虛擬情境化設計問題[8],有時為了識別不誠實、不真實的回答,還可以設置1—2道必要的重復性或驗證性題目[2]。
2.問題排序:編制好的問題依據(jù)邏輯性原則[9]重新排列組合,通常第一個問題盡量有趣且容易回答,重要問題放在突出的位置,容易的問題放在前面,慢慢引入比較難答的問題。問題要一氣呵成,注意問題的前后順序的連貫性,不要讓被調(diào)查者的思緒中斷,如果設計有重復性、驗證性的問題時應放置于問卷的不同部位。
3.指導語的表述:指導語通常包括調(diào)查標題、調(diào)查對象稱謂、研究目的與意義、回答問題的要求、易誤解問題的解釋以及對調(diào)查對象的利益關(guān)系,撰寫時應表述簡明扼要、語言誠懇熱情、說明保密性與匿名性特點以消除調(diào)查對象的顧慮。
4.形式審查與測試修正:對設計好的問卷還需要進行形式審查和測試修正,形式審查可以根據(jù)問卷設計中常出現(xiàn)的問題,采用反饋自查法(圖2),對已編制好的問卷逐條逐項審查修改。
問卷初稿形成后的測試修正可分為三個環(huán)節(jié):首先,邀請相關(guān)研究方向的專家或同行對問卷項目及其因子歸屬進行評估,刪除其中不合理的項目;其次,選擇與潛在的研究樣本類似的小樣本,以面對面的形式,進行嘗試性測試與跟蹤訪談,修改問卷中可能存在的問題;對精確性要求較高的調(diào)查,進行信度和效度分析[10],并根據(jù)結(jié)果對問卷做出調(diào)整、修訂。
三、問卷調(diào)查方式
問題調(diào)查通常使用有面對面發(fā)放問卷調(diào)查、發(fā)送郵件調(diào)查等,隨著網(wǎng)絡運用的普及,網(wǎng)絡調(diào)查被廣泛使用,常用的網(wǎng)絡調(diào)查網(wǎng)站有問卷星、問卷網(wǎng)、樂調(diào)查、微信問卷調(diào)查等。其主要優(yōu)勢有及時性、交互性、突破時空性等,且可以節(jié)省傳統(tǒng)調(diào)查中的大量人力和物力。
但是,無論是傳統(tǒng)調(diào)查還是網(wǎng)絡調(diào)查,問卷調(diào)查的核心均在于調(diào)查者在較短的時間內(nèi)從一個相對較大的研究群體中獲得對一套精心設計的問題的回答,教育調(diào)查問卷結(jié)果可用于教育決策或檢驗教育教學的效果,但是由于研究者與調(diào)查對象并非面對面的交流,被調(diào)查對象可能會問卷設計中存在的各種問題而選擇棄答或虛假作答,導致調(diào)查結(jié)果的信度和效度下降,設計一份目標明確、題量適宜、編制有效的調(diào)查問卷才是決定調(diào)查結(jié)果有效性的根本保證。
參考文獻:
[1]鐘柏昌,李藝.問卷調(diào)查方法在教育研究領(lǐng)域的應用狀況分析[J].開放教育研究,2012,(18):74-80.
[2]鐘柏昌,黃鋒.問卷設計的原則與問題分析——以某校2011年教育學碩士學位論文為例[J].學位與研究生教育,2012,(3):67-72.
[3]杰克·R.弗林克爾&諾曼·E.瓦倫.教育研究的設計與評價[M].第4版.蔡永紅,等.譯.北京:華夏出版社,2003
[4]黃娟娟.教育調(diào)查問卷設計的常見問題及應對[J].上海教育科研,2015,(5):51-55.
[5]來鳳琪.教育研究的方法、步驟、邏輯及其發(fā)展[J].開放教育研究,2017,(3):29-36.
[6]李志專.中學教師情感教學技能的理論構(gòu)建、問卷編制及現(xiàn)狀調(diào)查[J].教育研究與實驗,2012,(6):80-83.
[7]王景英.關(guān)于問卷調(diào)查研究的幾個問題[J].中小學教師培訓,1999,(c1):16-18.
[8]楊玉東.如何運用虛擬情境問題設計專題調(diào)查問卷[J].上海教育科研,2010,(1):47-50.
[9]秦一竹,劉長鑫.調(diào)查問卷在大學英語教學分析中的應用[J].黑龍江高教研究,2015,(3):161-162.
[10]盧家楣.教育科學研究方法[M].上海:上海教育出版社,2012.