會議討論聚焦于五個主題。隨著虛擬會議的進行，明顯發(fā)現(xiàn)：所有主題均息息相關，并在一定程度上與后續(xù)討論的主題互為基礎。下面是對虛擬會議五個主題討論的總結。

（一）投資回報率信息

投資回報率信息如何惠及國家的TVET體系？

了解投資回報率（ROI）在不同國家的不同應用方式，可以了解研究TVET的ROI時應注重哪些方面。關于這一主題，參會者有許多討論，并提出了許多突出問題。

首先，ROI信息在說服利益相關者投資TEVT方面發(fā)揮著重要作用，此外，還可以幫助提升TVET形象。正如來自肯尼亞的John WSimiyu所說：“ROI信息有益于肯尼亞的TVET體系，尤其是各層級的TVET資助方面，因為與其他傳統(tǒng)的非TVET教育相比，TVET的經(jīng)營成本更高?！?/p>

在資金有限而需要資金投入的項目又很多的情況下，上述ROI信息對TVET吸引投資尤為重要。來自加納的Lisa Freiburg所言說明了這一點，即“我認為，如果加納有更多關于TVET的ROI信息，會使TVET發(fā)起人更容易籌措資金，并吸引私人投資者。如果TVET有明顯的經(jīng)濟和社會效益，還會有助于提升加納的TVET形象”。

來自菲律賓的Ursula Mendoza指出：“政策制定者應將基于證據(jù)和事實的信息作為制定TVET政策的依據(jù)。ROI還為政府提供支持私營企業(yè)的依據(jù)。從私營部門的視角來看，ROI與投資目的息息相關。”這進一步印證了ROI信息在幫助獲得TVET的私人投資方面的功能。

此外，在許多國家，TVET都得到了政府的大力資助。通過TVET獲得的技能被視為經(jīng)濟增長和發(fā)展的基本元素。然而，TVET體系也時常會依賴某些民間基金。在發(fā)展中國家，這通常具有捐助者支持的性質。正如來自加納的Samuel Thompson所言：“TVET對許多經(jīng)濟體的發(fā)展很重要，加納也不例外。TVET和技能培養(yǎng)促進了加納的升級優(yōu)化和就業(yè)崗位創(chuàng)造。為此（當然原因不止于此，還有其他方面的原因），政府部門負責引領TVET的融資和技能培養(yǎng)。有時則是由政府與發(fā)展合作伙伴及私營部門實體一起完成。”

雖然參會者意識到TVET的ROI信息能證明TVET的價值，但也發(fā)現(xiàn)測量ROI的相關數(shù)據(jù)經(jīng)常缺乏。投入和輸出/結果數(shù)據(jù)是必需的，但通常TVET的成果信息不足。部分問題可能是缺乏ROI關注點（或評估）。一位來自澳大利亞的參會者提到，澳大利亞經(jīng)費分配的依據(jù)似乎是投入而非ROI計算所需的結果信息。一位來自愛爾蘭的參會者提到，愛爾蘭最近改用投入/結果法來更充分地利用有限資源。

多名參會者提出了測量ROI的各類模型，包括：社會投資回報（SROI）、內(nèi)部收益率（IRR）、成本效益分析（CBA）、凈現(xiàn)值（NPV）和股本回報率（ROE）。特別是討論了評估培訓影響的柯克帕特里克和菲利普斯模型（見菲利普斯，1996，2011），該模型包含五個等級，從1級——對培訓和學習成果利用計劃的滿意度，直到第5級——計算培訓的ROI。進行各層次評價的模型和適當時間框架見表1。

圍繞這一主題，參會者指出，缺乏ROI證明會產(chǎn)生負面影響，即會導致資金投入減少。這是來自特立尼達和多巴哥的一名參會者在如下闡述時提到的，即為了提升技能關注度和促進經(jīng)濟發(fā)展，對TVET進行的重大投資尚未收集到支持性的數(shù)據(jù)。

缺乏信息的后果往往是難以量化的（如社會和環(huán)境影響），但是可以確定其產(chǎn)生積極影響的可能性較小。正如來自加納的Lisa Freiburg所言：“根據(jù)我的經(jīng)驗，缺乏可靠數(shù)據(jù)會使政府無法提供TVET的ROI的相關證據(jù)?！?/p>

一位參會者提出了一個有趣的觀點，即ROI可能不總是正數(shù)。當產(chǎn)出低于投入時，ROI為負數(shù)。雖然這對于獲得TVET投資支持無益，但可以為改進TVET體系提供信息依據(jù)。來自澳大利亞的Javier Amaro 指出：“一個評價研究的ROI雖然為負數(shù)，但其仍然有包含各層級信息的記分卡，其中包含有待考慮的重要信息，有助于找出問題和發(fā)現(xiàn)改善機會。”

一位來自澳大利亞的參會者從營銷角度發(fā)表了評論，指出可把客戶滿意度視為TVET項目的一項成果。據(jù)此，可以通過（在多種層面上）評估顧客滿意度來解釋ROI。

（二）投資回報率類型

哪種類型的投資回報率最重要或與您所在國家的國情相關？

投資回報率涉及許多不同的方面，并存在不同水平的利益領域。例如，TVET的投資回報率會對經(jīng)濟、社會、社區(qū)和環(huán)境產(chǎn)生影響。如上所述，Marope、Chakroun和Holmes（2015）在其說明TVET潛力的刊物中，特別提到了TVET對經(jīng)濟、社會公平和可持續(xù)發(fā)展的影響。

參會者都認識到了ROI的經(jīng)濟和社會影響對國家非常重要，參會者還對與這一問題有關的幾個重要問題進行了評述。首先，特殊TVET體系的目標將是評估ROI的指南。例如，如果TVET的目標是為失業(yè)青年提供就業(yè)機會，ROI評估則應反映就業(yè)機會的提供。類似地，如果TVET的目標之一與社會公平相關，ROI則應反映社會公平情況。正如來自尼日利亞的Emamorose Felix所言，“任何國家的TVET項目目標都將指引著ROI的評估指標”。

話雖如此，許多國家在開始時還是主要關注ROI的經(jīng)濟影響。最后才是國家生產(chǎn)力方面的ROI，而且TVET可能被視為國家廣泛的經(jīng)濟投資的一部分。但當我們轉向圖1所示的效益等級時，參會者又提到了ROI其他方面經(jīng)濟的影響，比如培訓后就業(yè)、青年就業(yè)率、雇主滿意度、就業(yè)技能及啃老族人數(shù)的縮減。這并不意味著社會影響不重要，而是經(jīng)濟影響可視為社會影響的前置因素。

討論就業(yè)結果時，至少有2個參會者強調不僅就業(yè)本身重要，就業(yè)質量也重要（且應該評估這一指標）。關于這一點，有人提出，TVET體系應符合市場需求，培養(yǎng)“好賣的”技能。例如，來自加納的Lisa Freiburg提出：“多少TVET畢業(yè)生在完全不相關領域就業(yè)（通常在非正規(guī)部門）？更重要的是，隨著時間的推移，就業(yè)足以維持一個人的生計、提高收入并改善其處境嗎？”

某些參會者認為青年就業(yè)重要，尤其是因為它關系到早期輟學率。早期輟學可能會對未來就業(yè)和更廣泛的社會結果兩方面產(chǎn)生負面影響（見Hancock & Zubrick，2015綜述）。一位馬耳他參會者進一步強調，TVET在降低該國不就業(yè)、不讀書也不接受培訓（啃老族）群體的數(shù)量上起到一定作用。因此，教育體系的ROI是一個重要參數(shù)。正如來自馬耳他的Martin Borg指出，“我們的中學教育體系面臨較大數(shù)量的早期輟學者，除經(jīng)濟價值外這還會產(chǎn)生更大的社會價值/影響。我認為，在這種各國迥異的環(huán)境下，應該考慮教育體系的ROI?！?/p>

參會者認為社會ROI也相當重要，但有人指出經(jīng)濟ROI和社會ROI是互相聯(lián)系的。比如，就業(yè)增加也會導致犯罪率降低。此外，就業(yè)率上升還會增強社會凝聚力。這重申了培訓的經(jīng)濟成果（如就業(yè)）作為TVET培訓和社會成果中間物的觀點。下列引述說明了這一關系。比如，尼日利亞的Hannatu Garba指出：“經(jīng)濟和社會回報相關性很大，也就是說對青年和成年人提供技能培訓可以提供就業(yè)機會、促進創(chuàng)業(yè)，但在減少犯罪、增強社會凝聚力和和平共存方面仍任重道遠?！蹦崛绽麃喌腛gu Samson提出：“在尼日利亞，經(jīng)濟和社會回報都非常重要，因為TVET不僅提供就業(yè)技能，還提升價值。就業(yè)個體會促進國家經(jīng)濟的發(fā)展，反過來又降低社會惡習風險。” 牙買加的Halden Anthony Morris指出：“TVET的經(jīng)濟ROI和社會ROI密不可分。大多數(shù)情況下，恰當就業(yè)的人們會有舒適感，這有利于該國的社會和經(jīng)濟福祉?！?/p>

一位參會者指出，經(jīng)過更長的一段時間才會產(chǎn)生社會效果，并指出評估面臨諸多挑戰(zhàn)。正如菲律賓的Ursula Mendoza 所言：“需要等待較長的時間才會得到社區(qū)的社會回報和效益，而且測量ROI具有挑戰(zhàn)性。但這樣會更有意義，因為我們談論的是社區(qū)效益，而不單單是個人的ROI?！?/p>

表2從個人、雇主或公司及較廣泛的社區(qū)效益角度匯總了TVET中ROI的一些重要量度。這是經(jīng)過廣泛查閱虛擬會議期間提供的文獻和追加反饋而編制的。

（三）比較投資回報率

跨國比較TVET的ROI有哪些挑戰(zhàn)？比較回報過程中，如何考慮不同的政治、文化和教育背景？

為達成共識，應對ROI的各個量度進行非常具體的定義。這些定義應能持續(xù)應用于每個國家，并需要與可評估的事物相關。參會者提出了比較各個國家ROI時的幾個挑戰(zhàn)。由于各國操作的環(huán)境各不相同，參會者以不同的方式考慮了這一多樣性。

首先，各國的TVET部門具有多樣性，且各有不同側重點。有人指出，在這份報告背景下，即使在特定國家內(nèi)，TVET也包含多種項目和系統(tǒng)。因此，在比較ROI量度時會遇到相當多的挑戰(zhàn)。下列引證說明了這些挑戰(zhàn)。來自尼日利亞的Hannuta Garba指出：“TVET包含正規(guī)、非正規(guī)和非正式的學習，涉及許多地點，有些發(fā)生在學校，另外一些則在公立和私營職業(yè)中心。獲得可能用到的統(tǒng)計數(shù)據(jù)是面臨的挑戰(zhàn)之一。收集（可用的）數(shù)據(jù)和標準面臨的經(jīng)濟、政治和環(huán)境條件，也是比較ROI的挑戰(zhàn)之一。” 菲律賓的Ursula Mendoza指出：“這里有一些關于TVET的專用名詞，即，正規(guī)、非正規(guī)、非正式、TVET學校和機構、高等教育、彈性學習、第三級教育、企業(yè)本位、學徒訓練、徒工訓練、雙軌制教育、二元化培訓、工藝學校等。這些專用名詞規(guī)定了各個國家對待TVET的方式。”

總體來看，國家間的背景有許多差異，比如政治和文化上的。此外，還存在其他脈絡性的問題，包括國家的人口學特征，比如年齡結構、城市與地區(qū)密度和性別分布。另外，在跨國對比中，還需要考慮管理教育和培訓的經(jīng)驗度（成熟度）和體系中的各個利益相關者。參會者在這方面做出了一些相關評論。來自特立尼達和多巴哥的Fitzroy Marcus指出：“比較各國ROI的直接挑戰(zhàn)將反映到以不同政治、文化和教育信仰體系和實踐為基礎的約束條件中?！?/p>

另一個重要考量是如何資助TVET（包括公立和私立）以及可用的管理信息系統(tǒng)。下列引證重點考慮了公共資助/民間集資因素。來自牙買加的Halden Anthony Morris指出：“另一明顯挑戰(zhàn)是多個國家內(nèi)公私合伙企業(yè)的不同水平。在一些實例中，TVET體系主要由政府資助驅動，然而在其他案例/國家中，私營部門也承擔一定的責任?！?/p>

收集民間資本的培訓開支信息，存在一些固有的問題。這可能與政府支出報告的要求相關，但又不相同。甚至政府支出的信息都很難獲得，比如培訓的更多間接成本。

有人另辟蹊徑提出：該體系缺乏協(xié)調或中央?yún)f(xié)調機構，這會導致數(shù)據(jù)缺失或分散。所以要在一定程度上將中央?yún)f(xié)調重點考慮?；诖耍瑸榱耸占疪OI計算使用的數(shù)據(jù)，設立可靠及時的“管理信息系統(tǒng)”（MIS）面臨諸多挑戰(zhàn)。例如，尼日利亞的Ogu Samson E指出，“尼日利亞的TVET各部門間缺乏協(xié)調和聯(lián)系，這樣導致缺乏數(shù)據(jù)或記錄?！?牙買加的Halden Anthony Morris指出：“數(shù)據(jù)流通仍是一個問題，在某些情況下，可用數(shù)據(jù)非常陳舊（3年以上）。絕對有必要在整個加勒比海地區(qū)內(nèi)建立可靠的信息管理系統(tǒng)?！奔蛹{的Samuel Thompson提出：“加納的TVET涉及諸多利益相關者。這些利益相關者包括私營和公立部門、政府部門、代理機構和正規(guī)與非正規(guī)部門。要加設中央?yún)f(xié)調機構，需要通過特殊支持項目和社區(qū)支援活動進行投資。這種組合要求努力收集所有領域的數(shù)據(jù)，收集格式通常按照產(chǎn)生數(shù)據(jù)的機構要求，并與他們合作進行數(shù)據(jù)的三角剖分。”

綜上所述，評估一個國家TVET的ROI都面臨很多挑戰(zhàn)，更不必說ROI的跨國對比了。參會者提出有必要構建ROI評估框架，并提出該主題有必要在會后進一步討論。例如，來自肯尼亞的John W Simiyu 提出：“比較各個國家的ROI可能是一個艱巨的任務，除非有一個可以用來評估這些國家ROI的框架?！?

一位參會者提出相當重要的觀點，即調查其他部門如何處理類似問題可能會有意義。毫無疑問，如果ROI測量對TVET是一個挑戰(zhàn)，那么ROI對其他部門也會是個挑戰(zhàn)。其所引用示例是如何跨國比較不就業(yè)、不讀書也不接受培訓的年輕人（啃老族）的問題。這是由于就業(yè)、教育和培訓的定義相當廣泛，既包括正規(guī)的，也包括非正規(guī)的。國別調查對沒有使用諸如“正規(guī)”和“非正規(guī)”術語的成果中的定義進行了廣泛梳理，同時考慮了區(qū)域差異，這使得該調查方法成為一個有趣的例子，值得進行研究。

（四）投資回報率數(shù)據(jù)源

您所在國家當前可用于測量TVET投資回報率的數(shù)據(jù)源有哪些？數(shù)據(jù)缺口有哪些？如何解決？

考慮什么類型的數(shù)據(jù)源可以用來測量每個國家TVET的成本/投資和效益是至關重要的。

而且，考慮成本時，不僅要考慮直接成本，還要考慮間接成本（間接成本可能很難捕捉）。同樣地，還要考慮有形效益和無形效益。

聯(lián)合國教科文組織青年、知識和技能培育部門負責人Borhene Chakroun在虛擬會議期間指出，測量ROI需要收集的數(shù)據(jù)源類型包括：管理性數(shù)據(jù)源（包括來自教育、就業(yè)和社會保障系列的培訓供應者和相關政府部門）；調查數(shù)據(jù)（勞動力調查和其他戶口調查）；評估數(shù)據(jù)，比如聯(lián)合國教科文組織的知識測量和檢測項目（LAMP）、成年人技能OECD調查（PIAAC）和世界銀行的STEP技能測量程序；以及大數(shù)據(jù)分析效益。

雖然理想情況下應該收集和/或使用這些數(shù)據(jù)源，但參會者重申了在收集ROI信息數(shù)據(jù)時面臨的難題，尤其是有形數(shù)據(jù)太少。有形數(shù)據(jù)較少的一個例子是，從經(jīng)濟體層面來看，社會凝聚力增強。然后出現(xiàn)如何使這些類型的無形效益量化或真正貨幣化以及是否應該這樣做的問題。以ROI為例，就可能需要考慮收集定性數(shù)據(jù)。例如，來自德國的Wouter de Regt 指出：“我們應該區(qū)別對待使用投資回報率定量信息能（或想要）證明的和使用定性信息需要證明的東西?；蛟S當我們認識到這一點時，可以使用整體戰(zhàn)略收集該信息并更好地解決產(chǎn)生信息差距的結構性問題?！?/p>

指導咨詢領域作為一個收集更多定性ROI數(shù)據(jù)的例子，也被參會者提及。例如，來自德國的Jean Hautier指出：“我記得指導咨詢項目使用缺勤統(tǒng)計或對學生家長進行大規(guī)模調查，來更好地了解TVET對學生動機或自信的影響等……或許是另一種增強了解的方法?！?/p>

雖然數(shù)據(jù)收集涉及的不同利益相關者可以提供用于ROI計算的信息，但是從他們那獲得數(shù)據(jù)仍有困難。特別是，有必要對數(shù)據(jù)收集進行綜合協(xié)調，并了解ROI計算具體需要哪些信息。例如，來自尼日利亞的Amina Idris指出：“要縮小差距需要適當調節(jié)利益相關者的投入。” 來自菲律賓的Ursula Mendoza提出：“雖然我們可以輕而易舉地查明數(shù)據(jù)出處，但問題是如何得到這些數(shù)據(jù)、具體數(shù)據(jù)需求出自哪里，以及使用什么調查問卷。為了避免浪費時間和資源，我們應該確定目標和相關指標?！?/p>

參會者提出的另一個觀點是，有些數(shù)據(jù)存在的格式不總是能用于ROI的計算。因此有必要收集和運用可用于測量或了解ROI的數(shù)據(jù)。顯然，這些在最初設置數(shù)據(jù)收集時就需要考慮。

進一步講，參會者提到的另一個挑戰(zhàn)是制定用于進行數(shù)據(jù)比較的標準參數(shù)。由于TVET體系的內(nèi)在多樣性，這將是一項挑戰(zhàn)性任務。例如，來自特立尼達和多巴哥的Fitzroy Marcus指出：“用于獲取和分析數(shù)據(jù)的方法和工具是否能完全用于測評TVET的ROI，并不確定?！瓰榱嗽赥VET的ROI測量中使用最佳方法，還有很多工作要做?！?來自牙買加的Halden Anthony Morris指出：“在牙買加有若干可用的數(shù)據(jù)源，我認為可用于測量TVET的ROI。但是，這些數(shù)據(jù)源沒有按照準確、及時提供ROI量度的標準進行配置?！?/p>

數(shù)據(jù)來源：Schueler J. Forthcoming. Evaluation Framework Measuring Return on Investment （ROI） in TVET. Adelaide： National Centre for Vocational Education Research.

（五）關于投資回報率框架

圖1概述了在開發(fā)“ROI評價框架”時應考慮的可用國際文獻中所指出的問題。查看該圖時從左上象限開始，并且ROI與特定利益相關者和操作環(huán)境密切相關；在范圍和目的方面，是了解利益相關者、評估對象、重要原因和首要需求。

關于ROI的指導原則，需要使用一致且標準的評判框架。ROI模型應根據(jù)用途和評估的重要對象特制。該模型應具有實用性，并盡可能做到有用性、靈活性和可定制性。

該模型必須以可感測指標、實用量度和優(yōu)質數(shù)據(jù)可用性作支持，并使用科學有效的技術解決其他因素的影響。

參會者討論了對于達成共識以及跨部門方案的需求，該方案有助于將TVET體系分析和預期的發(fā)展成果聯(lián)系起來。為此，考慮了聯(lián)合國教科文組織在“釋放潛力，轉變技術與職業(yè)教育和培訓”（Marope，Chakroun和Holmes，2015年）中提出的綜合分析方法。如前所述，該方法用平衡和戰(zhàn)略的方式統(tǒng)合了經(jīng)濟增長、社會公平和可持續(xù)發(fā)展問題，并認為：經(jīng)濟增長包括生產(chǎn)力增長、就業(yè)能力、就業(yè)機會創(chuàng)造和新的工作模式；社會公平包括物質和無形財富的再分配及包容；可持續(xù)性包括綠化經(jīng)濟和可持續(xù)性。

下列引證說明了參會者關于框架開發(fā)的一些想法。來自德國的Wouter de Regt指出：“我們需要采取的第一步是對TVET目標達成共識……我們需要一個定義，該定義足以囊括區(qū)域差異、也足夠具體引用某些指標。一個適當?shù)腞OI框架需要有一個自下而上的方法，使得國家行為主體可以對國內(nèi)重要的ROI進行測量，在地區(qū)層面上可以聚合并尋找共通性，然后在國際層面上交流這些共通性?！眮碜苑▏腂orhene Chakroun 指出：“我們對ROI的討論應該解決的根本問題，例如，在沒有有助于將TVET體系分析和與其預期發(fā)展成果結合起來的適當、共享和跨部門方案時……為了解決這一問題，聯(lián)合國教科文組織以平衡和戰(zhàn)略的方式提出一種統(tǒng)合經(jīng)濟增長、社會公平和可持續(xù)發(fā)展問題的綜合分析方法。”

來自尼日利亞的Obukwor Ngozi提出：“我認為，一個跨地區(qū)的ROI框架應采用適當?shù)穆?lián)網(wǎng)，開展跨區(qū)域合作，并建立伙伴關系。還要跨區(qū)域共享知識?！?