張廣云 姜建華
摘? 要:該文按照軟件技術(shù)專業(yè)群特高建設(shè)實(shí)施方案標(biāo)準(zhǔn)和要求,構(gòu)建人工智能技術(shù)服務(wù)人才培養(yǎng)體系,包括精準(zhǔn)的人才培養(yǎng)方案、實(shí)力強(qiáng)勁的雙師團(tuán)隊(duì)、優(yōu)質(zhì)課程資源,一流的技術(shù)技能服務(wù)平臺(tái)、專業(yè)教學(xué)標(biāo)準(zhǔn)等。實(shí)時(shí)掌控學(xué)生學(xué)習(xí)狀態(tài),有針對(duì)性地向?qū)W生推送個(gè)性化學(xué)習(xí)資源,精準(zhǔn)育人,提高人才培養(yǎng)質(zhì)量。
關(guān)鍵詞:人才培養(yǎng);精準(zhǔn)育人;產(chǎn)教融合
中圖分類號(hào):C961? ? ? ?文獻(xiàn)標(biāo)志碼:A? ? ? ? ?文章編號(hào):2096-000X(2020)24-0159-04
Abstract: This article builds a talent training system of an artificial intelligence technology service in accordance with the standards and requirements of the high-level construction program of software technology professional group, including accurate talent training programs, a strong dual-team team, high-quality curriculum resources, and first-class technical platform of skills services, professional teaching standards, etc. It is also necessary to control students' learning status, targeted personalized learning resources to students, accurate education, and improve the quality of talent training.
Keywords: talent cultivation; precise education; integration of industry and education
一、概述
2019年3月,國(guó)家政府工作報(bào)告中指出要推動(dòng)人工智能等研發(fā)應(yīng)用,培育新一代信息技術(shù)等新興產(chǎn)業(yè)。作為新一輪產(chǎn)業(yè)變革的核心驅(qū)動(dòng)力和引領(lǐng)未來(lái)發(fā)展的戰(zhàn)略技術(shù),人工智能產(chǎn)業(yè)迅猛發(fā)展,急需大量的技術(shù)技能人才。
2019年4月,國(guó)家啟動(dòng)實(shí)施“雙高計(jì)劃”,指出專業(yè)群要精準(zhǔn)對(duì)接產(chǎn)業(yè)需求,提升校企合作水平,打造創(chuàng)新服務(wù)平臺(tái),融入產(chǎn)業(yè)、行業(yè)企業(yè)發(fā)展與人才培養(yǎng)。提升信息化水平,融入教學(xué)管理全過(guò)程,推動(dòng)人工智能和教育深度融合,促進(jìn)教育變革創(chuàng)新,打造人才培養(yǎng)高地,培養(yǎng)德智體美勞社會(huì)主義接班人。
研究意義:
我校于2019年在全國(guó)范圍內(nèi)率先開設(shè)了人工智能技術(shù)服務(wù)專業(yè),為了搶占人工智能專業(yè)人才培養(yǎng)高地,融入?yún)^(qū)域發(fā)展,服務(wù)中小微企業(yè),本項(xiàng)目擬在國(guó)家高水平專業(yè)群——軟件技術(shù)專業(yè)群的支撐下,以大數(shù)據(jù)和人工智能技術(shù)為支撐,校企共同構(gòu)建與實(shí)踐“產(chǎn)教融合、精準(zhǔn)育人”的人才培養(yǎng)體系,提升人才培養(yǎng)質(zhì)量。
(一)填補(bǔ)人工智能技術(shù)服務(wù)專業(yè)建設(shè)空白、發(fā)揮示范引領(lǐng)作用
人工智能技術(shù)服務(wù)專業(yè)作為2019年高職新增專業(yè),專業(yè)人才培養(yǎng)體系亟待構(gòu)建。以計(jì)算機(jī)學(xué)院在產(chǎn)教融合、協(xié)同育人等方面多年的實(shí)踐經(jīng)驗(yàn)為指導(dǎo),探索制定該專業(yè)精準(zhǔn)的人才培養(yǎng)方案,校企共同搭建技術(shù)技能創(chuàng)新服務(wù)平臺(tái),共同開發(fā)課程資源,制定專業(yè)教學(xué)標(biāo)準(zhǔn),探索提升人才培養(yǎng)質(zhì)量管理機(jī)制等,能有效填補(bǔ)該專業(yè)建設(shè)的空白,發(fā)揮示范引領(lǐng)作用。
(二)為學(xué)生提供個(gè)性化、精準(zhǔn)的教育服務(wù),是提高人才培養(yǎng)質(zhì)量的有效途徑
多渠道、全方位獲取人工智能崗位人才需求,制定精準(zhǔn)的人才培養(yǎng)方案,以企業(yè)的真實(shí)項(xiàng)目案例作為教學(xué)內(nèi)容,通過(guò)參與企業(yè)真實(shí)項(xiàng)目的研發(fā),確保學(xué)生學(xué)習(xí)內(nèi)容的有效性和精準(zhǔn)性。教學(xué)中,通過(guò)線上學(xué)習(xí)平臺(tái)獲取學(xué)生行為狀態(tài),課堂上通過(guò)智能監(jiān)控系統(tǒng)對(duì)學(xué)生的學(xué)情進(jìn)行實(shí)時(shí)采集,建立學(xué)習(xí)過(guò)程大數(shù)據(jù)系統(tǒng),把控學(xué)生學(xué)習(xí)質(zhì)量,幫助學(xué)生構(gòu)建個(gè)性化的學(xué)習(xí)路徑,為學(xué)生有針對(duì)性地推送優(yōu)質(zhì)學(xué)習(xí)資源,促進(jìn)學(xué)生的個(gè)性化發(fā)展,全面提升人才培養(yǎng)質(zhì)量。
(三)有利于提升教師教學(xué)及技能水平,打造“雙師”團(tuán)隊(duì)
實(shí)施“精準(zhǔn)育人”,首先要求教師及時(shí)掌握每個(gè)學(xué)生的學(xué)習(xí)狀況和水平,根據(jù)不同的學(xué)情,然后借助信息化和智能化手段,實(shí)施分層或分類等教學(xué),在大班級(jí)中開展個(gè)性化教學(xué),有利于教師教學(xué)水平不斷地提升。此外,實(shí)施“產(chǎn)教融合”,校企共同制定開發(fā)課程教學(xué)資源,共同編寫工作手冊(cè)、活式教材,共同組建團(tuán)隊(duì)開展項(xiàng)目研發(fā),能有效提升教師的技能水平,促進(jìn)“雙師”團(tuán)隊(duì)的形成。
(四)落實(shí)“三對(duì)接”,塑造專業(yè)特色,服務(wù)區(qū)域經(jīng)濟(jì)
“產(chǎn)教融合、精準(zhǔn)育人”是實(shí)現(xiàn)“三對(duì)接”(專業(yè)設(shè)置與產(chǎn)業(yè)需求對(duì)接、課程內(nèi)容與職業(yè)標(biāo)準(zhǔn)對(duì)接、教學(xué)過(guò)程與生產(chǎn)過(guò)程的對(duì)接)、確保專業(yè)建設(shè)與產(chǎn)業(yè)發(fā)展相適應(yīng)的有效途徑。在教學(xué)中融于信息化、智能化等技術(shù),全面提升人才培養(yǎng)質(zhì)量的同時(shí),促進(jìn)學(xué)生的個(gè)性化發(fā)展,培養(yǎng)產(chǎn)業(yè)真正需要、適銷對(duì)路的高素質(zhì)技術(shù)技能人才,既能幫助專業(yè)塑造特色,又能推動(dòng)中小傳統(tǒng)企業(yè)轉(zhuǎn)型升級(jí),為服務(wù)區(qū)域經(jīng)濟(jì)做出貢獻(xiàn)。
二、研究綜述和現(xiàn)狀分析
(一)產(chǎn)教融合研究綜述
“產(chǎn)教融合”作為職業(yè)教育與產(chǎn)業(yè)深度融合,滿足社會(huì)對(duì)技術(shù)技能型人才的需求,是促進(jìn)職業(yè)教育發(fā)展的大勢(shì)所趨。針對(duì)如何加強(qiáng)職業(yè)教育產(chǎn)教融合,實(shí)現(xiàn)產(chǎn)業(yè)鏈、教育鏈、人才鏈、創(chuàng)新鏈銜接的同時(shí),促進(jìn)區(qū)域經(jīng)濟(jì)發(fā)展是研究的熱點(diǎn)。
1. 產(chǎn)教融合內(nèi)涵。校企利用各自優(yōu)勢(shì)和資源,以信任和合約為保障,以服務(wù)經(jīng)濟(jì)轉(zhuǎn)型、協(xié)同育人為核心,以項(xiàng)目合作和技術(shù)研發(fā)、轉(zhuǎn)讓實(shí)現(xiàn)共贏為動(dòng)力,實(shí)現(xiàn)產(chǎn)業(yè)、教育內(nèi)部各要素的優(yōu)化組合,各參與主體通力合作的一種經(jīng)濟(jì)教育活動(dòng)方式,旨在建立學(xué)校與企業(yè)間練習(xí)的橋梁,使得學(xué)生畢業(yè)后就能順利走上工作崗位。
2. 產(chǎn)教融合形式。實(shí)施產(chǎn)教融合要有效地將專業(yè)建設(shè)、課程設(shè)置、師資隊(duì)伍建設(shè)、實(shí)踐平臺(tái)建設(shè)、人才培養(yǎng)模式改革與區(qū)域產(chǎn)業(yè)、行業(yè)、企業(yè)進(jìn)行人才培養(yǎng)要素對(duì)接。實(shí)施形式包括“訂單培養(yǎng)”、“工學(xué)交替”、“校中廠、廠中?!薄F(xiàn)代學(xué)徒制等。
3. 產(chǎn)教融合機(jī)制。要構(gòu)建校企定期研討協(xié)商機(jī)制、人才共育合作機(jī)制、常規(guī)管理運(yùn)行機(jī)制、項(xiàng)目紐帶運(yùn)行機(jī)制和校企文化融合運(yùn)行機(jī)制,建立互利共贏的政策引導(dǎo)激勵(lì)機(jī)制,形成政府主導(dǎo)、學(xué)校主體、行業(yè)企業(yè)深度參與的發(fā)展格局。建立產(chǎn)學(xué)研合作委員會(huì),組建職業(yè)教育聯(lián)盟,深化合作共建新模式,拓展合作途徑,促進(jìn)產(chǎn)教深度融合。
4. 產(chǎn)教融合人才培養(yǎng)。采取以崗位(群)要求確定人才培養(yǎng)方案,以職業(yè)活動(dòng)為導(dǎo)向,設(shè)計(jì)真實(shí)的企業(yè)生產(chǎn)情境,以工作過(guò)程為中心,重構(gòu)工作過(guò)程導(dǎo)向的專業(yè)課程體系,實(shí)施“教學(xué)做一體化”的教學(xué)。在現(xiàn)代學(xué)徒制人才培養(yǎng)上,則需要深化課程改革,完善教育教學(xué)模式,構(gòu)建相應(yīng)的制度體系,加強(qiáng)學(xué)校與行業(yè)企業(yè)的聯(lián)系,建立完善的內(nèi)部人才評(píng)價(jià)體系,優(yōu)化教學(xué)方法等。
5. 產(chǎn)教融合的挑戰(zhàn)。包括:與低端企業(yè)合作,導(dǎo)致校企合作不穩(wěn)定,合作效果不好,侵犯學(xué)生正當(dāng)權(quán)益;缺乏完善的制度保障、政府推力不足、企業(yè)參與動(dòng)力不足、行業(yè)指導(dǎo)職能弱化、經(jīng)費(fèi)投入難以滿足;職業(yè)院校偏重自身發(fā)展,配套政策與評(píng)價(jià)體系不足等使得企業(yè)方面缺少動(dòng)力、產(chǎn)教供需對(duì)接困難等。
(二)精準(zhǔn)育人現(xiàn)狀
廣東省2017年提出“校企精準(zhǔn)對(duì)接、精準(zhǔn)育人”的“雙精準(zhǔn)”職業(yè)教育發(fā)展策略。2019年,《廣東省職業(yè)教育“擴(kuò)容、提質(zhì)、強(qiáng)服務(wù)”三年行動(dòng)計(jì)劃(2019-2021年)》明確指出要“大力推行現(xiàn)代學(xué)徒制、訂單培養(yǎng)等‘雙精準(zhǔn)人才培養(yǎng)模式”。
“雙精準(zhǔn)”聚焦職業(yè)教育社會(huì)服務(wù)與人才培養(yǎng)兩大屬性,通過(guò)完善職業(yè)教育辦學(xué)機(jī)制,深化校企合作,分層培養(yǎng)、因材施教、精準(zhǔn)施策,使得職業(yè)院校在專業(yè)建設(shè)和人才培養(yǎng)等方面達(dá)到最佳狀態(tài),技術(shù)技能人才培養(yǎng)適銷對(duì)路。
在“精準(zhǔn)育人”實(shí)踐上,北京航空航天大學(xué)將高校育人與“互聯(lián)網(wǎng)+”深度融合,基于BBS平臺(tái),采取大數(shù)據(jù)分析技術(shù),通過(guò)對(duì)學(xué)生進(jìn)行分類別、個(gè)性化的精準(zhǔn)化指導(dǎo),從精準(zhǔn)教育政策制定、實(shí)施和反饋等方面確保精準(zhǔn)育人的實(shí)施。廣東機(jī)電職業(yè)技術(shù)學(xué)院面向粵港澳大灣區(qū)電商行業(yè),通過(guò)建立雙創(chuàng)孵化基地,成立“雙精準(zhǔn)班”,采取跟崗學(xué)習(xí)、學(xué)徒培養(yǎng)等方式,與企業(yè)共建課程,協(xié)同育人等實(shí)施精準(zhǔn)育人。中山職業(yè)技術(shù)學(xué)院面向職業(yè)發(fā)展的崗位技能需求引入職業(yè)崗位技能標(biāo)準(zhǔn),校企共同制定人才培養(yǎng)方案,共同設(shè)計(jì)課程,企業(yè)的設(shè)計(jì)、生產(chǎn)、技術(shù)創(chuàng)新要求以及企業(yè)文化素養(yǎng)等職業(yè)元素?zé)o縫引入課堂,采取“做中學(xué)、學(xué)中做”教學(xué)方式,以真實(shí)項(xiàng)目訓(xùn)練崗位技能,培養(yǎng)適合企業(yè)需求的職業(yè)素質(zhì)和崗位技能,對(duì)畢業(yè)生的求職與就業(yè)、職業(yè)發(fā)展做跟蹤調(diào)查研究,完善專業(yè)人才培養(yǎng)方案和修正專業(yè)課程教學(xué)重難點(diǎn),確保技能人才的培養(yǎng)過(guò)程精準(zhǔn)對(duì)接行業(yè)產(chǎn)業(yè)的發(fā)展趨勢(shì)和主流企業(yè)的實(shí)際需求。
(三)高職人工智能技術(shù)服務(wù)專業(yè)現(xiàn)狀
人工智能技術(shù)服務(wù)是《普通高等學(xué)校高等職業(yè)教育(??疲I(yè)目錄》2019年增補(bǔ)專業(yè),2020年開始正式實(shí)施。在專業(yè)人才培養(yǎng)上,教育部雖然簡(jiǎn)明扼要地指出了培養(yǎng)目標(biāo)、就業(yè)面向和主要的職業(yè)能力和核心課程等,但專業(yè)人才培養(yǎng)體系尚處于探索階段:缺乏明確的人才培養(yǎng)方案與課程知識(shí)體系,適合高職學(xué)習(xí)的課程資源嚴(yán)重不足,現(xiàn)有實(shí)訓(xùn)條件有待升級(jí)改造、迫切需要搭建技術(shù)技能創(chuàng)新服務(wù)平臺(tái)、制定人才培養(yǎng)質(zhì)量考核標(biāo)準(zhǔn)等。
從教育部指定的專業(yè)核心課程名稱來(lái)看,大多是研究生階段或本課程階段作為選修課程而開設(shè)。當(dāng)前,針對(duì)人工智能專業(yè)的發(fā)展,如何結(jié)合高職學(xué)生的學(xué)習(xí)特點(diǎn),制定出精準(zhǔn)的人才培養(yǎng)方案、構(gòu)建以實(shí)踐動(dòng)手為主的課程體系和實(shí)訓(xùn)環(huán)境,開發(fā)技能滿足專業(yè)教學(xué),又能為學(xué)生的個(gè)性化發(fā)展的課程教學(xué)資源等一些列問(wèn)題亟待探索解決。
三、實(shí)施方案
項(xiàng)目實(shí)施的總體思路如圖1所示。
(一)制定精準(zhǔn)的人才培養(yǎng)方案
調(diào)研人工智能行業(yè)企業(yè)、爬蟲爬取招聘網(wǎng)站,咨詢領(lǐng)域?qū)<摇⒄{(diào)研其他院校等,獲取崗位人才需求信息,歸納出適合高職學(xué)生的崗位能力與職業(yè)素養(yǎng)目標(biāo),構(gòu)建與之相適應(yīng)的知識(shí)體系,制定出人工智能技術(shù)服務(wù)專業(yè)精準(zhǔn)的人才培養(yǎng)方案。
(二)搭建產(chǎn)教融合技術(shù)技能創(chuàng)新服務(wù)平臺(tái)——人工智能應(yīng)用創(chuàng)新中心
與華為、百度、科大訊飛等一流企業(yè)建立產(chǎn)學(xué)研合作關(guān)系,共建人工智能應(yīng)用創(chuàng)新中心,面向智慧教育、推薦系統(tǒng)、圖像、音視頻處理等領(lǐng)域,共同開展智能算法應(yīng)用研究,培養(yǎng)學(xué)生AI應(yīng)用開發(fā)、智能終端技術(shù)服務(wù)能力,提升團(tuán)隊(duì)的深度學(xué)習(xí)算法構(gòu)建、模型訓(xùn)練、模型部署等技術(shù)服務(wù)能力。
(三)校企共建協(xié)同育人與創(chuàng)新團(tuán)隊(duì)
按照“內(nèi)培外引、專兼結(jié)合、互聘共培、德藝雙馨”的原則,引進(jìn)或內(nèi)部培養(yǎng)能解決技術(shù)難題、教學(xué)能力強(qiáng)的骨干教師,選派團(tuán)隊(duì)成員深入企業(yè)一線技術(shù)崗位,發(fā)現(xiàn)科研問(wèn)題、解決技術(shù)難題,提高科研水平和社會(huì)服務(wù)能力,培養(yǎng)“雙師”素質(zhì)。按照兼職教師不低于1:1的比例,聘請(qǐng)行業(yè)能工巧匠作為兼職教師。
(四)校企共同教學(xué)資源開發(fā)
按照“一體化設(shè)計(jì)、結(jié)構(gòu)化課程、顆粒化資源”的邏輯,引入企業(yè)真實(shí)項(xiàng)目案例,構(gòu)建專業(yè)教學(xué)資源庫(kù)。按照校本課程建設(shè)標(biāo)準(zhǔn)、課堂評(píng)價(jià)標(biāo)準(zhǔn)、課程實(shí)施標(biāo)準(zhǔn)、“金課”評(píng)價(jià)標(biāo)準(zhǔn)等,開發(fā)一批“金課”引領(lǐng)的優(yōu)質(zhì)課程資源,編寫系列化的工作手冊(cè)、活頁(yè)式教材。
(五)實(shí)施精準(zhǔn)育人
精準(zhǔn)育人實(shí)施過(guò)程如圖2所示。大一、大二期間,采取線上線下相結(jié)合的混合式教學(xué)方法。課前,老師根據(jù)教學(xué)目標(biāo)向?qū)W生推送學(xué)習(xí)任務(wù),學(xué)生自主學(xué)習(xí),老師統(tǒng)計(jì)學(xué)生學(xué)習(xí)狀態(tài);課堂上,老師對(duì)學(xué)生預(yù)習(xí)階段表現(xiàn)出的共性問(wèn)題進(jìn)行集中講解,對(duì)分組討論階段的問(wèn)題進(jìn)行個(gè)性化的輔導(dǎo)和答疑;課后,有針對(duì)地向?qū)W生推送作業(yè)和個(gè)性化學(xué)習(xí)資源,直至完成規(guī)定的學(xué)習(xí)目標(biāo)。
大三在人工智能應(yīng)用創(chuàng)新中心開展項(xiàng)目化教學(xué)。由校企指導(dǎo)教師團(tuán)隊(duì)提出項(xiàng)目研發(fā)需求,學(xué)生選擇崗位,完成項(xiàng)目開發(fā)任務(wù)。期間,指導(dǎo)教師根據(jù)學(xué)生實(shí)際推送學(xué)習(xí)資源,實(shí)施項(xiàng)目考核,幫助積累真實(shí)項(xiàng)目開發(fā)經(jīng)驗(yàn)。
(六)人才培養(yǎng)質(zhì)量監(jiān)控與評(píng)價(jià)
采集學(xué)習(xí)行為、學(xué)習(xí)內(nèi)容、學(xué)習(xí)效果等數(shù)據(jù),建立學(xué)習(xí)過(guò)程大數(shù)據(jù)系統(tǒng),建立學(xué)生成長(zhǎng)檔案,構(gòu)建專業(yè)技術(shù)能力畫像,建立質(zhì)量考核檔案,校企共同組建人才培養(yǎng)質(zhì)量考核小組,定期對(duì)學(xué)生進(jìn)行考核,評(píng)價(jià)學(xué)習(xí)效果,實(shí)施個(gè)性化輔導(dǎo)。對(duì)專業(yè)教學(xué)進(jìn)行客觀評(píng)價(jià),找出薄弱環(huán)節(jié),形成專業(yè)的自我診斷和改進(jìn)機(jī)制。
四、可行性分析
(一)可實(shí)施性強(qiáng)
已有產(chǎn)教融合、精準(zhǔn)育人理論和實(shí)踐研究成果是本項(xiàng)目的堅(jiān)實(shí)理論和方法基礎(chǔ)。軟件技術(shù)專業(yè)群多年來(lái)一直踐行產(chǎn)教融合、協(xié)同育人,獲得了國(guó)家級(jí)教學(xué)成果二等獎(jiǎng),為項(xiàng)目提供了實(shí)踐指導(dǎo)。
(二)政策有保障
作為“國(guó)家高水平專業(yè)群”重點(diǎn)建設(shè)專業(yè),“雙高計(jì)劃”為項(xiàng)目的實(shí)施提供了政策保障和實(shí)施依據(jù)。
(三)校企合作基礎(chǔ)良好
與華為、百度、騰訊等國(guó)際一流企業(yè)在校企共建技術(shù)技能平臺(tái)、協(xié)同創(chuàng)新與育人團(tuán)隊(duì),開發(fā)教學(xué)資源等方面達(dá)成了初步的合作意向。
(四)團(tuán)隊(duì)前期基礎(chǔ)扎實(shí)
項(xiàng)目組成員前期開展了大數(shù)據(jù)分析在專業(yè)建設(shè)領(lǐng)域的應(yīng)用、人工智能技術(shù)在智慧教育領(lǐng)域的應(yīng)用等研究,取得了一定的研究成果。
(五)項(xiàng)目建設(shè)資源有保障
軟件技術(shù)專業(yè)群擁有的國(guó)家級(jí)創(chuàng)新教學(xué)團(tuán)隊(duì)、國(guó)家級(jí)協(xié)同創(chuàng)新中心、國(guó)家精品資源課程等眾多的優(yōu)秀的教育資源將為本項(xiàng)目的實(shí)施提供良好的人力、資金、實(shí)訓(xùn)平臺(tái)和教學(xué)資源等保障。
五、結(jié)束語(yǔ)
該文按照軟件技術(shù)專業(yè)群特高建設(shè)實(shí)施方案標(biāo)準(zhǔn)和要求,構(gòu)建人工智能技術(shù)服務(wù)人才培養(yǎng)體系,包括精準(zhǔn)的人才培養(yǎng)方案、實(shí)力強(qiáng)勁的雙師團(tuán)隊(duì)、優(yōu)質(zhì)課程資源,一流的技術(shù)技能服務(wù)平臺(tái)、專業(yè)教學(xué)標(biāo)準(zhǔn)等。可以實(shí)時(shí)掌控學(xué)生學(xué)習(xí)狀態(tài),有針對(duì)性地向?qū)W生推送個(gè)性化學(xué)習(xí)資源,精準(zhǔn)育人,提高人才培養(yǎng)質(zhì)量。
參考文獻(xiàn):
[1]趙旖旎,買琳燕,劉科江.基于“中國(guó)制造2025”的職業(yè)教育校企協(xié)同育人探究[J].教育與職業(yè),2018(14):45-51.
[2]唐飛,孫沖武.高職院校完善產(chǎn)教融合推進(jìn)機(jī)制的研究——以深圳信息職業(yè)技術(shù)學(xué)院為例[J].職業(yè),2018(10):22-23.