黃美琳

（廣州新華學(xué)院，廣州 523133）

2018 年教育部辦公廳印發(fā)的《中國(guó)英語(yǔ)能力等級(jí)量表》對(duì)英語(yǔ)理解能力和表達(dá)能力做了清晰界定，同時(shí)針對(duì)各項(xiàng)能力制定對(duì)應(yīng)的自我評(píng)價(jià)量表，為大學(xué)聽(tīng)說(shuō)讀寫(xiě)譯能力教學(xué)目標(biāo)指明了方向。在信息化時(shí)代，隨著多媒體技術(shù)及移動(dòng)應(yīng)用的發(fā)展，多模態(tài)數(shù)據(jù)融合在英語(yǔ)學(xué)習(xí)中的應(yīng)用越來(lái)越廣泛。當(dāng)下網(wǎng)絡(luò)新媒體蓬勃發(fā)展，大學(xué)生肩負(fù)跨文化交流、講好中國(guó)故事的任務(wù)，大學(xué)生的英語(yǔ)聽(tīng)力理解與口語(yǔ)表達(dá)能力為拓寬職業(yè)生涯道路、傳播中國(guó)文化奠定重要基礎(chǔ)。而在現(xiàn)實(shí)的大學(xué)視聽(tīng)說(shuō)教學(xué)環(huán)節(jié)中，由于教學(xué)資源匱乏、教學(xué)設(shè)備更新不足、教學(xué)信息技術(shù)滯后等，教師很難在規(guī)劃的教學(xué)周期內(nèi)有效提高學(xué)生的聽(tīng)力理解及口頭表達(dá)能力。鑒于此，借鑒多模態(tài)數(shù)據(jù)融合學(xué)習(xí)分析理論，把多模態(tài)數(shù)據(jù)融合運(yùn)用到教學(xué)改革中，無(wú)疑是提高學(xué)生的學(xué)習(xí)效率和學(xué)習(xí)質(zhì)量的最佳途徑。

一、多模態(tài)學(xué)習(xí)分析理論與多模態(tài)數(shù)據(jù)融合教學(xué)研究綜述

在當(dāng)前數(shù)字經(jīng)濟(jì)全面發(fā)展的態(tài)勢(shì)下，高校與時(shí)俱進(jìn)、深化數(shù)字化教學(xué)改革成為推動(dòng)時(shí)代變革的重要組成力量。英語(yǔ)作為大學(xué)的公共必修課程，既要讓學(xué)生為未來(lái)的工作和深造打下英語(yǔ)語(yǔ)言基礎(chǔ)，又要讓學(xué)生拓展國(guó)際視野乃至承擔(dān)起跨文化交際的溝通作用。近些年的線上線下混合式教學(xué)經(jīng)驗(yàn)的累積，使一線英語(yǔ)教師在數(shù)字化、信息化時(shí)代背景下嘗試多模態(tài)教學(xué)模式成為可能。

（一）多模態(tài)學(xué)習(xí)分析理論與多模態(tài)數(shù)據(jù)融合語(yǔ)言學(xué)習(xí)研究

多模態(tài)學(xué)習(xí)分析是指學(xué)習(xí)分析在當(dāng)前技術(shù)環(huán)境下的新發(fā)展，使用來(lái)自物理空間和數(shù)字空間的各種數(shù)據(jù)形式，采用不同的分析方法來(lái)處理動(dòng)態(tài)產(chǎn)生的多模態(tài)數(shù)據(jù)，并利用學(xué)習(xí)情境中的行為、情感、認(rèn)知等相關(guān)理論來(lái)實(shí)現(xiàn)學(xué)習(xí)分析的目標(biāo)與價(jià)值。

趙亮在博士論文中提出：“多模態(tài)數(shù)據(jù)是指對(duì)于同一個(gè)描述對(duì)象，通過(guò)不同領(lǐng)域或視角獲取到的數(shù)據(jù)，并且把描述這些數(shù)據(jù)的每一個(gè)領(lǐng)域或視角叫作一個(gè)模態(tài)。”［1］而多模態(tài)數(shù)據(jù)融合指的是利用計(jì)算機(jī)進(jìn)行多模態(tài)數(shù)據(jù)的綜合處理，負(fù)責(zé)融合各個(gè)模態(tài)的信息來(lái)執(zhí)行目標(biāo)預(yù)測(cè)。［2］

黃立鶴在《基于多模態(tài)語(yǔ)料庫(kù)的語(yǔ)力研究：多模態(tài)語(yǔ)用學(xué)新探索》一書(shū)中指出：“交際語(yǔ)言的本質(zhì)是多模態(tài)的，語(yǔ)言研究不僅是詞句結(jié)構(gòu)和話語(yǔ)的研究，還要考慮韻律、表情、動(dòng)作等非語(yǔ)言媒介。”因此，語(yǔ)言的研究路徑包括符號(hào)學(xué)屬性的多模態(tài)研究、人機(jī)交互和學(xué)習(xí)科學(xué)中的多模態(tài)研究、神經(jīng)語(yǔ)言學(xué)的多模態(tài)研究以及多模態(tài)語(yǔ)料庫(kù)的研究。

（二）國(guó)內(nèi)外相關(guān)研究綜述

當(dāng)前學(xué)界對(duì)多模態(tài)學(xué)習(xí)分析的研究比較多，同時(shí)對(duì)基于多模態(tài)數(shù)據(jù)融合在具體領(lǐng)域里的模型設(shè)計(jì)與應(yīng)用研究也不少。其中，多模態(tài)學(xué)習(xí)分析的三大研究領(lǐng)域是“多模態(tài)感知與情緒分析、多模態(tài)數(shù)據(jù)融合與挖掘、多模態(tài)表征與對(duì)象識(shí)別”。關(guān)于語(yǔ)言方面的多模態(tài)學(xué)習(xí)研究，主要探討多模態(tài)語(yǔ)料庫(kù)構(gòu)建、多模態(tài)數(shù)據(jù)融合建模與具體學(xué)科的深度學(xué)習(xí)融合應(yīng)用。此外，關(guān)于學(xué)習(xí)數(shù)據(jù)檢測(cè)方面，研究的熱點(diǎn)“包括多模態(tài)學(xué)習(xí)數(shù)據(jù)采集與系統(tǒng)設(shè)計(jì)、多模態(tài)學(xué)習(xí)認(rèn)知與行為分析、多模態(tài)學(xué)習(xí)分析方法與工具開(kāi)發(fā)”［3-6］，從而呈現(xiàn)出從現(xiàn)代學(xué)習(xí)理論的單模態(tài)數(shù)據(jù)檢測(cè)轉(zhuǎn)向多模態(tài)數(shù)據(jù)表征檢測(cè)，更加全面、準(zhǔn)確地了解學(xué)習(xí)過(guò)程，并對(duì)各種數(shù)據(jù)源和模式進(jìn)行分析。

二、多模態(tài)數(shù)據(jù)融合在大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)中的應(yīng)用

（一）影響大學(xué)英語(yǔ)視聽(tīng)說(shuō)能力認(rèn)知的范疇

多模態(tài)數(shù)據(jù)融合對(duì)英語(yǔ)聽(tīng)力能力認(rèn)知產(chǎn)生深刻而全面的影響，通過(guò)融合多模態(tài)數(shù)據(jù)研究，不僅可以提高英語(yǔ)聽(tīng)力認(rèn)知的效果，還可以比較不同模態(tài)數(shù)據(jù)融合方式的效果差異，探討多模態(tài)數(shù)據(jù)融合在英語(yǔ)聽(tīng)力學(xué)習(xí)中的應(yīng)用價(jià)值，為師生提供全面的學(xué)習(xí)反饋。在研究多模態(tài)數(shù)據(jù)融合對(duì)英語(yǔ)視聽(tīng)說(shuō)認(rèn)知的綜合提高效果中，我們通過(guò)比較不同模態(tài)數(shù)據(jù)融合方式的效果差異，探討多模態(tài)數(shù)據(jù)融合在英語(yǔ)聽(tīng)力與閱讀學(xué)習(xí)中的應(yīng)用價(jià)值。

（二）實(shí)現(xiàn)教學(xué)方案和教學(xué)材料設(shè)計(jì)的最優(yōu)化

把多模態(tài)數(shù)據(jù)融合理論具體化到英語(yǔ)聽(tīng)力與閱讀教學(xué)中，通過(guò)設(shè)計(jì)相應(yīng)的教學(xué)方案和教學(xué)材料，探索多模態(tài)數(shù)據(jù)融合在英語(yǔ)聽(tīng)力與閱讀教學(xué)中的最佳實(shí)踐，為英語(yǔ)學(xué)習(xí)者提供更加高效、便捷、有趣的學(xué)習(xí)方法。多模態(tài)數(shù)據(jù)融合是一種結(jié)合多種數(shù)據(jù)源的技術(shù)，如音頻、視頻和文本，以提供對(duì)特定現(xiàn)象的更全面的理解。在大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)中，多模態(tài)數(shù)據(jù)融合可為學(xué)生提供一個(gè)更具沉浸式和互動(dòng)性的環(huán)境來(lái)增強(qiáng)學(xué)生的學(xué)習(xí)體驗(yàn)。在大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)課中，多模態(tài)數(shù)據(jù)融合的一個(gè)特殊用途是將母語(yǔ)使用者的視頻和錄音整合到課程中。通過(guò)使用這些錄音，學(xué)生可以在現(xiàn)實(shí)生活中聽(tīng)和觀看母語(yǔ)者的說(shuō)話，以便幫助提高自己的發(fā)音、語(yǔ)調(diào)和對(duì)語(yǔ)言的整體理解。另一種應(yīng)用是文本和音頻材料的整合，例如，教師可以為學(xué)生提供錄音記錄，以幫助他們理解錄音中使用的語(yǔ)言結(jié)構(gòu)和詞匯。通過(guò)結(jié)合文本和音頻材料，學(xué)生可以更全面地發(fā)展他們的聽(tīng)力和口語(yǔ)技能。多模態(tài)數(shù)據(jù)融合也可以用來(lái)創(chuàng)建交互式學(xué)習(xí)活動(dòng)，如虛擬角色扮演游戲或模擬情景。這些活動(dòng)可以為學(xué)生提供更具沉浸感和吸引力的學(xué)習(xí)體驗(yàn)，幫助他們以更自然和真實(shí)的方式發(fā)展視聽(tīng)說(shuō)能力。

（三）完善大學(xué)英語(yǔ)視聽(tīng)說(shuō)學(xué)習(xí)的多元化評(píng)價(jià)體系

由于不同國(guó)家及地區(qū)的語(yǔ)音、語(yǔ)調(diào)和文化背景的差異，英語(yǔ)聽(tīng)力理解和口語(yǔ)交流的認(rèn)知難度都很大。多模態(tài)數(shù)據(jù)融合理論可以通過(guò)豐富的語(yǔ)料庫(kù)及教學(xué)呈現(xiàn)方式，在有效提高大學(xué)英語(yǔ)視聽(tīng)說(shuō)學(xué)習(xí)教學(xué)效果的同時(shí)，通過(guò)豐富評(píng)價(jià)指標(biāo)、促進(jìn)個(gè)性化評(píng)價(jià)和學(xué)生的綜合能力、提高反饋效果等方面來(lái)實(shí)現(xiàn)多模態(tài)的多元評(píng)價(jià)體系的完善。

在豐富評(píng)價(jià)指標(biāo)方面，多模態(tài)數(shù)據(jù)融合理論可以將不同類型的數(shù)據(jù)綜合起來(lái)，如語(yǔ)音、視頻、文本等，從多個(gè)角度對(duì)學(xué)生的視聽(tīng)說(shuō)能力進(jìn)行評(píng)價(jià)，從而豐富評(píng)價(jià)指標(biāo)，提高評(píng)價(jià)的全面性和準(zhǔn)確性。在個(gè)性化評(píng)價(jià)方面，多模態(tài)數(shù)據(jù)融合理論可以基于學(xué)生的個(gè)性化需求和學(xué)習(xí)情況，對(duì)不同學(xué)生采用不同的評(píng)價(jià)方式和標(biāo)準(zhǔn)，從而實(shí)現(xiàn)個(gè)性化評(píng)價(jià)，促進(jìn)學(xué)生的個(gè)性化學(xué)習(xí)和發(fā)展。在促進(jìn)學(xué)生的綜合能力方面，多模態(tài)數(shù)據(jù)融合理論可以將不同類型的數(shù)據(jù)融合起來(lái)，從而促進(jìn)學(xué)生的綜合能力的發(fā)展，如語(yǔ)言表達(dá)能力、情感表達(dá)能力、思維能力等，從而提高學(xué)生的視聽(tīng)說(shuō)能力和綜合素質(zhì)。在提高反饋效果方面，多模態(tài)數(shù)據(jù)融合理論可以將不同類型的數(shù)據(jù)綜合起來(lái)，從多個(gè)角度對(duì)學(xué)生的視聽(tīng)說(shuō)能力進(jìn)行評(píng)價(jià)，從而提高反饋的準(zhǔn)確性和針對(duì)性，為學(xué)生提供更加有效的反饋，促進(jìn)其提高視聽(tīng)說(shuō)能力。

三、構(gòu)建多模態(tài)語(yǔ)料庫(kù)工具的視聽(tīng)說(shuō)教學(xué)模式

根據(jù)《中國(guó)英語(yǔ)能力等級(jí)量表》的指標(biāo)體系，構(gòu)建多模態(tài)語(yǔ)料庫(kù)工具的視聽(tīng)說(shuō)教學(xué)模式，是實(shí)現(xiàn)大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)質(zhì)量提升的基礎(chǔ)。初步構(gòu)建多模態(tài)數(shù)據(jù)語(yǔ)料庫(kù)的大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)模型將包括以下多個(gè)步驟。

（1）收集數(shù)據(jù)。收集包含音頻、視頻和文本數(shù)據(jù)的多模態(tài)數(shù)據(jù)語(yǔ)料庫(kù)。語(yǔ)料庫(kù)應(yīng)該包括各種真實(shí)的材料，如對(duì)話、講座、采訪和新聞廣播，讓學(xué)生接觸到不同類型的英語(yǔ)語(yǔ)言情景及文化口音語(yǔ)境，更加直觀真實(shí)地體驗(yàn)英語(yǔ)的運(yùn)用。

（2）開(kāi)發(fā)多模態(tài)教學(xué)模式。開(kāi)發(fā)一個(gè)包含多模態(tài)數(shù)據(jù)語(yǔ)料庫(kù)的教學(xué)模式，需為學(xué)生設(shè)計(jì)全面的學(xué)習(xí)經(jīng)驗(yàn)，包括整套分層次的視聽(tīng)說(shuō)練習(xí)、反饋和評(píng)估環(huán)節(jié)。整個(gè)環(huán)節(jié)是可持續(xù)循環(huán)、相互促進(jìn)的，反饋和評(píng)估對(duì)進(jìn)一步豐富語(yǔ)料庫(kù)的練習(xí)起到促進(jìn)作用，多模態(tài)語(yǔ)料庫(kù)的豐富也為練習(xí)的準(zhǔn)確度、評(píng)估的全面性提供更堅(jiān)實(shí)的基礎(chǔ)。

（3）數(shù)據(jù)預(yù)處理。對(duì)收集到的數(shù)據(jù)進(jìn)行預(yù)處理，以確保其質(zhì)量適合在教學(xué)模式中使用，包括整理數(shù)據(jù)，將其分割成更小的單元，并使用相關(guān)信息對(duì)其進(jìn)行注釋，如情境中會(huì)話者的信息、主題情緒和態(tài)度等。數(shù)據(jù)預(yù)處理階段應(yīng)根據(jù)整個(gè)系統(tǒng)評(píng)估指標(biāo)體系進(jìn)行數(shù)據(jù)分層整理，如詞匯量、話題難易度、語(yǔ)速等多種具體的指標(biāo)進(jìn)行單元分層與歸類。

（4）集成多模態(tài)數(shù)據(jù)語(yǔ)料庫(kù)。多模態(tài)數(shù)據(jù)語(yǔ)料庫(kù)應(yīng)該以支持學(xué)習(xí)目標(biāo)和活動(dòng)的方式集成到教學(xué)模式中，具體可根據(jù)校本教材選取符合該校學(xué)生水平的語(yǔ)料。例如，音頻和視頻錄音可用于提供聽(tīng)力練習(xí)，而文本記錄和文本數(shù)據(jù)可用于提高聽(tīng)力理解和專題性口語(yǔ)表達(dá)。

（5）提供反饋和評(píng)估。教學(xué)模式應(yīng)包括反饋和評(píng)估機(jī)制，為學(xué)生提供關(guān)于他們的聽(tīng)力、復(fù)述和演講技能的個(gè)性化反饋。這可以通過(guò)自動(dòng)語(yǔ)音識(shí)別、自然語(yǔ)言處理和機(jī)器學(xué)習(xí)算法來(lái)實(shí)現(xiàn)。學(xué)生根據(jù)語(yǔ)料庫(kù)中分層的訓(xùn)練模塊，針對(duì)學(xué)習(xí)反饋結(jié)果提高訓(xùn)練難度，將達(dá)到全面提高的效果。

（6）評(píng)估教學(xué)模式。使用各種指標(biāo)來(lái)評(píng)估教學(xué)模式的有效性，如學(xué)生的訓(xùn)練結(jié)果、參與度和滿意度。該模型應(yīng)根據(jù)評(píng)價(jià)結(jié)果進(jìn)行改進(jìn)，以確保滿足學(xué)生的個(gè)性需求，支持不同學(xué)生的學(xué)習(xí)目標(biāo)。

通過(guò)以上步驟，對(duì)數(shù)據(jù)進(jìn)行收集和預(yù)處理、開(kāi)發(fā)教學(xué)模型、集成多模態(tài)數(shù)據(jù)語(yǔ)料庫(kù)等，最終建立基于多模態(tài)數(shù)據(jù)語(yǔ)料庫(kù)工具的英語(yǔ)視聽(tīng)說(shuō)教學(xué)模型，再通過(guò)反饋和評(píng)估以確保模型的有效性。

四、多模態(tài)數(shù)據(jù)融合大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)評(píng)價(jià)系統(tǒng)

（一）多模態(tài)數(shù)據(jù)融合大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)評(píng)價(jià)系統(tǒng)的應(yīng)用

在大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)中，多模態(tài)學(xué)習(xí)分析理論可以用于跟蹤和分析學(xué)生的視聽(tīng)說(shuō)理解技能，并提供個(gè)性化的反饋，強(qiáng)化并提高學(xué)習(xí)效果。英語(yǔ)視聽(tīng)說(shuō)中的多模態(tài)學(xué)習(xí)分析可以包括各種數(shù)據(jù)源，如錄音、成績(jī)單、學(xué)時(shí)追蹤數(shù)據(jù)和自我報(bào)告的反饋等。這些數(shù)據(jù)源可以用來(lái)識(shí)別學(xué)生視聽(tīng)說(shuō)學(xué)習(xí)行為的模式和趨勢(shì)，如識(shí)別關(guān)鍵信息的能力、注意力的持續(xù)時(shí)間以及處理口語(yǔ)的能力。

使用多模態(tài)學(xué)習(xí)分析理論下的分層教學(xué)，教師可以根據(jù)學(xué)生個(gè)人的視聽(tīng)技能為學(xué)生提供個(gè)性化的反饋。學(xué)生在努力識(shí)別關(guān)鍵信息的時(shí)候，教師可以提供額外的練習(xí)或?qū)W習(xí)建議，進(jìn)而提高他們的視聽(tīng)說(shuō)技巧。例如，《全新版大學(xué)英語(yǔ)視聽(tīng)說(shuō)教程2》關(guān)于“climate change”（氣候變化）的主題單元，教師可以教材中配置的視頻作為第一層級(jí)模塊訓(xùn)練，訓(xùn)練后如果沒(méi)能達(dá)到口頭復(fù)述的效果，課后再推送微信公眾號(hào)搜索到的關(guān)于“Green house effect”（溫室效應(yīng)）的視頻給學(xué)生，同時(shí)需要設(shè)計(jì)與視頻相關(guān)的關(guān)鍵問(wèn)題以便學(xué)生能順利回憶起與話題相關(guān)的關(guān)鍵知識(shí)點(diǎn)和詞匯，要求學(xué)生在平臺(tái)進(jìn)行口頭回答，以此實(shí)現(xiàn)英語(yǔ)視聽(tīng)說(shuō)運(yùn)用能力的提升。多模態(tài)學(xué)習(xí)分析理論還可以用來(lái)跟蹤學(xué)生在一段時(shí)間內(nèi)的進(jìn)步，并確定是否需要額外支持的學(xué)習(xí)模塊。除了提高學(xué)生的表現(xiàn)，多模態(tài)學(xué)習(xí)分析理論還可以用于教學(xué)實(shí)踐反饋及改革。通過(guò)分析多個(gè)來(lái)源的數(shù)據(jù)，教師可以深入了解教學(xué)方法的有效性，并根據(jù)需要進(jìn)行適當(dāng)調(diào)整。

（二）多模態(tài)數(shù)據(jù)融合對(duì)大學(xué)英語(yǔ)視聽(tīng)說(shuō)學(xué)習(xí)評(píng)價(jià)體系的完善

多模態(tài)數(shù)據(jù)融合學(xué)習(xí)分析理論有助于完善大學(xué)英語(yǔ)視聽(tīng)說(shuō)學(xué)習(xí)評(píng)價(jià)體系的多元化，具體可以從以下三個(gè)方面得到體現(xiàn)。

首先，評(píng)價(jià)數(shù)據(jù)類型的多樣化。采用多種不同類型的數(shù)據(jù)，如語(yǔ)音、視頻、文本等，綜合評(píng)價(jià)學(xué)生的視聽(tīng)說(shuō)能力，從而提高評(píng)價(jià)的全面性和準(zhǔn)確性。其次，評(píng)價(jià)數(shù)據(jù)來(lái)源的多元化。從不同來(lái)源獲取數(shù)據(jù)，如學(xué)生錄制的語(yǔ)音和視頻、教師提供的范例等，以確保數(shù)據(jù)的多樣性和可靠性。最后，評(píng)價(jià)指標(biāo)的多樣化。根據(jù)不同類型的數(shù)據(jù)，設(shè)計(jì)相應(yīng)的評(píng)價(jià)指標(biāo)，如語(yǔ)音數(shù)據(jù)可以評(píng)價(jià)發(fā)音的準(zhǔn)確性、語(yǔ)調(diào)的抑揚(yáng)頓挫等，視頻數(shù)據(jù)可以評(píng)價(jià)肢體語(yǔ)言、面部表情等，從而實(shí)現(xiàn)評(píng)價(jià)指標(biāo)的多樣化。

通過(guò)以上三個(gè)層面的多種數(shù)據(jù)融合，用加權(quán)平均、主成分分析等方法，教師可將不同類型的數(shù)據(jù)綜合起來(lái)，得到更加全面而準(zhǔn)確的評(píng)價(jià)結(jié)果，再根據(jù)評(píng)價(jià)結(jié)果的反饋進(jìn)行個(gè)性化評(píng)價(jià)調(diào)整，即根據(jù)學(xué)生的個(gè)性化需求和學(xué)習(xí)情況，采用不同的評(píng)價(jià)方式和標(biāo)準(zhǔn)，如針對(duì)不同學(xué)生的語(yǔ)音難點(diǎn)，結(jié)合分層教學(xué)設(shè)置相應(yīng)的評(píng)價(jià)指標(biāo)和標(biāo)準(zhǔn)，從而實(shí)現(xiàn)個(gè)性化評(píng)價(jià)。

（三）多模態(tài)數(shù)據(jù)融合學(xué)習(xí)評(píng)價(jià)體系對(duì)視聽(tīng)說(shuō)教學(xué)改革的促進(jìn)

通過(guò)多模態(tài)數(shù)據(jù)融合的大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)評(píng)價(jià)結(jié)果反饋，教師能得到客觀且綜合的教學(xué)效果反饋，對(duì)推動(dòng)教學(xué)改革有較大的實(shí)踐意義。

第一，多模態(tài)語(yǔ)料庫(kù)要求增加多元化的學(xué)習(xí)材料，即提供多種不同類型和難度的視聽(tīng)說(shuō)材料，以滿足不同學(xué)生的學(xué)習(xí)需求和興趣。大學(xué)教師可以教研室、課題組等為依托，搜集整合相關(guān)視聽(tīng)說(shuō)語(yǔ)料，上傳到學(xué)校教學(xué)平臺(tái)，實(shí)現(xiàn)線上線下混合教學(xué)。

第二，將促使教師采用多樣化的教學(xué)方式方法，如小組討論、角色扮演、辯論等，以提高學(xué)生的互動(dòng)和參與度，培養(yǎng)他們的口語(yǔ)表達(dá)能力。

第三，采集多模態(tài)的學(xué)習(xí)數(shù)據(jù)，會(huì)增加個(gè)性化的學(xué)習(xí)體驗(yàn)，并根據(jù)學(xué)生的學(xué)習(xí)情況和需求，提供個(gè)性化的教學(xué)方案和學(xué)習(xí)支持，如輔導(dǎo)、答疑、課內(nèi)外小測(cè)等，以促進(jìn)學(xué)生的自主學(xué)習(xí)和終身學(xué)習(xí)。

第四，將要求教師的教學(xué)全過(guò)程需結(jié)合各種現(xiàn)代化的教學(xué)技術(shù)手段，如在線學(xué)習(xí)平臺(tái)、移動(dòng)學(xué)習(xí)應(yīng)用、虛擬教室等，為學(xué)生提供更加豐富、便捷和靈活的學(xué)習(xí)渠道和方式。

第五，將加強(qiáng)評(píng)估和反饋。多模態(tài)數(shù)據(jù)融合的大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)評(píng)價(jià)能建立有效的評(píng)估和反饋機(jī)制，及時(shí)了解學(xué)生的學(xué)習(xí)情況和進(jìn)展，為學(xué)生提供針對(duì)性的指導(dǎo)和建議，以幫助他們更好地提高視聽(tīng)說(shuō)能力。

五、結(jié)語(yǔ)

從多模態(tài)數(shù)據(jù)融合視角探索大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)多模態(tài)融合教學(xué)的創(chuàng)新模式，提出該模式的基本模型構(gòu)建與對(duì)應(yīng)的評(píng)價(jià)系統(tǒng)。在建立多模態(tài)數(shù)據(jù)語(yǔ)料庫(kù)工具的英語(yǔ)視聽(tīng)說(shuō)教學(xué)模型基礎(chǔ)上，多模態(tài)數(shù)據(jù)融合理論可以通過(guò)多種數(shù)據(jù)類型和來(lái)源的多樣化、數(shù)據(jù)融合方法的多樣化、評(píng)價(jià)指標(biāo)的多樣化和個(gè)性化評(píng)價(jià)而實(shí)現(xiàn)對(duì)學(xué)生視聽(tīng)說(shuō)能力的全面和準(zhǔn)確的評(píng)價(jià)，完善大學(xué)英語(yǔ)視聽(tīng)說(shuō)學(xué)習(xí)評(píng)價(jià)體系的多元化，最終促進(jìn)學(xué)生視聽(tīng)說(shuō)能力的提高。而完善大學(xué)英語(yǔ)視聽(tīng)說(shuō)學(xué)習(xí)評(píng)價(jià)體系的多元化，需要結(jié)合多種手段和策略，以滿足不同學(xué)生的學(xué)習(xí)需求、提高學(xué)習(xí)效果。因此，多模態(tài)數(shù)據(jù)融合的大學(xué)英語(yǔ)視聽(tīng)說(shuō)教學(xué)研究是一個(gè)良性的可持續(xù)的能在每一環(huán)節(jié)相互促進(jìn)的循環(huán)過(guò)程。