摘" 要：通過引入多模態(tài)交互方式為傳統(tǒng)羽毛球?qū)W習(xí)訓(xùn)練器材賦能，可解決學(xué)員在訓(xùn)練中感知不強的問題，提高學(xué)員的學(xué)習(xí)效率。文章在使用情境任務(wù)分析法時發(fā)現(xiàn)學(xué)員在學(xué)習(xí)羽毛球的任務(wù)流程中動作通道與感官模態(tài)存在不合理的資源競爭問題，而這是影響學(xué)員學(xué)習(xí)效率的主要原因。文章提出了依托于多模態(tài)交互模型的設(shè)計策略，并提出了設(shè)計實例。最終結(jié)果表明：建立多模態(tài)平衡機制，將多模態(tài)交互的方式引入羽毛球?qū)W習(xí)訓(xùn)練器材和訓(xùn)練方法中，可以通過降低學(xué)員在學(xué)習(xí)時的認知負荷來提升學(xué)員的學(xué)習(xí)效率。

關(guān)鍵詞：產(chǎn)品設(shè)計；羽毛球訓(xùn)練器材；情境任務(wù)分析法；多模態(tài)交互

隨著生活經(jīng)濟水平的提高，人們逐漸從對基本生活需求的滿足轉(zhuǎn)向?qū)Ω哔|(zhì)量生活和幸福感的追求，越來越多的人選擇將體育運動作為自己的健康幸福生活的活動，其中羽毛球的地位越來越重要，它作為全民適宜的體育運動也被逐漸納入中考體育范圍，因此也帶來了羽毛球教育培訓(xùn)行業(yè)的蓬勃發(fā)展。羽毛球運動屬于入門簡單，但精進難度高的小球運動，學(xué)員系統(tǒng)學(xué)習(xí)難度較大，而且當前國內(nèi)培訓(xùn)市場處于發(fā)展階段，教學(xué)方式和教具都不夠成熟，教練員主要以手把手教的簡單方式教學(xué)，教練員水平參差不齊，難以標準化教學(xué)，因此，可以設(shè)計出一款人機交互設(shè)備，將科學(xué)訓(xùn)練標準和教練員經(jīng)驗相結(jié)合，讓科技輔佐教育，提高效率。通過使用多模態(tài)交互技術(shù)設(shè)計一款訓(xùn)練器件應(yīng)用在體育教育培訓(xùn)行業(yè)上，可以降低學(xué)員的認知負荷和學(xué)習(xí)難度，同時提高學(xué)員的學(xué)習(xí)效率和規(guī)范羽毛球行業(yè)的培訓(xùn)標準，對羽毛球行業(yè)乃至其他小球類運動均會起到非常大的積極作用。

一、研究背景

（一）行業(yè)發(fā)展

據(jù)中研普華產(chǎn)業(yè)院研究報告－數(shù)據(jù)顯示2021—2023年全國羽毛球館市場規(guī)模由237.2億元上升到291.8億元，全國羽毛球館行業(yè)從業(yè)人員規(guī)模由69.7萬人上升到78.1萬人，羽毛球運動項目已逐漸納入中考體育范圍。由于其對青少年兒童駝背、眼睛近視等問題有很好的緩解作用，且沒有肢體碰撞，安全性較高，因此備受家長青睞?！?022年中國羽毛球培訓(xùn)行業(yè)分析報告——行業(yè)規(guī)模與發(fā)展趨勢預(yù)測》報告顯示，在為孩子選擇體育培訓(xùn)項目時，羽毛球已成為第二大受歡迎的選擇，占比達到21.3%。因此羽毛球培訓(xùn)市場也在蓬勃發(fā)展[1]。調(diào)研發(fā)現(xiàn)市場上參加羽毛球培訓(xùn)的學(xué)員區(qū)別于專業(yè)體校學(xué)生，他們沒有足夠多的時間和精力練習(xí)，因此培訓(xùn)機構(gòu)也無法完全使用專業(yè)體育學(xué)校的教學(xué)方式。國內(nèi)的培訓(xùn)機構(gòu)也都不夠成熟，各羽毛球培訓(xùn)機構(gòu)使用的輔助訓(xùn)練器材大多都是機構(gòu)簡單自行定制（如圖1）。輔助訓(xùn)練器材雖然在學(xué)習(xí)羽毛球的過程中不可或缺，但是其專業(yè)性和統(tǒng)一性卻沒有被重視起來[2]。

（二）學(xué)習(xí)流程

初學(xué)者學(xué)習(xí)羽毛球流程指的是學(xué)員在羽毛球培訓(xùn)班主要的上課內(nèi)容，其中教練員講解、學(xué)員使用輔助器材練習(xí)、教練員糾正動作這些流程是課程的基本步驟，其中學(xué)員使用輔助器材練習(xí)是上課環(huán)節(jié)的關(guān)鍵環(huán)節(jié)[3]。學(xué)員需要使用訓(xùn)練輔助器材不斷重復(fù)教練員演示的擊球動作，形成肌肉記憶，從而學(xué)會打羽毛球的專業(yè)動作，達到學(xué)習(xí)目的[4]。學(xué)員在學(xué)習(xí)羽毛球運動時首先需要學(xué)習(xí)專業(yè)的擊球動作，而學(xué)員在模仿教練員動作講解、使用輔助器材練習(xí)以及通過教練員糾正改正練習(xí)動作時以單模態(tài)交互方式為主，很難判斷視角外的自身肢體動作幅度。因此這種學(xué)習(xí)模式容易加重學(xué)員的認知負荷，使學(xué)習(xí)效率低下[5]。

情境任務(wù)分析法（Contextual Task Analysis）是一種任務(wù)分析方法，它著重于理解任務(wù)在特定情境下的執(zhí)行過程、要求和影響因素。情境任務(wù)分析法的目標是深入了解任務(wù)執(zhí)行者與其工作環(huán)境之間的相互作用，以及環(huán)境對任務(wù)執(zhí)行的影響。在上課培訓(xùn)流程中，學(xué)員的行為與教練、輔助器材等邏輯關(guān)系較復(fù)雜，因此，運用情境任務(wù)分析法分析學(xué)員上課的關(guān)鍵步驟，能夠研究學(xué)員行為特征并分析其中存在的問題[6]。

表1為羽毛球培訓(xùn)過程中學(xué)習(xí)過程，使用情景任務(wù)分析法來拆解學(xué)員的任務(wù)目標，可以分為四個部分。1.看教練員演示動作，聽教練員講解關(guān)鍵點，這是最基礎(chǔ)的接收信息的過程，而其中主要參與模態(tài)為眼睛和耳朵，在此階段學(xué)員可以簡單地觀察學(xué)習(xí)，認知負荷在可承受范圍之內(nèi)。2.觀察并挪動輔助器材，使自身和輔助器材處于合理位置，此時屬于學(xué)員初步學(xué)習(xí)階段，只需要眼睛和肢體參與即可，但這個階段教練員的教育水平非常關(guān)鍵，讓學(xué)員站在固定合理的點位才能使學(xué)員充分感受發(fā)力，順利進行下一步訓(xùn)練。3.使用教練員講解的專業(yè)擊球動作，使用輔助器材練習(xí)，這個階段雖然只需要學(xué)員眼睛和肢體的參與，但是復(fù)雜的信息加工階段，學(xué)員需要對第一部分的輸入信息進行思考加工，還需要自身行為訓(xùn)練的配合，對于較小年齡的小孩而言，認知負擔相對較重。4.通過教練員糾正，學(xué)員改正錯誤動作繼續(xù)練習(xí)，這是最后一部分的反饋接收改正階段，在此階段教練員需要時刻觀察學(xué)員練習(xí)姿勢和心理狀態(tài)如何，及時提出訓(xùn)練意見。

在上述的羽毛球培訓(xùn)學(xué)習(xí)過程中，我們可以分析發(fā)現(xiàn)教練員的經(jīng)驗和規(guī)范化教學(xué)非常重要。學(xué)員在使用輔助器材練習(xí)擊球動作時，既要注意自身擊球動作是否規(guī)范，又要注意與訓(xùn)練器材的動作交互并且還要聽從教練員的糾正，所以對于教學(xué)和受教的雙方而言，在學(xué)習(xí)開始階段的負擔很重。因此教練員初始規(guī)范化教學(xué)負擔重，學(xué)員感官模態(tài)和動作姿勢競爭造成認知負荷過重導(dǎo)致效率低下，均是有待解決的問題。

（三）多模態(tài)交互

多模態(tài)交互（Multimodal Interaction）是指在人與計算機的交互過程中，利用多種感官通道或輸入方式（如視覺、聽覺、觸覺等）同時進行信息交流與處理的技術(shù)。隨著電子產(chǎn)品的不斷發(fā)展，相比傳統(tǒng)的單模態(tài)交互（如僅通過鍵盤輸入或語音指令），多模態(tài)交互逐漸成為人機交互的發(fā)展趨勢[7]。作為一種新型人機交互方式，多模態(tài)交互并非多個模態(tài)的簡單疊加，而是通過各模態(tài)配合實現(xiàn)比單一模態(tài)更高效、自然的人機對話。國內(nèi)外學(xué)者開展了關(guān)于多模態(tài)交互的研究，例如Nuovo等提出面向高齡用戶的多模態(tài)輸入界面，并通過試驗證明多模態(tài)輸入方式可為用戶提供有效的認知補償[8]；李善青設(shè)計了一套由穿戴計算機、立體視覺機、無線麥克和頭戴顯示器組成的交互穿戴系統(tǒng)，通過利用多模態(tài)交互中視覺和聽覺通道的互補性和可并行性，提高了整套系統(tǒng)的運行效率[9]；邵幫麗等將多模態(tài)交互方法應(yīng)用于智能家居場景，提升了人機交互精確性和順暢性[10]。多模態(tài)交互還被運用于增強現(xiàn)實等應(yīng)用領(lǐng)域，以實現(xiàn)高效、自然的人機對話，如易心武等基于神經(jīng)科學(xué)和運動學(xué)的角度劃分視線轉(zhuǎn)移，結(jié)合頭動的穩(wěn)定性與眼動的高效性以及頭眼協(xié)調(diào)特征設(shè)計了一個頭眼協(xié)調(diào)交互模型，通過多模態(tài)相互作用減少Midas誤觸和識別用戶意圖，與傳統(tǒng)交互模態(tài)相比，其交互模型具有更高的精度、更快的時間效率和更高的自然度[11]。

多模態(tài)交互利用人類的不同感覺通道，使用戶運用更加自然的交互方式與產(chǎn)品協(xié)作，是增強現(xiàn)實人機交互的主要形式，也是未來人機交互的發(fā)展重心[12]。通過綜合運用多感官優(yōu)勢而形成的多模態(tài)交互信息互補形式，不僅可降低學(xué)員在學(xué)習(xí)訓(xùn)練場景下的認知負荷為用戶提供認知補償，還能有效提升交互的自然性。后文將針對學(xué)員在學(xué)習(xí)存在的感官模態(tài)和動作資源不合理競爭問題提出多模態(tài)交互模型以及設(shè)計策略，并構(gòu)建羽毛球訓(xùn)練器材的系統(tǒng)設(shè)計，以提高學(xué)員的學(xué)習(xí)效率。

二、多模態(tài)交互模型與設(shè)計策略

（一）多模態(tài)交互模型

多模態(tài)交互模型指的是能夠處理多種不同類型輸入（例如文字、語音、圖像等）和輸出的交互模型。這種模型可以同時處理來自不同傳感器或資源的信息，并且能夠?qū)⑦@些信息整合起來以進行更加全面和智能的交互。其主要包含用戶層、產(chǎn)品層和交互層（如圖2），信息在這三個層面中被加工處理以及流通。多模態(tài)交互通過整合多種感官輸入和輸出方式，使交互過程更加自然、靈活和高效，提升了人機交互的整體體驗和應(yīng)用廣度[13]。

1.用戶層。用戶層主要包括用戶的感覺通道和效應(yīng)通道，用戶通過感覺通道接收產(chǎn)品發(fā)出的信息，再通過效應(yīng)通道做出相關(guān)反應(yīng)傳遞給產(chǎn)品完成相應(yīng)的交互行為。

2.交互層。交互層是整個多模態(tài)交互模型的核心層面，其功能主要將不同模態(tài)的信息整合處理，進行系統(tǒng)的決策和分析，形成輸入和輸出的信息映射。

3.產(chǎn)品層。產(chǎn)品層包含輸入設(shè)備和輸出設(shè)備，輸入設(shè)備接收來自用戶和環(huán)境的信息傳遞給交互層，輸出設(shè)備將交互層處理好的信息采用多模態(tài)的方式傳遞給用戶相對應(yīng)的感覺通道。

在交互層中信息從輸入設(shè)備流入經(jīng)過多模態(tài)交互處理后由輸出設(shè)備傳遞給用戶。信息沿用戶層交互層和產(chǎn)品層循環(huán)傳遞工作。該模型可以梳理多模態(tài)交互中信息處理和加工的過程，有助于為后續(xù)的交互設(shè)計提出設(shè)計策略[14]。

（二）設(shè)計策略

基于多模態(tài)交互模型，可在產(chǎn)品層和交互層提出設(shè)計策略。在產(chǎn)品層的信息輸入階段，增加傳感器拓寬獲取信息的效應(yīng)通道；在交互層的信息處理階段實時跟蹤分析用戶使用過程中的情景數(shù)據(jù)，并輸出用戶需要的特征信息；在產(chǎn)品層的信息輸出階段選擇合理分配輸出模態(tài)，在合適的情景為用戶提供合理的融合信息以保持用戶正常的認知負荷。

三、羽毛球智能學(xué)習(xí)器多模態(tài)交互設(shè)計

（一）羽毛球智能學(xué)習(xí)器設(shè)計

學(xué)習(xí)器從虛擬現(xiàn)實結(jié)合出發(fā)，保留傳統(tǒng)學(xué)習(xí)架觸感反饋的同時增加VR設(shè)備增強學(xué)員的視覺模態(tài)。學(xué)習(xí)器包括學(xué)習(xí)架、VR眼鏡和內(nèi)外部攝像頭三個部分組成。學(xué)員佩戴VR頭戴設(shè)備練習(xí)。場地設(shè)備立于學(xué)員右側(cè)，攝像頭固定在學(xué)員正前方（如圖3）。

學(xué)員的VR眼鏡虛構(gòu)出場地的虛擬景象并提供標準學(xué)習(xí)動作的指令，在發(fā)送揮拍指令后虛擬環(huán)境模擬出羽毛球向?qū)W員飛來，學(xué)員向虛擬揮拍后擊打在懸掛的小球上。外部的場地設(shè)備包括攝像頭和提供擊打反饋的懸吊架，其中攝像頭收集學(xué)員的動作發(fā)送給VR與標準動作對比然后把糾正動作的指令發(fā)送給學(xué)員。懸吊架提供真實的擊打反饋并收集擊打數(shù)據(jù)。

（二）學(xué)習(xí)器多模態(tài)交互信息架構(gòu)

將多模態(tài)交互模型應(yīng)用于該硬件形成信息架構(gòu)，智能學(xué)習(xí)器選擇合適于情景的模態(tài)為主模態(tài)其他模態(tài)為輔模態(tài)，通過主輔配合的方式向?qū)W員傳遞信息指令；學(xué)員接收到指令后做出反應(yīng)，由效應(yīng)通道傳遞給智能學(xué)習(xí)器[15]（如圖4）。

根據(jù)模態(tài)確定交互信息架構(gòu)，標準動作演示及口令提示以視聽結(jié)合形式呈現(xiàn)，使得學(xué)員在訓(xùn)練中易于理解；同時錯誤糾正將不再單純?yōu)榻叹殕T講解（只使用聽覺模態(tài)）而以視聽結(jié)合的方式增加視覺模態(tài)參與，以此減輕學(xué)員處理信息的壓力。其中設(shè)備信息中的時間、電量、用戶信息等使用視覺模態(tài)提供給學(xué)員。設(shè)備的基本設(shè)置使用觸覺效應(yīng)通道和視覺模態(tài)與用戶交互。訓(xùn)練功能中的標準動作演示，錯誤糾正以及口令指示使用視覺和聽覺提供給學(xué)員，揮拍擊打信息收集將使用視覺模態(tài)與用戶交互。

（三）學(xué)習(xí)器多模態(tài)交互系統(tǒng)

在多模態(tài)交互信息架構(gòu)中，羽毛球智能學(xué)習(xí)架將以圖像和聲音的方式將對學(xué)員位置的指示、標準動作的演示以及口令提醒由視覺和聽覺的感覺通道傳達給學(xué)員，學(xué)員將使用視覺和聽覺模態(tài)接收信息并作出調(diào)整位置、觀察動作演示以及根據(jù)口令練習(xí)等任務(wù)。整合用戶和產(chǎn)品之間的信息的流動和參與的模態(tài)可以構(gòu)建出多模態(tài)交互系統(tǒng)（如圖5）[16]。學(xué)員傳達的信息將以肢體動效應(yīng)通道被羽毛球智能學(xué)習(xí)架的攝像頭接收。羽毛球智能學(xué)習(xí)架再通過數(shù)據(jù)處理將通過其模態(tài)關(guān)系和時間關(guān)系的特點將信息分配。其中模態(tài)關(guān)系主要分為選擇型、相繼型、并發(fā)型和互補型。時間關(guān)系主要是并行和串行。羽毛球智能學(xué)習(xí)架再將展示學(xué)員錯誤動作和演示學(xué)員正確動作等信息通過圖像傳遞給學(xué)員。學(xué)員再重復(fù)練習(xí)形成循環(huán)。多模態(tài)交互系統(tǒng)將輸入信息進行多模態(tài)交互處理，并選擇合適情景的模態(tài)組合將信息輸出給學(xué)員以實現(xiàn)信息準確傳達和有效反饋。

（四）學(xué)習(xí)器界面交互設(shè)計

VR界面布局設(shè)計基于用戶認知和行為邏輯特性。界面設(shè)計首先要對信息重要性進行排序。在學(xué)員練習(xí)過程中信息重要性由高到低排序應(yīng)該為場地環(huán)境（包括球場模擬和擊球位置模擬）、動作演示（包括標準動作演示、自身動作圖像以及糾正信息）、設(shè)備基本信息（電量音量等）。系統(tǒng)將不同重要性的信息以不同大小放置于不同區(qū)域和層級，使學(xué)員在需要該信息時便于獲取（如圖6）。

在VR眼鏡演示正確動作后向?qū)W員發(fā)出指令練習(xí)并在練習(xí)時由外部攝像頭收集學(xué)員練習(xí)動作數(shù)據(jù)，整理后將糾正指令以聲音信息發(fā)送給學(xué)員，VR眼鏡同時將標準動作和學(xué)員當前動作的圖像信息發(fā)送給學(xué)員，如此循環(huán)進行。

四、結(jié)語

本文設(shè)計了一種針對羽毛球初學(xué)者的學(xué)習(xí)機器，通過虛擬現(xiàn)實和增強現(xiàn)實等技術(shù)增強視覺、聽覺信息模態(tài)運用多感官優(yōu)勢進行信息互補，降低了學(xué)員在原有場景下因信息通道擁擠帶來的高認知負荷，提高了學(xué)員的學(xué)習(xí)效率，拓寬了將虛擬現(xiàn)實技術(shù)應(yīng)用至體育教育領(lǐng)域的路徑，同時完善了多模態(tài)交互模型，提出了新的多模態(tài)交互策略為同類產(chǎn)品設(shè)計提供參考。筆者下一步將繼續(xù)完善設(shè)計使其更適用于多人以及更多場景下的學(xué)習(xí)訓(xùn)練。

參考文獻：

[1]林榕昇，馮雪珠.羽毛球：漲價與火爆的背后[N].福州日報，2024-08-08（4）.

[2]單炫綺.利用羽毛球訓(xùn)練提升中考體育成績的方法[J].拳擊與格斗，2021（7）：84-85.

[3]劉萍萍.我國羽毛球競技后備人才培養(yǎng)研究[D].北京：北京體育大學(xué)，2016.

[4]程勇民.我國羽毛球訓(xùn)練的理論創(chuàng)新與競技實踐[J].中國體育教練員，2019（4）：8-13.

[5]劉婷.羽毛球初學(xué)者不同揮拍方式對高遠球技術(shù)影響的實證研究[D].北京：北京體育大學(xué)，2018.

[6]昌琳.通過使用人物角色和情景分析的方法來進行以用戶為中心的設(shè)計[J].藝術(shù)與設(shè)計（理論），2008（11）：171-173.

[7]任澤裕，王振超，柯尊旺，等.多模態(tài)數(shù)據(jù)融合綜述[J].計算機工程與應(yīng)用，2021（18）：49-64.

[8]Nuovo A，Broz F，Wang N，et al.The multi-modal interface of robot-era multi-robot services tailored for the elderly[J].Intelligent Service Robotics，2018（1）：109-126.

[9]李善青，賈云得，柳陽.一種用于穿戴計算的指示手勢視覺跟蹤方法[C]//山東大學(xué)計算機科學(xué)與技術(shù)學(xué)院.第三屆和諧人機環(huán)境聯(lián)合學(xué)術(shù)會議（HHME2007）論文集.北京：北京理工大學(xué)計算機科學(xué)技術(shù)學(xué)院；北京理工大學(xué)計算機科學(xué)技術(shù)學(xué)院；北京理工大學(xué)計算機科學(xué)技術(shù)學(xué)院，2007：7.

[10]邵幫麗.基于多模態(tài)融合的智能家居人機自然交互方法研究及實現(xiàn)[D].蘇州：蘇州科技大學(xué)，2022.

[11]易心武，薛錦云，游珍，等.沉浸式虛擬現(xiàn)實多模態(tài)交互模型研究[J].江西師范大學(xué)學(xué)報（自然科學(xué)版），2024（1）：52-58.

[12]顧曰國.多媒體、多模態(tài)學(xué)習(xí)剖析[J].外語電化教學(xué)，2007（2）：3-12.

[13]王榮榮.多模態(tài)人機交互系統(tǒng)及其語音識別關(guān)鍵技術(shù)研究[D].杭州：浙江大學(xué)，2022.

[14]曾曦，崔雪萌.基于多模態(tài)交互的送餐員頭盔設(shè)計[J].機械設(shè)計，2023（8）：157-163.

[15]張德祿.多模態(tài)話語分析綜合理論框架探索[J].中國外語，2009（1）：24-30.

[16]辛志英.話語分析的新發(fā)展——多模態(tài)話語分析[J].社會科學(xué)刊，2008（5）：208-211.

作者簡介：劉澤，西安工程大學(xué)碩士研究生。研究方向：用戶界面與交互設(shè)計。

通訊作者：孫薇，西安工程大學(xué)副教授。研究方向：產(chǎn)品設(shè)計與人機關(guān)系、視覺傳達與交互設(shè)計。