亓夢(mèng)婕

（中央音樂(lè)學(xué)院，北京 100031）

可穿戴設(shè)備（wearable device）指的是能夠穿戴在人體作為一種輔助工具或植入在人體內(nèi)的智能電子設(shè)備①。隨著科學(xué)技術(shù)的飛速發(fā)展，可穿戴設(shè)備已經(jīng)被廣泛應(yīng)用于VR和AR等科技領(lǐng)域，在日常生活、教學(xué)、健康醫(yī)療、交通通信和社交娛樂(lè)領(lǐng)域發(fā)揮了重要作用，為人們的生活提供了更多的便利和智能化的服務(wù)。

可穿戴設(shè)備在數(shù)字媒體領(lǐng)域的應(yīng)用涉及多媒體播放控制、健康參數(shù)監(jiān)控、多媒體設(shè)備數(shù)據(jù)控制、新媒體藝術(shù)設(shè)計(jì)、VR游戲設(shè)計(jì)和娛樂(lè)以及智能纖維等，常見(jiàn)的Myo臂環(huán)，各式手套，VR、AR眼鏡和頭戴式設(shè)備等都是最典型的可穿戴設(shè)備。腦電波（Electroencephalography，EEG）傳感器、各類在不同功能的交互系統(tǒng)中特別設(shè)計(jì)的DIY傳感器和交互系統(tǒng)等技術(shù)的發(fā)展，為可穿戴設(shè)備提供了更豐富的功能。

在藝術(shù)創(chuàng)作領(lǐng)域中，可穿戴設(shè)備的應(yīng)用非?；钴S。藝術(shù)家們?cè)噲D從創(chuàng)新科技中尋找全新的方式演繹其藝術(shù)理念和追求，體現(xiàn)藝術(shù)和技術(shù)的融合。筆者僅就交互音樂(lè)領(lǐng)域可穿戴設(shè)備的應(yīng)用，特別是近年來(lái)發(fā)展起來(lái)的利用腦電波傳感器進(jìn)行藝術(shù)創(chuàng)作的應(yīng)用進(jìn)行闡述。

1 交互音樂(lè)領(lǐng)域的可穿戴設(shè)備

可穿戴設(shè)備對(duì)交互音樂(lè)的藝術(shù)呈現(xiàn)能夠起到極大的輔助和推動(dòng)作用，并受到越來(lái)越多的作曲家、音樂(lè)家、舞蹈家和視覺(jué)藝術(shù)家的關(guān)注。它能夠?qū)崟r(shí)拾取數(shù)據(jù)信息，與表演者融為一體，提供沉浸式的表演體驗(yàn)，不僅為表演者和觀眾搭建主觀感受與精神感知的橋梁，也使得觀眾能夠更好地對(duì)藝術(shù)信息進(jìn)行直接觀察[1]。不論是由廠家設(shè)計(jì)生產(chǎn)的傳感設(shè)備，或是藝術(shù)家根據(jù)作品和表演的需求進(jìn)行特殊設(shè)計(jì)的DIY傳感器設(shè)備，它們都拾取表演者動(dòng)作過(guò)程中產(chǎn)生的數(shù)據(jù)，并傳輸?shù)接?jì)算機(jī)程序。

可穿戴設(shè)備中“可穿戴”的特點(diǎn)，能夠?yàn)橛脩籼峁┏两降捏w驗(yàn)。對(duì)于交互音樂(lè)表演來(lái)說(shuō)，人體的運(yùn)動(dòng)（movement）和姿態(tài)（gesture）信息的輸入數(shù)據(jù)非常重要。可穿戴設(shè)備在交互音樂(lè)中的數(shù)據(jù)應(yīng)用原理包括動(dòng)作捕捉（motion capture）、動(dòng)作追蹤（motion tracking）和數(shù)據(jù)映射（data mapping）等環(huán)節(jié)。一方面，傳感器被廣泛運(yùn)用于交互音樂(lè)創(chuàng)作和表演，通過(guò)實(shí)時(shí)追蹤人體的動(dòng)作和加速度等信息，把這些數(shù)據(jù)傳輸?shù)組ax、Pd或Processing等能夠進(jìn)行實(shí)時(shí)數(shù)據(jù)處理的編程環(huán)境，將這些數(shù)據(jù)以聲音或圖像的形式輸出。表演者在舞臺(tái)上的一系列動(dòng)作為觀眾提供了更好的交互感體驗(yàn)，使觀眾能更好地理解表演者的動(dòng)作及其藝術(shù)效果之間的對(duì)應(yīng)關(guān)系。有一些藝術(shù)家甚至歡迎觀眾使用作曲家提供的可穿戴設(shè)備，參與到作品的創(chuàng)作和呈現(xiàn)環(huán)節(jié)，這也是交互表演的另一種體現(xiàn)形式。由于用戶與傳感器融為一體，幾乎感覺(jué)不到它的存在，從而能把注意力集中在表演本身。另一方面，使用WiFi或藍(lán)牙連接的方式，不僅實(shí)現(xiàn)了數(shù)據(jù)的無(wú)線傳輸，還保證了表演者在舞臺(tái)上的自由度，增加了動(dòng)作的靈活性，能夠?qū)⒈硌菡呱眢w的動(dòng)作和音樂(lè)、視覺(jué)影像效果以及其他媒體融為更好的整體。

目前，基于手套設(shè)計(jì)的可穿戴設(shè)備和Myo臂環(huán)被廣泛應(yīng)用在交互音樂(lè)的創(chuàng)作和表演中，尤其是腦電波（EEG）傳感器能夠更好地傳達(dá)和表現(xiàn)表演者的內(nèi)心世界。

2 基于手套設(shè)計(jì)的可穿戴設(shè)備的應(yīng)用

手是人們?nèi)粘Ｉ钪凶钊菀捉佑|和感知到自然世界的器官，基于手套設(shè)計(jì)的可穿戴設(shè)備自誕生至今已有四十多年的時(shí)間。這種設(shè)備通過(guò)檢測(cè)手指彎曲度、手指間的壓力、手指間的相對(duì)距離、手掌的運(yùn)動(dòng)方向和加速度等數(shù)據(jù)作為交互系統(tǒng)的數(shù)據(jù)輸入，并且在佩戴它的同時(shí)，仍有可能演奏其他樂(lè)器。

1976年，伊利諾伊大學(xué)芝加哥分院的里奇·賽爾（Rich Sayre）、托馬斯·迪凡蒂（Thomas Defanti）和丹尼爾·桑?。―aniel Sandin）設(shè)計(jì)了一款造價(jià)低而且重量輕的手套，被稱為Sayre Glove。光源放置在一種可以彎曲的電子管的一側(cè)，另一側(cè)連接了光電管。每一條電子管都延伸到手指的長(zhǎng)度，電子管中會(huì)有光通過(guò)，當(dāng)它彎曲時(shí)，光的亮度會(huì)發(fā)生變化，每個(gè)光電管的電壓變化與手指的彎曲程度相關(guān)聯(lián)。他們使用這個(gè)手套進(jìn)行多通道的聲音控制，模擬控制器推子的使用效果[2]。

20世紀(jì)80年代早期，麻省理工學(xué)院建筑機(jī)械組（Architecture Machine Group）和媒體實(shí)驗(yàn)室（Media Lab）的研究人員利用帶有基于照相機(jī)的LED系統(tǒng)進(jìn)行動(dòng)作捕捉和追蹤，在他們?cè)O(shè)計(jì)的手套上鑲嵌了LED燈，通過(guò)把最終的信號(hào)集中在手部，得到手指的動(dòng)作信息。這個(gè)LED手套在當(dāng)時(shí)只用來(lái)進(jìn)行動(dòng)作追蹤，并沒(méi)有作為控制設(shè)備使用。另外還有其他幾種不同的設(shè)計(jì)，例如由托馬斯·齊默爾曼（Thomas Zimmerman）和其他研究人員共同研發(fā)的DataGlove，可以檢測(cè)每一只手上的十個(gè)關(guān)節(jié)和手的位置及方向，它的重量更輕、穿戴更舒適，而且兼容性更強(qiáng)，之后由VPL 研究中心進(jìn)行商業(yè)推廣，被廣泛應(yīng)用。

麥特爾·托伊思（Mattel Toys）受到DataGlove的啟發(fā)，在20世紀(jì)80年代中期發(fā)明了Power Glove作為游戲控制器。保羅·迪·馬林斯（Paul De Marinis）受此啟發(fā)，他將手套上的彎曲傳感器（ fi nger fl ex sensors）部分保留下來(lái)，使其在音樂(lè)表演中用手指控制音高、觸發(fā)開(kāi)始和結(jié)束的時(shí)間點(diǎn)以及保存某一個(gè)音樂(lè)段落的數(shù)據(jù)等。1991年，蕾蒂西亞·索娜米（Laetitia Sonami）與迪·馬林斯在奧地利的林茨舉行的電子音樂(lè)節(jié)Ars Electronica Festiva演出作品《Mechanization Takes Command》時(shí)用到了索娜米設(shè)計(jì)的手套設(shè)備，在橡膠手套上放置磁性傳感器來(lái)觸發(fā)信號(hào)。一年后，索娜米又在此基礎(chǔ)上設(shè)計(jì)了帶有五個(gè)微動(dòng)開(kāi)關(guān)和磁傳感器的手套，這樣她的左手可以實(shí)施完全的控制，并空出右手來(lái)控制旋鈕。在荷蘭電子樂(lè)器音樂(lè)實(shí)驗(yàn)室（Studio for Electro Instrumental Music，簡(jiǎn)稱STEIM）駐地創(chuàng)作期間，索娜米設(shè)計(jì)了著名的“女士手套”（Lady’s Glove），指尖部分嵌入了微動(dòng)開(kāi)關(guān)，彎曲傳感器用來(lái)感應(yīng)手腕和中指的彎曲度，每個(gè)手指的感應(yīng)器都能接收兩組數(shù)值，用以辨別手指上兩個(gè)關(guān)節(jié)的彎曲程度。指尖部分裝有磁性感應(yīng)器，拇指部分裝有磁鐵，可以偵測(cè)到每個(gè)指尖與拇指的距離。這個(gè)設(shè)備在食指和拇指上裝有一個(gè)壓力墊，在手掌上還有一個(gè)超聲波發(fā)射器，與腰帶和鞋子里的接收器一起使用。這個(gè)設(shè)計(jì)使表演者能夠通過(guò)手腕和手指的彎曲、每個(gè)手指之間相對(duì)位置的移動(dòng)、手指之間的按壓、開(kāi)啟或關(guān)閉指尖的微動(dòng)開(kāi)關(guān)以及手指和身體的相對(duì)位置來(lái)控制音樂(lè)的參數(shù)。這個(gè)手套的設(shè)計(jì)使單一手指的運(yùn)動(dòng)改變了多種參數(shù)的變化，因此能夠?qū)β曇暨M(jìn)行多次和多種參數(shù)的控制，進(jìn)而能夠自如地對(duì)音樂(lè)表情進(jìn)行控制[3]。

在托德·麥克弗（Tod Machover）的作品《bug-mudra》（1990）中，他使用Exos DHM②設(shè)備來(lái)控制交互音樂(lè)表演中的音樂(lè)參數(shù)，計(jì)算機(jī)系統(tǒng)拾取兩位吉他演奏家和一位打擊樂(lè)演奏家的聲音，并在表演中對(duì)這些聲音進(jìn)行實(shí)時(shí)合成。指揮的左手佩戴了DHM，通過(guò)它在指揮時(shí)進(jìn)行音色的混合、聲相變化以及多聲道聲音的比例調(diào)節(jié)。木村麻里（Mari Kimura）也是一位使用手套設(shè)備進(jìn)行交互音樂(lè)表演和創(chuàng)作的音樂(lè)家。她利用“μgic”傳感器提取小提琴演奏中弓法和力度的變化，使用WiFi與計(jì)算機(jī)進(jìn)行信號(hào)傳輸，并與實(shí)時(shí)的計(jì)算機(jī)音樂(lè)相結(jié)合，獲得了非常有效的演奏效果，這成為她在交互音樂(lè)表演中的標(biāo)志性創(chuàng)意設(shè)計(jì)。

3 基于肌電傳感器的Myo臂環(huán)

許多已經(jīng)在市面上可購(gòu)買(mǎi)的可穿戴設(shè)備在設(shè)計(jì)之初并沒(méi)有以藝術(shù)設(shè)計(jì)和創(chuàng)作為目的，而是服務(wù)于醫(yī)學(xué)、科技和通信等專業(yè)領(lǐng)域，但它們獲取到的人體運(yùn)動(dòng)、動(dòng)作、手勢(shì)，甚至一系列生物信息，如心跳、腦電波和肌肉緊張度的信號(hào)，都可以通過(guò)計(jì)算機(jī)將這些信息進(jìn)行讀取、保存、處理，成為藝術(shù)創(chuàng)作的重要數(shù)據(jù)和素材，并實(shí)現(xiàn)交互表演。

Myo臂環(huán)是由Thalmic Labs設(shè)計(jì)的可穿戴的動(dòng)作捕捉和數(shù)據(jù)控制設(shè)備，通過(guò)藍(lán)牙進(jìn)行無(wú)線控制，與計(jì)算機(jī)、智能手機(jī)或其他電子設(shè)備進(jìn)行數(shù)據(jù)傳輸[4]。Myo臂環(huán)由8個(gè)包含肌電圖（EMG）傳感器、加速度傳感器、陀螺儀和磁力計(jì)的九軸慣性測(cè)量單元（IMU）組成，通過(guò)識(shí)別手臂的運(yùn)動(dòng)方向、肌肉緊張度、手掌和手指的動(dòng)作、加速度以及方向等得到大量的數(shù)據(jù)。它能夠通過(guò)OSC協(xié)議將獲取的數(shù)據(jù)傳輸至多種應(yīng)用程序中，同時(shí)為藝術(shù)家提供了在眾多編程環(huán)境下工作的可能。

由于佩戴方便而且不影響表演者的動(dòng)作幅度，Myo臂環(huán)極大地優(yōu)化了表演者的沉浸式體驗(yàn)效果，不僅對(duì)樂(lè)器演奏家來(lái)說(shuō)非常便捷，對(duì)于舞蹈和戲劇演員等需要在舞臺(tái)上進(jìn)行大幅度動(dòng)作表演的藝術(shù)家來(lái)說(shuō)，也非常方便。它的優(yōu)勢(shì)還體現(xiàn)在利用它進(jìn)行人體運(yùn)動(dòng)追蹤的信號(hào)不受維度的限制，只要在藍(lán)牙信號(hào)覆蓋范圍內(nèi)，就可以穩(wěn)定地拾取并傳輸數(shù)據(jù)。

SALTO（全稱為Sensory Aerialist eLecTrOacoustic system）是為高空表演而設(shè)計(jì)的包括Myo臂環(huán)、數(shù)字聲音合成和電子音樂(lè)等模塊的交互式表演系統(tǒng)?？死锼沟侔材取ち_斯（Christiana Rose）及其創(chuàng)作團(tuán)隊(duì)在2016年創(chuàng)作的《Splinter》是為高空舞蹈表演和SALTO系統(tǒng)創(chuàng)作的交互式電子音樂(lè)作品（圖1），通過(guò)Myo臂環(huán)采集數(shù)據(jù)將高空舞蹈表演者的身體語(yǔ)言轉(zhuǎn)譯成聲音素材。在這個(gè)作品中，盡管由于演員的動(dòng)作變化和移動(dòng)而產(chǎn)生動(dòng)作信息確認(rèn)的不準(zhǔn)確和不穩(wěn)定的問(wèn)題，但這種形式為作曲家提供了更多捕捉全方位動(dòng)作信息的可能性，在技術(shù)領(lǐng)域仍然是一種突破。

圖1 《Splinter》高空表演

圖2 MyoSpat 系統(tǒng)工作原理[6]

就讀于伯明翰音樂(lè)學(xué)院的巴拉迪諾·迪·多納托（Balandino Di Donato）也是熱衷于探索動(dòng)作追蹤與交互音樂(lè)的藝術(shù)家，尤其善于使用帶有Myo臂環(huán)的交互系統(tǒng)的應(yīng)用和研究。他與詹姆斯·杜利（James Dooley）共同設(shè)計(jì)的MyoSpat是一個(gè)交互聲音—視覺(jué)影像系統(tǒng)（圖2），旨在通過(guò)表演者用手勢(shì)和動(dòng)作信息直接控制聲音和燈光效果，增強(qiáng)作品的藝術(shù)表現(xiàn)力[5]。MyoSpat 2是根據(jù)Myo動(dòng)作控制作為數(shù)據(jù)輸入，在Pure Data編程環(huán)境進(jìn)行動(dòng)作數(shù)據(jù)識(shí)別和聲音—影像處理的更新版本系統(tǒng)。

在這個(gè)系統(tǒng)中，Myo Mapper③從Myo臂環(huán)提取并轉(zhuǎn)換數(shù)據(jù)，傳輸?shù)絆SC；使用ml-lib（機(jī)器學(xué)習(xí)庫(kù)）外部插件④在PD（Parallels Desktop）環(huán)境中進(jìn)行動(dòng)作識(shí)別和聲音—影像信號(hào)的處理和空間化呈現(xiàn)；用Arduino將序列數(shù)據(jù)傳輸至DMX來(lái)控制燈光的效果。在MyoSpat的資料庫(kù)中有六種動(dòng)作識(shí)別設(shè)置，手臂的每一個(gè)動(dòng)作都對(duì)應(yīng)一種聲音數(shù)據(jù)的處理方式，例如音高變化、振幅調(diào)制參數(shù)和3D空間變化等。埃莉諾·特納（Eleanor Turner）是豎琴演奏家和作曲家。特納在她的作品《The Wood and the Water》中也使用了MyoSpat交互音樂(lè)系統(tǒng)進(jìn)行創(chuàng)作和即興表演，產(chǎn)生了豐富的藝術(shù)效果。MyoSpat在其他領(lǐng)域也得到了廣泛應(yīng)用，例如舞蹈表演和虛擬現(xiàn)實(shí)等。

4 腦電波傳感器的應(yīng)用

在過(guò)去的幾十年中，醫(yī)學(xué)、神經(jīng)學(xué)和心理學(xué)等領(lǐng)域的研究人員一直致力于腦電波的研究，并取得了顯著的成果。在此基礎(chǔ)上探索使用腦電波信號(hào)，成為藝術(shù)家進(jìn)行創(chuàng)作的新技術(shù)手段。

截至目前，已有許多公司研發(fā)了基于腦電圖描記法（EMG）的生物傳感設(shè)備，用來(lái)獲取人體的生物信息數(shù)據(jù)，例如Emotiv、NeuroSky、iWinks、MUSE。通過(guò)獲取大腦活動(dòng)中的腦電波，得到表演者在放松、冥想或思考等不同情緒狀態(tài)下的腦電波數(shù)據(jù)。

艾爾文·盧西埃（Alvin Lucier）被公認(rèn)是較早使用腦電波進(jìn)行創(chuàng)作的作曲家[7]，他在1965年創(chuàng)作的作品《為一位表演者而作的音樂(lè)》（Music for Solo Performer）使用了EEG電極檢測(cè)表演者在冥想時(shí)的alpha腦波，這個(gè)腦波信號(hào)產(chǎn)生的聲音與舞臺(tái)上的打擊樂(lè)器產(chǎn)生共振，在舞臺(tái)空間中構(gòu)成極具戲劇性的效果。表演者的腦電波首先輸出到差分前置放大器，然后進(jìn)入八組立體聲放大器。舞臺(tái)上共有16件樂(lè)器，包括鋼琴、鼓、吊镲、金屬垃圾桶和硬紙板等。這些樂(lè)器上都安裝了小型的揚(yáng)聲器，能夠使alpha腦波傳輸?shù)綋P(yáng)聲器時(shí)與聲學(xué)樂(lè)器產(chǎn)生共振，這在當(dāng)時(shí)的實(shí)驗(yàn)音樂(lè)領(lǐng)域引起了轟動(dòng)。圖3所示為2009年9月26日，艾爾文·盧西埃在倫斯勒表演藝術(shù)中心演出的海報(bào)。

圖3 盧西埃演出海報(bào)⑤

圖4 麗莎·樸在表演中⑥（圖片來(lái)源：Olivia Chow）

圖5 腦電波信號(hào)在編程軟件中的圖示（圖片來(lái)源： Olivia Chow）

麗莎·樸（Lisa Park）是一位交互裝置藝術(shù)家，她的作品多采用人體的生物信息作為交互系統(tǒng)的輸入數(shù)據(jù)，例如人的心跳和腦電波等。她的交互電子音樂(lè)作品《Eunoia》創(chuàng)作于2013年。這個(gè)標(biāo)題在希臘語(yǔ)中被譯為“美妙的思考”，表達(dá)對(duì)人類五種情感（喜、怒、哀、惡和欲）的思考，這五種情感構(gòu)成了一個(gè)無(wú)限的人類情感統(tǒng)一體，也從另一個(gè)側(cè)面體現(xiàn)了作者對(duì)采用腦電波進(jìn)行藝術(shù)創(chuàng)作的追求，力圖使用最直接而美妙的方式體現(xiàn)大腦思考的美感。她使用NeuroSky公司設(shè)計(jì)的EEG頭戴式設(shè)備，獲取大腦的活動(dòng)數(shù)據(jù)，包括delta、theta、alpha和beta腦波，同時(shí)監(jiān)測(cè)眼睛的活動(dòng)。這些數(shù)據(jù)實(shí)時(shí)進(jìn)入編程軟件，并以圖示的形式體現(xiàn)出來(lái)（圖4～圖5）。在這部作品中，麗莎·樸使用了一種更加清晰可見(jiàn)的方式為觀眾呈現(xiàn)這些腦電波信號(hào)所產(chǎn)生的效果。她在5個(gè)24英寸的金屬盤(pán)里覆蓋了一層水，并在金屬盤(pán)下方分別安裝了15英寸的揚(yáng)聲器，通過(guò)揚(yáng)聲器與金屬盤(pán)的共振，水面呈現(xiàn)出不同的波紋。麗莎·樸將腦電波信號(hào)傳輸至實(shí)時(shí)編程環(huán)境Max和Reaktor，生成帶有回聲效果的聲音。水在金屬盤(pán)里的波動(dòng)取決于聲音的音量、聲相和頻率，這些參數(shù)隨著大腦活動(dòng)和情緒的變化而產(chǎn)生變化。此外，她還創(chuàng)作了許多使用腦電波的交互式音樂(lè)和裝置作品，例如《Eunoia II》、《Eudaimonia》以及大型聲音裝置《NUE》等。

2013年，斯坦福大學(xué)教授克里斯·舍費(fèi)（Chris Chafe）與致力于研究痙攣癥狀的約瑟夫·帕維茲（Josef Parvizi）教授合作，將病人的腦電波信號(hào)轉(zhuǎn)譯為音樂(lè)。舍費(fèi)使用了一個(gè)接近于女聲的聲音素材，目的是為聽(tīng)者提供一種更容易接受和理解神經(jīng)活動(dòng)的聽(tīng)覺(jué)體驗(yàn)。他們后來(lái)設(shè)計(jì)了一種可以進(jìn)行實(shí)時(shí)監(jiān)測(cè)病人腦電波的設(shè)備，能夠在任意時(shí)間獲取腦電波信號(hào)，他們把這個(gè)設(shè)備稱為“大腦聽(tīng)診器”。帕維茲選擇了大腦中一百多個(gè)神經(jīng)元作為信號(hào)源，舍費(fèi)從這些神經(jīng)元中選擇一部分信息來(lái)調(diào)制女聲的音高頻率，隨著腦波活動(dòng)的逐漸頻繁使音高產(chǎn)生相應(yīng)的變化。與此同時(shí)，女聲的音調(diào)、音色也在發(fā)生改變，每個(gè)神經(jīng)元信號(hào)都成為一個(gè)演唱聲部，整個(gè)音樂(lè)呈現(xiàn)出高低起伏和律動(dòng)的變化。

將腦電波用于音樂(lè)創(chuàng)作的這些藝術(shù)實(shí)踐活動(dòng)，并不僅僅存在于嚴(yán)肅音樂(lè)或?qū)嶒?yàn)音樂(lè)領(lǐng)域。爵士鼓手威廉·胡克爾（William Hooker）和歌手羅拉·法耶（Lora Faye）把腦電波信號(hào)與爵士樂(lè)表演相結(jié)合，腦電波信號(hào)生成的聲音擔(dān)任音樂(lè)中的一個(gè)重要聲部，這成為獨(dú)具特色的爵士樂(lè)表演方式。

5 結(jié)語(yǔ)

托德·溫克勒（Todd Winkler）曾提到：“交互音樂(lè)系統(tǒng)使用軟件來(lái)控制音樂(lè)的各項(xiàng)參數(shù)，體現(xiàn)音樂(lè)的藝術(shù)表現(xiàn)力……人的動(dòng)作作為輸入信號(hào)和數(shù)據(jù)，也已經(jīng)被頻繁地應(yīng)用在交互音樂(lè)系統(tǒng)中……將動(dòng)作數(shù)據(jù)轉(zhuǎn)換為音樂(lè)信息的方法，為表演者提供了參與感和創(chuàng)造性……這種交互感取決于表演者的自由度和對(duì)產(chǎn)生的效果的感知，以及計(jì)算機(jī)程序?qū)τ诒硌菡邉?dòng)作信息的反應(yīng)和轉(zhuǎn)譯能力。”[8]使用可穿戴設(shè)備進(jìn)行交互音樂(lè)表演，更突出地體現(xiàn)了溫克勒所說(shuō)的交互音樂(lè)靈活性和創(chuàng)造性的特點(diǎn)。

近年來(lái)，交互音樂(lè)在科技不斷進(jìn)步的大背景下得到持續(xù)的發(fā)展，可穿戴設(shè)備也在不同領(lǐng)域得到廣泛的應(yīng)用?？纱┐髟O(shè)備的靈活性和隱蔽性為表演者提供了更大的自由空間，在這種極具沉浸感的表演中，表演者能夠在表演空間內(nèi)對(duì)自身有更明確的感知，將交互音樂(lè)表演中的動(dòng)作姿態(tài)與最終呈現(xiàn)的音樂(lè)表情融為一體。可穿戴設(shè)備在交互音樂(lè)中的應(yīng)用，縮小了表演者與觀眾以及表演者與自身的距離，增強(qiáng)了他們的參與感和沉浸感，極大地拓寬了藝術(shù)家的創(chuàng)作手段和工具的可選擇性。當(dāng)前，這種跨學(xué)科的新媒體藝術(shù)創(chuàng)作與多媒體形式的合作形式也在快速發(fā)展。以上提到的這些可穿戴設(shè)備為藝術(shù)家提供了探索聲音、畫(huà)面、文字和結(jié)構(gòu)等元素的多樣融合方式，并被廣泛應(yīng)用在交互電子音樂(lè)、裝置藝術(shù)、舞蹈和戲劇等領(lǐng)域，通過(guò)實(shí)時(shí)地將表演者或觀眾的身體動(dòng)作信號(hào)和生物信息轉(zhuǎn)換為相對(duì)應(yīng)的輸出信息，極大地增強(qiáng)他們的參與感，并拓展了藝術(shù)的表現(xiàn)力。

注釋：

① 來(lái)源于https://en.wikipedia.org/wiki/Wearable_technology

② Exos DHM，全稱為Dexterous HandMaster，最早是由亞瑟·利特爾（Arthur Little）設(shè)計(jì)的，它應(yīng)用霍爾效應(yīng)傳感器作為電位器，準(zhǔn)確地測(cè)出每個(gè)手指的三個(gè)關(guān)節(jié)的彎曲程度、手指外展的位置和拇指復(fù)雜的動(dòng)作。

③ Myo Mapper是由多納托研發(fā)的開(kāi)源應(yīng)用程序，能夠?qū)yo臂環(huán)的數(shù)據(jù)映射到OSC信息，該項(xiàng)設(shè)計(jì)曾在2017年獲JUCE Award獎(jiǎng)項(xiàng)。

④ ml-lib是在為Max和PureData編程環(huán)境設(shè)計(jì)的機(jī)器學(xué)習(xí)資料庫(kù)。

⑤ 來(lái)源于http://empac.rpi.edu/events/2009/fall/slowwave/music-solo-performer

⑥ 來(lái)源于https://creators.vice.com/en_us/article/vvygzm/eunoia-seeking-enlightenment-by-trackingbrainwaves

[1]Federico Visi et. al., Musical Instruments, Body Movement, Space, and Motion Data: Music as an Emergent Multimodal Choreography, human technology, Vol. 13(1), pp. 58-81, May 2017.

[2]David Sturman, David Zeltzer, A Survay of Glove-based Input, IEEE Computer Graphics & Applications,pp. 30-39, January, 1994.

[3]Joel Chadabe, Electronic Sound - the past and promise of electronic music, Prentice Hall, pp.229-230.

[4]Christiana Rose, SALTO: A System for Musical Expression in the Aerial Arts, NIME 17, Aalborg University Copenhagen, Denmark, May 15-19, 2017.

[5]Balandino Di Donato, James Dooley, Myospat: A System for Manipulating Sound and Light Through Hand Gestures, Proceedings of the 3rd Workshop on Intelligent Music Production, Salford, UK, 15 September, 2017.

[6]Balandino Di Donato, James Dooley, Myospat: A System for Manipulating Sound and Light Through Hand Gestures, Proceedings of the 3rd Workshop on Intelligent Music Production, Salford, UK, 15 September, 2017.

[7]Volker Straebel, Wilm Thoben, Alvin Lucier’s Music for Solo Performer: Experimental music beyond soni fi cation, Organised Sound, 2014, Vol. 19(1), pp. 17-29,Cambridge University Press.

[8]Todd Winkler, Making Motion Musical: Gesture Mapping Strategies for Interactive Computer Music,Proceedings of the 1995 ICMC.

[9]Federico Visi et. al, Musical Instruments, Body Movement, Space, and Motion Data: Music as an Emergent Multimodal Choreography, Human Technology, Vol. 13(1), pp. 58-81, May 2017.

[10]David Sturman, David Zeltzer, A Survay of Glovebased Input, IEEE Computer Graphics & Applications,pp. 30-39, January, 1994.

[11]Joel Chadabe, Electronic Sound - the past and promise of electronic music, Prentice Hall, pp.229-230.

[12]Todd Winkler, Making Motion Musical: Gesture Mapping Strategies for Interactive Computer Music,Proceedings of the ICMC, 1995.

[13]Christiana Rose, SALTO: A System for Musical Expression in the Aerial Arts, NIME 17, May 15-19,Aalborg University Copenhagen, Denmark, 2017.

[14]Balandino Di Donato, James Dooley, Myospat: A System for Manipulating Sound and Light Through Hand Gestures, Proceedings of the 3rd Workshop on Intelligent Music Production, Salford, UK, 15 September, 2017.

[15]Volker Straebel, Wilm Thoben, Alvin Lucier’s Music for Solo Performer: Experimental music beyond sonification, Organised Sound, Vol. 19(1), pp. 17-29,Cambridge University Press, 2014.

[16]https://www.datagarden.org/blog/richardlowenberg-interview

[17]https://www.musicmotionalliance.com/projects/2016/10/23/koto-japanese-and-electronicmusic-created-with-brainwaves

[18]https://creators.vice.com/en_us/article/nz4eez/thiseeg-helmet-makes-music-from-brainwaves

[19]http://www.balandinodidonato.com/myomapper/

[20]https://news.stanford.edu/news/2013/september/seizure-music-research-092413.html