周臨舒 蔣存梅
(上海師范大學(xué)音樂(lè)學(xué)院, 上海 200234)
音樂(lè)是人類(lèi)最重要的信息交流系統(tǒng)之一, 這可能緣于音樂(lè)和語(yǔ)言在人類(lèi)進(jìn)化歷史上具有相同的起源(Darwin, 1871; Wallin, Merker, & Brown,2001)。在現(xiàn)代社會(huì)生活中, 音樂(lè)無(wú)處不在。聆聽(tīng)音樂(lè)不僅是現(xiàn)代人最具普遍性的一種活動(dòng), 也成為人們生活中不可缺少的一部分。然而, 即使音樂(lè)會(huì)、電臺(tái)廣播的解說(shuō)詞不遺余力地介紹音樂(lè)的表現(xiàn)內(nèi)容, 許多人仍抱怨自己“聽(tīng)不懂”音樂(lè), 尤其當(dāng)音樂(lè)被用于傳達(dá)哲理性對(duì)象, 比如, 貝多芬的《“命運(yùn)”交響曲》。
哲理性對(duì)象作為音樂(lè)的外在表現(xiàn)對(duì)象, 屬于音樂(lè)外在意義(extramusical meaning)的范疇(Meyer, 1956; Patel, 2008)。在音樂(lè)欣賞活動(dòng)中, 對(duì)音樂(lè)哲理性對(duì)象的理解是不是音樂(lè)工作者的專(zhuān)利?一般人能否理解音樂(lè)傳達(dá)的哲理性對(duì)象?其內(nèi)在的認(rèn)知神經(jīng)機(jī)制又是什么?目前, 尚無(wú)研究從認(rèn)知神經(jīng)科學(xué)的視角考察聽(tīng)者對(duì)音樂(lè)哲理性對(duì)象的理解。對(duì)以上問(wèn)題的系統(tǒng)探究, 不僅可以推進(jìn)和完善音樂(lè)外在意義的認(rèn)知研究, 為構(gòu)建音樂(lè)外在意義的認(rèn)知神經(jīng)模型提供依據(jù), 而且有助于明確音樂(lè)訓(xùn)練經(jīng)歷對(duì)音樂(lè)外在意義加工的影響, 最終回答人類(lèi)對(duì)音樂(lè)的理解是否具有普遍性的問(wèn)題。
在音樂(lè)學(xué)研究中, 關(guān)于音樂(lè)意義的定義及其構(gòu)成問(wèn)題長(zhǎng)期處于爭(zhēng)議之中(如, Davies, 1994;Hanslick, 1854; Kivy, 1990, 2002; Meyer, 1956)。根據(jù)已有的理論, 音樂(lè)意義可大致分為音樂(lè)內(nèi)在意義和音樂(lè)外在意義兩類(lèi)(Koopman & Davies, 2001;Meyer, 1956; Patel, 2008)。前者是指某個(gè)音樂(lè)事件(可以是某一音樂(lè)元素, 或某個(gè)結(jié)構(gòu)單元)指向另一個(gè)音樂(lè)事件所具有的意義。相反, 當(dāng)音樂(lè)指向概念、圖像、經(jīng)驗(yàn)、或情緒狀態(tài)等音樂(lè)之外的對(duì)象時(shí), 這種意義屬于音樂(lè)外在意義。根據(jù)Koelsch(2012)的觀點(diǎn), 音樂(lè)所表達(dá)的意義超出音樂(lè)符號(hào)本身, 且音樂(lè)意義與語(yǔ)言符號(hào)所傳達(dá)的語(yǔ)義信息具有一定程度的相似性, 因此, 他以音樂(lè)語(yǔ)義(musical semantics)代替音樂(lè)意義。即便如此,Koelsch也承認(rèn), 音樂(lè)語(yǔ)義與語(yǔ)言學(xué)中的命題語(yǔ)義仍然具有差異:音樂(lè)很難表達(dá)語(yǔ)言中量詞、情態(tài)詞以及連接詞所能表達(dá)的意思, 而語(yǔ)言很難表達(dá)音樂(lè)所能傳達(dá)的感受性信息。
早在 1986年, Dowling和 Harwood在查爾斯·皮爾斯符號(hào)學(xué)(notions of Charles Pierce)理論的基礎(chǔ)上, 從音樂(lè)情緒知覺(jué)的角度提出音樂(lè)表現(xiàn)情緒的3種方式:形象符號(hào)(icon)、標(biāo)志符號(hào)(index)和象征符號(hào)(symbol)。Koelsch (2011, 2012)將其延伸到音樂(lè)意義領(lǐng)域, 他認(rèn)為, 音樂(lè)對(duì)外在意義的傳達(dá)依賴(lài)于這3種途徑:形象性的(iconic)、指示性的(indexical)、象征性的(symbolic)途徑, 并也被賦予這些屬性。具體來(lái)說(shuō), 形象性的音樂(lè)意義產(chǎn)生于音樂(lè)對(duì)其他事物的聲音模仿(如, 貝多芬在《第六“田園”交響曲》中用音樂(lè)模擬杜鵑的鳴叫),或是對(duì)事物或抽象概念的屬性模仿(如, 一條上升的自然音階很容易與“樓梯”等概念相聯(lián)系); 指示性的音樂(lè)意義產(chǎn)生于對(duì)個(gè)體的情緒、心境或意圖的模仿(如, 音樂(lè)對(duì)“快樂(lè)”或“悲傷”等情緒的表現(xiàn)); 象征性的音樂(lè)意義是指音樂(lè)與音樂(lè)之外世界之間的聯(lián)系, 這種聯(lián)系具有隨意性, 帶有武斷的色彩, 因此, 它既可以是習(xí)俗性的(如, 國(guó)歌與“愛(ài)國(guó)主義”的聯(lián)系), 也可能存在個(gè)體特異性(如, 一段被設(shè)為個(gè)人手機(jī)鈴聲的音樂(lè)與“電話(huà)”的聯(lián)系)。
根據(jù)已有理論, 不同的符號(hào)屬性可能與特定的意義范疇相關(guān), 然而, 音樂(lè)在表征外在意義時(shí),不同符號(hào)屬性也可能共同發(fā)揮作用。比如, 音樂(lè)對(duì)哲理性對(duì)象的傳達(dá)可能借助形象性、指示性符號(hào), 也可能直接通過(guò)象征性符號(hào)得以實(shí)現(xiàn)。盡管已有理論指出了音樂(lè)外在意義所依賴(lài)的不同符號(hào)屬性, 然而, 研究者并未對(duì)這 3種不同加工途徑之間的區(qū)別與聯(lián)系作進(jìn)一步闡述。此外, 音樂(lè)本身特征與不同的外在意義符號(hào)之間的關(guān)系也尚未明確。
近年來(lái), 隨著心理學(xué)研究的推進(jìn)以及認(rèn)知神經(jīng)科學(xué)技術(shù)的發(fā)展, 研究者開(kāi)始使用電生理以及神經(jīng)影像學(xué)的方法探討音樂(lè)外在意義的加工及其神經(jīng)機(jī)制。同時(shí), 鑒于音樂(lè)和語(yǔ)言在認(rèn)知機(jī)制和生物學(xué)基礎(chǔ)上的關(guān)聯(lián)(Patel, 2008; Rebuschat,Rohrmeier, Hawkins, & Cross, 2011; 周臨舒, 蔣存梅, 楊玉芳, 2012), 音樂(lè)和語(yǔ)言在意義層面的認(rèn)知神經(jīng)關(guān)聯(lián)也逐漸引起學(xué)界的興趣。
N400是反映語(yǔ)義或概念加工的事件相關(guān)電位成分(event-related brain potentials, ERPs), 一般出現(xiàn)在300~500 ms的時(shí)間窗口, 該負(fù)波的波幅大小體現(xiàn)出語(yǔ)義加工或整合所需要的認(rèn)知負(fù)荷(Friederici & Wartenburger, 2010; Lau, Phillips, &Poeppel, 2008)。該成分也被視作音樂(lè)意義的腦電指標(biāo)。Koelsch等人(2004)首次以認(rèn)知神經(jīng)科學(xué)手段考察音樂(lè)外在意義的加工。該研究采用語(yǔ)義啟動(dòng)范式, 以音樂(lè)片段作為啟動(dòng)刺激, 以不同的概念詞作為目標(biāo)刺激, 如“寬闊”、“國(guó)王”、“幻覺(jué)”等, 音樂(lè)和詞構(gòu)成有關(guān)或無(wú)關(guān)條件。結(jié)果發(fā)現(xiàn), 無(wú)關(guān)的目標(biāo)詞比有關(guān)的目標(biāo)詞誘發(fā)更大的 N400波幅, N400效應(yīng)與語(yǔ)言語(yǔ)義不匹配所誘發(fā)的 N400效應(yīng)相似, 二者的神經(jīng)源都位于雙側(cè)顳中回的后部。該研究表明音樂(lè)可以啟動(dòng)語(yǔ)義概念的表征。后續(xù)研究驗(yàn)證了音樂(lè)對(duì)情緒概念(如, “快樂(lè)”和“悲傷”)的表征(Goerlich, Witteman, Aleman, &Martens, 2011; Goerlich et al., 2012; Kamiyama,Abla, Iwanaga, & Okanoya, 2013; Sollberge, Rebe,& Eckstein, 2003; Steinbeis & Koelsch, 2008,2011)。
研究表明, 無(wú)論音樂(lè)作為啟動(dòng)刺激或是目標(biāo)刺激, 均能誘發(fā)相應(yīng)的N400效應(yīng)。比如, 當(dāng)以詞(Daltrozzo & Sch?n, 2009; Sch?n, Ystad, Kronland-Martinet, & Besson, 2010)或聲音(Frey et al., 2009;Painter & Koelsch, 2011)作為啟動(dòng)刺激, 以音樂(lè)作為目標(biāo)刺激, N400效應(yīng)都會(huì)出現(xiàn)。然而二者加工的神經(jīng)機(jī)制仍然存在一定區(qū)別。Steinbeis和Koelsch (2008)比較了聽(tīng)者在和弦?詞以及詞?和弦這兩種刺激呈現(xiàn)方式下的音樂(lè)意義加工, ERP研究結(jié)果發(fā)現(xiàn), 和弦?詞的刺激呈現(xiàn)方式誘發(fā)了300 ~500 ms時(shí)間窗的N400效應(yīng), 而詞?和弦的呈現(xiàn)方式誘發(fā)了200~400 ms時(shí)間窗的效應(yīng), 功能核磁共振成像(functional magnetic resonance imaging,fMRI)的研究進(jìn)一步發(fā)現(xiàn), 和弦?詞的啟動(dòng)激活了右側(cè)顳中回(middle temporal gyrus, MTG), 而詞?和弦激活的是右側(cè)顳上溝(superior temporal sulcus, STS)的后部, 激活區(qū)域的差異表明音樂(lè)外在意義加工的神經(jīng)基礎(chǔ)受制于目標(biāo)刺激的類(lèi)型。
已有研究并未區(qū)分音樂(lè)表征的概念類(lèi)型, 比如, 在 Koelsch等人(2004)研究中, 概念詞既包括與視覺(jué)有關(guān)的概念, 也包含與情緒有關(guān)的概念,且研究者尚未區(qū)分概念加工所依賴(lài)的符號(hào)屬性,即形象性、指示性和象征性的符號(hào)屬性存在混淆。的確, Downey等人(2013)發(fā)現(xiàn), 行為變異額顳癡呆(behavioral variant frontotemporal dementia)病人對(duì)指示性(該文稱(chēng)之為“心智化的”) 音樂(lè)意義的識(shí)別能力受損, 但是對(duì)形象性意義的識(shí)別能力與控制組無(wú)異。由此可見(jiàn), 不同符號(hào)屬性所誘發(fā)的音樂(lè)意義可能依賴(lài)不同的神經(jīng)基礎(chǔ)。
與語(yǔ)言相似, 圖片也能傳達(dá)明確的意義, 尤其是形象性的概念, 這主要建立在對(duì)畫(huà)面對(duì)象規(guī)律性特征的提取。為了探究音樂(lè)對(duì)形象性意義的傳達(dá), Zhou, Jiang, Delogu和Yang (2014)以音樂(lè)片段作為啟動(dòng)刺激, 以表征空間概念的圖片為目標(biāo)刺激, 音樂(lè)和圖片在空間表現(xiàn)性上構(gòu)成匹配或不匹配的條件。被試任務(wù)是判斷圖片展示的場(chǎng)景是開(kāi)放的, 還是封閉的空間。結(jié)果發(fā)現(xiàn), 與匹配的條件相比, 聽(tīng)者對(duì)不匹配空間圖片的加工誘發(fā)出更大的 N400波幅, 同時(shí), 與 200 ms和 800 ms的SOA條件不同, 1200 ms的 SOA條件沒(méi)有誘發(fā)N400效應(yīng)。即便在200 ms和800 ms條件下, N400效應(yīng)出現(xiàn)的頭皮區(qū)域從后部移到前部額葉區(qū)域。這可能是因?yàn)轱D中回區(qū)域在意義加工中的激活不受 SOA影響, 而額下皮層的激活受到 SOA的調(diào)節(jié)(Gold et al., 2006)。后續(xù)研究(Zhou, Jiang, Wu, &Yang, 2015)進(jìn)一步探討音樂(lè)對(duì)運(yùn)動(dòng)場(chǎng)景的表征。結(jié)果表明, 無(wú)論是在目標(biāo)判斷任務(wù)下, 或是在內(nèi)隱的記憶任務(wù)下, 聽(tīng)者對(duì)不匹配圖片的加工均誘發(fā)了比匹配條件更大的N400, 表明聽(tīng)者可以自動(dòng)激活音樂(lè)所表征的運(yùn)動(dòng)概念; 多元回歸分析的結(jié)果表明, 對(duì)概念的啟動(dòng)可以由特定的音樂(lè)聲學(xué)和結(jié)構(gòu)因素所預(yù)測(cè), 同時(shí), 不同形象性概念的傳達(dá)依賴(lài)于不同的聲學(xué)和結(jié)構(gòu)因素, 揭示了形象性外在意義與音樂(lè)特征的聯(lián)系。
綜上所述, 已有研究主要通過(guò)語(yǔ)義啟動(dòng)范式來(lái)考察音樂(lè)外在意義的加工, 其中絕大部分研究通過(guò) N400效應(yīng)考察音樂(lè)的意義啟動(dòng)。與語(yǔ)言相似, 音樂(lè)對(duì)外在意義的啟動(dòng)主要激活雙側(cè)顳中回區(qū)域, 這表明音樂(lè)和語(yǔ)言在意義層面的神經(jīng)關(guān)聯(lián)。然而, 神經(jīng)心理學(xué)的研究發(fā)現(xiàn), 不同符號(hào)屬性所誘發(fā)的音樂(lè)意義加工可能依賴(lài)于不同的腦區(qū),音樂(lè)意義加工的神經(jīng)機(jī)制仍需進(jìn)一步探究。
依據(jù)已有的理論和研究, 在音樂(lè)意義加工中,視覺(jué)與運(yùn)動(dòng)概念主要與形象性符號(hào)屬性有關(guān)(Fritz, Schmude, Jentschke, Friederici, & Koelsch,2013; Zhou et al., 2014, 2015), 情緒性概念主要與指示性符號(hào)屬性有關(guān)(如, Daltrozzo & Sch?n, 2009;Goerlich et al., 2012; Steinbeis & Koelsch, 2011)。這兩種符號(hào)屬性都可以直接通過(guò)音樂(lè)的特征得以表現(xiàn)。
盡管視覺(jué)性與情緒性對(duì)象都屬于音樂(lè)表現(xiàn)的內(nèi)容, 但是, 就表現(xiàn)對(duì)象而言, 音樂(lè)還可以用于表現(xiàn)哲理性的對(duì)象(Davies, 1994)。哲理性對(duì)象的表現(xiàn)不僅依賴(lài)于象征性的符號(hào)屬性, 而且也依賴(lài)于形象性與指示性的符號(hào)屬性。比如, 貝多芬《“命運(yùn)”交響曲》一開(kāi)始就出現(xiàn)強(qiáng)有力的4個(gè)音,其節(jié)奏和音高組合酷似命運(yùn)之神的敲門(mén)聲, 其中既有表征敲門(mén)聲的形象性符號(hào), 也有表征不安情緒的指示性符號(hào)。另一方面, 作曲家也可以直接借助具有象征意義的曲調(diào)(如國(guó)歌、宗教彌撒曲等)表現(xiàn)抽象概念, 比如, 鋼琴協(xié)奏曲《黃河》第四樂(lè)章的前奏及結(jié)束部分出現(xiàn)《東方紅》曲調(diào), 使人聯(lián)想起領(lǐng)袖毛澤東的偉大。在這種情況下, 音樂(lè)特征也許并未與所表現(xiàn)的對(duì)象存在關(guān)聯(lián), 因此這種象征手法在某種程度上具有約定俗成的性質(zhì)。由于音樂(lè)對(duì)哲理性概念的傳達(dá)涉及不同的外在意義加工途徑, 相關(guān)研究將有助于驗(yàn)證音樂(lè)外在意義加工的認(rèn)知理論。
如果不同范疇的概念加工所依賴(lài)的神經(jīng)區(qū)域和網(wǎng)絡(luò)具有特異性(Pulvermüller, 2013), 哲理性概念的加工機(jī)制則可能有別于形象性與情緒性概念。雖然人們對(duì)音樂(lè)基本情緒和形象性意義的理解在一定程度上具有跨文化的普遍性(Fritz et al.,2009, 2013), 然而, 目前尚未有研究考察聽(tīng)者能否加工哲理性概念。如果答案是肯定的話(huà),那么聽(tīng)者是如何加工這些哲理性概念?此外, 由于象征性音樂(lè)意義的加工更多涉及長(zhǎng)時(shí)記憶信息的提取等加工過(guò)程, 它與形象性與指示性符號(hào)傳達(dá)哲理性概念的認(rèn)知神經(jīng)機(jī)制可能存在差異。因此,考察哲理性概念的加工可能闡明不同加工途徑的區(qū)別與聯(lián)系, 這不僅是對(duì)已有理論的補(bǔ)充和完善,也有助于揭示大腦通過(guò)不同方式加工音樂(lè)外在意義的神經(jīng)機(jī)制。
對(duì)音樂(lè)哲理性對(duì)象的理解是不是音樂(lè)工作者的專(zhuān)利?換言之, 音樂(lè)訓(xùn)練經(jīng)歷是否影響聽(tīng)者對(duì)音樂(lè)哲理性對(duì)象的理解?盡管有研究認(rèn)為音樂(lè)訓(xùn)練對(duì)音樂(lè)理解可能存在影響(Bigand, Poulin, Tillmann,Madurell, & D'Adamo, 2003; Poulin-Charronnat,Bigand, & Koelsch, 2006; Poulin-Charronnat, Bigand,Madurell, & Peereman, 2005), 但是與音樂(lè)外在意義加工直接相關(guān)的研究還存在爭(zhēng)議。比如,Steinbeis和Koelsch (2011)發(fā)現(xiàn), 與情感內(nèi)容不匹配條件相比, 音樂(lè)家和非音樂(lè)家均對(duì)情感內(nèi)容匹配的條件做出更快的反應(yīng), 同時(shí), 音樂(lè)家與非音樂(lè)家對(duì)情緒概念的加工均誘發(fā)了 N400效應(yīng), 二者的波幅和腦地形圖均無(wú)顯著差異。該結(jié)果得到Daltrozzo和 Sch?n (2009)的驗(yàn)證。然而, 有研究發(fā)現(xiàn), 音樂(lè)家可以對(duì)情緒不匹配的詞匯或和弦加工誘發(fā)N400效應(yīng)(Steinbeis & Koelsch, 2008), 而非音樂(lè)家只對(duì)情緒不匹配的詞匯加工誘發(fā) N400效應(yīng), 對(duì)情緒不匹配的和弦加工無(wú)法誘發(fā) N400效應(yīng)(Steinbeis, 2008), 這似乎表明, 沒(méi)有受過(guò)音樂(lè)訓(xùn)練的人對(duì)音樂(lè)外在意義的加工更多依賴(lài)于詞匯。音樂(lè)訓(xùn)練效應(yīng)的不一致結(jié)論可能緣于兩個(gè)原因:1)刺激呈現(xiàn)方式的差異。比如, 在采用詞?音樂(lè)配對(duì)的刺激呈現(xiàn)方式時(shí), 研究存在音樂(lè)訓(xùn)練效應(yīng)(Steinbeis, 2008; Steinbeis & Koelsch, 2008), 而Steinbeis和Koelsch (2011)的研究采用音樂(lè)?詞配對(duì)的刺激呈現(xiàn)方式, 未發(fā)現(xiàn)音樂(lè)訓(xùn)練效應(yīng)。2)音樂(lè)結(jié)構(gòu)復(fù)雜性的差異。比如, Steinbeis (2008)的研究以及 Steinbeis和 Koelsch (2008)的研究采用單個(gè)和弦作為刺激, 而Daltrozzo和Sch?n (2009)采用音樂(lè)片段。研究發(fā)現(xiàn), 音樂(lè)訓(xùn)練對(duì)音樂(lè)結(jié)構(gòu)加工的影響受制于音樂(lè)刺激的長(zhǎng)度(Bigand & Parncutt,1999; Bigand, Parncutt, & Lerdahl, 1996), 這也為音樂(lè)訓(xùn)練效應(yīng)與音樂(lè)結(jié)構(gòu)復(fù)雜性的交互關(guān)系提供了證據(jù)。
如果音樂(lè)訓(xùn)練對(duì)音樂(lè)外在意義加工的影響可能與音樂(lè)結(jié)構(gòu)的長(zhǎng)度存在交互關(guān)系, 哲理性概念的加工可能更為依賴(lài)聽(tīng)者的音樂(lè)訓(xùn)練經(jīng)歷。這是因?yàn)? 雖然單個(gè)和弦足以誘發(fā)對(duì)情緒概念的加工(Steinbeis & Koelsch, 2011), 但單個(gè)和弦難以表現(xiàn)哲理性概念。在音樂(lè)創(chuàng)作中, 作曲家對(duì)哲理性概念的傳達(dá), 有時(shí)會(huì)通過(guò)較長(zhǎng)的音樂(lè)結(jié)構(gòu)來(lái)實(shí)現(xiàn)。在這種情況下, 音樂(lè)的謀篇布局與語(yǔ)篇對(duì)主題的推進(jìn)和發(fā)展類(lèi)似(Jackendoff & Lerdahl, 2006)。對(duì)于聽(tīng)者來(lái)說(shuō), 對(duì)這種連續(xù)性信息的加工包含聲音元素在局部和非局部的依存關(guān)系(Koelsch, Rohrmeier,Torrecuso, & Jentschke, 2013), 而人類(lèi)神經(jīng)系統(tǒng)對(duì)局部和非局部關(guān)系的表征, 依賴(lài)于不同時(shí)間尺度上的信息, 反映為不同頻率的神經(jīng)元振蕩(Giraud& Poeppel, 2012; Singer, 1995)以及不同的記憶類(lèi)型(Baddeley, 2003; N??t?neiv et al., 1997)。因此,聽(tīng)者在樂(lè)句(主題)層面和篇章(主題發(fā)展)層面對(duì)哲理性概念的加工可能依賴(lài)于不同的知識(shí)背景和能力?;诖? 我們認(rèn)為, 從音樂(lè)結(jié)構(gòu)長(zhǎng)度的視角來(lái)探究音樂(lè)哲理性概念的加工, 將有助于明確音樂(lè)訓(xùn)練在音樂(lè)外在意義加工中的作用。
基于以上分析, 本項(xiàng)目將通過(guò)音樂(lè)表現(xiàn)哲理性對(duì)象的兩種方法探究哲理性概念的加工機(jī)制:1)完全依賴(lài)于音樂(lè)特征表現(xiàn)哲理性概念; 2)借助象征性曲調(diào)表現(xiàn)哲理性概念。同時(shí), 通過(guò)操縱和控制音樂(lè)刺激的特征, 本項(xiàng)目將系統(tǒng)考察音樂(lè)訓(xùn)練對(duì)哲理性概念加工的影響。
為了實(shí)現(xiàn)以上研究目的, 我們對(duì)相關(guān)的研究問(wèn)題進(jìn)行分解。首先, 以哲理性概念的表現(xiàn)方法為主線(xiàn), 在不同的研究中, 我們分別探討在完全依賴(lài)于音樂(lè)特征和借助象征性曲調(diào)表現(xiàn)哲理性對(duì)象兩種情況下, 聽(tīng)者對(duì)哲理性概念的加工及其神經(jīng)機(jī)制。其次, 為了明確音樂(lè)訓(xùn)練的作用, 在以上研究中, 我們以音樂(lè)家和非音樂(lè)家作為實(shí)驗(yàn)被試,考察兩組被試對(duì)音樂(lè)哲理性概念的加工及其神經(jīng)機(jī)制是否存在差異。第三, 考慮到音樂(lè)訓(xùn)練效應(yīng)可能受音樂(lè)結(jié)構(gòu)長(zhǎng)度的調(diào)節(jié), 且作曲家通常通過(guò)音樂(lè)主題的邏輯發(fā)展傳達(dá)整個(gè)篇章的“哲理性基調(diào)”, 因此, 在完全依賴(lài)于音樂(lè)特征表現(xiàn)哲理性概念的研究中, 本項(xiàng)目將分別從樂(lè)句(主題)和篇章(主題發(fā)展)兩個(gè)層面展開(kāi)研究; 另一方面, 在借助象征性曲調(diào)表現(xiàn)哲理性概念的研究中, 由于象征手法主要在音樂(lè)主題層面使用, 本項(xiàng)目主要從樂(lè)句(主題)層面展開(kāi)研究。
基于此, 本項(xiàng)目由 3個(gè)研究組成:研究 1和研究2分別從樂(lè)句和篇章層面考察聽(tīng)者依據(jù)音樂(lè)特征對(duì)哲理性概念的加工, 研究 3從樂(lè)句層面考察聽(tīng)者依據(jù)象征手法對(duì)哲理性概念的加工, 同時(shí),每個(gè)研究均考察音樂(lè)家和非音樂(lè)家在加工哲理性概念時(shí)的神經(jīng)差異。在對(duì)以上3個(gè)研究進(jìn)行考察的基礎(chǔ)上, 我們將進(jìn)一步探究各個(gè)研究結(jié)果之間的關(guān)系, 即考察哲理性概念加工、表現(xiàn)手法、音樂(lè)訓(xùn)練以及音樂(lè)結(jié)構(gòu)長(zhǎng)度等因素之間的關(guān)系。
實(shí)驗(yàn)范式方面, 樂(lè)句層面的研究(研究1和研究3)主要借鑒成熟的語(yǔ)義啟動(dòng)范式, 使用ERP技術(shù)對(duì)概念啟動(dòng)及其相關(guān)電生理效應(yīng)進(jìn)行考察, 同時(shí)考察聽(tīng)者在不同的刺激呈現(xiàn)方式(音樂(lè)?詞vs.詞?音樂(lè))下誘發(fā)的概念啟動(dòng)效應(yīng)。篇章層面的研究(研究 2)將借助 fMRI技術(shù), 考察在不借助象征手法的情況下, 音樂(lè)主題的邏輯發(fā)展對(duì)聽(tīng)者加工哲理性概念的影響, 明確聽(tīng)者在篇章層面加工哲理性概念所依賴(lài)的腦區(qū)和神經(jīng)通路。為了使研究更具生態(tài)效度, 所有實(shí)驗(yàn)均選取自然的音樂(lè)作品音響作為刺激。
就被試的篩選而言, 本項(xiàng)目擬從音樂(lè)學(xué)院選取受過(guò) 15年以上專(zhuān)業(yè)音樂(lè)訓(xùn)練的人作為音樂(lè)家被試, 選取未受過(guò)專(zhuān)業(yè)音樂(lè)訓(xùn)練的普通人作為非音樂(lè)家被試, 通過(guò)相關(guān)量表排除失歌癥、抑郁、述情障礙等因素的影響。同時(shí), 在各個(gè)研究中, 對(duì)兩組被試的年齡、利手、受教育年限(非音樂(lè))以及性別等方面進(jìn)行匹配。為了控制音樂(lè)材料熟悉性的影響, 在每個(gè)實(shí)驗(yàn)前進(jìn)行熟悉性前測(cè), 確保兩組被試對(duì)各實(shí)驗(yàn)材料的熟悉性不具有差異。
研究1 音樂(lè)主題特征對(duì)哲理性概念的表達(dá):ERP研究
本研究的目的是考察音樂(lè)家和非音樂(lè)家能否通過(guò)音樂(lè)主題的特征啟動(dòng)哲理性概念的表征, 并誘發(fā)相應(yīng)的電生理反應(yīng)。實(shí)驗(yàn)采用概念啟動(dòng)范式,刺激包括音樂(lè)和概念詞。音樂(lè)刺激均為音樂(lè)作品的主題, 排除象征性手法的影響。概念詞選自音樂(lè)作品的標(biāo)題或文本說(shuō)明, 均為抽象的哲理性概念, 如“生命”、“死亡”、“奉獻(xiàn)”、“命運(yùn)”等。音樂(lè)與概念詞在意義上構(gòu)成一致或不一致的條件。同時(shí), 為了系統(tǒng)厘清音樂(lè)訓(xùn)練的作用, 實(shí)驗(yàn)還將操縱刺激的呈現(xiàn)方式。在此基礎(chǔ)上, 實(shí)驗(yàn)將比較音樂(lè)家和非音樂(lè)家對(duì)哲理性概念加工所誘發(fā)的N400效應(yīng)。
為了探究音樂(lè)本身特征在哲理性概念表達(dá)中的作用, 本研究將進(jìn)一步進(jìn)行聲學(xué)結(jié)構(gòu)分析和回歸分析。聲學(xué)和結(jié)構(gòu)標(biāo)注由兩名專(zhuān)業(yè)音樂(lè)家獨(dú)立完成, 為確保聲學(xué)和結(jié)構(gòu)分析的準(zhǔn)確性, 將對(duì)標(biāo)注結(jié)果進(jìn)行一致性分析。聲學(xué)和結(jié)構(gòu)分析的變量將作為預(yù)測(cè)變量, 腦電實(shí)驗(yàn)的行為數(shù)據(jù)以及 ERP波幅將作為因變量, 分別進(jìn)行回歸分析。
基于聽(tīng)者能夠通過(guò)音樂(lè)結(jié)構(gòu)特征啟動(dòng)情緒性和視覺(jué)性的概念(如, Steinbeis & Koelsch, 2011;Zhou et al., 2014, 2015), 且音樂(lè)訓(xùn)練效應(yīng)在不同的刺激呈現(xiàn)方式下表現(xiàn)不一致(Steinbeis, 2008;Steinbeis & Koelsch, 2008, 2011), 我們對(duì)本研究結(jié)果的預(yù)期如下:1)聽(tīng)者能夠根據(jù)音樂(lè)主題的特征啟動(dòng)哲理性概念的表征, 不一致的目標(biāo)刺激比一致的目標(biāo)刺激誘發(fā)更大的 N400; 2)音樂(lè)訓(xùn)練對(duì)概念啟動(dòng)效應(yīng)的影響受到刺激呈現(xiàn)方式的調(diào)節(jié),在音樂(lè)?詞的刺激呈現(xiàn)方式下, 音樂(lè)家和非音樂(lè)家誘發(fā)的N400效應(yīng)沒(méi)有差異, 在詞?音樂(lè)的刺激呈現(xiàn)方式下, 僅音樂(lè)家可以誘發(fā)N400效應(yīng); 3)音樂(lè)結(jié)構(gòu)特征可以預(yù)測(cè)音樂(lè)主題對(duì)哲理性概念的表達(dá)。
研究 2 音樂(lè)主題的邏輯發(fā)展對(duì)哲理性概念的表達(dá):fMRI研究
本研究的目的是考察音樂(lè)家和非音樂(lè)家能否通過(guò)音樂(lè)主題的邏輯發(fā)展理解音樂(lè)的哲理性基調(diào),并明確其相關(guān)的加工腦區(qū)或神經(jīng)通路。本實(shí)驗(yàn)的刺激材料采用理查德·斯特勞斯的交響曲《死與凈化》(Death and Transfiguration, Op. 24)的一段, 時(shí)長(zhǎng)約5分鐘。該作品以“死亡”為題材, 具有強(qiáng)烈的哲學(xué)意味。作曲家為該音樂(lè)的哲理性表現(xiàn)意圖撰寫(xiě)了詳細(xì)的文字說(shuō)明, 音樂(lè)主題的發(fā)展依據(jù)表現(xiàn)意圖有邏輯地展開(kāi)。根據(jù)已有的CD錄音版本, 將通過(guò)聲學(xué)軟件創(chuàng)建另外3個(gè)不同結(jié)構(gòu)的音響版本,根據(jù)結(jié)構(gòu)組織方式的不同, 各版本中音樂(lè)主題發(fā)展的邏輯性具有差異。每個(gè)被試需要聆聽(tīng)所有 4個(gè)版本的音樂(lè), 以偽隨機(jī)方式呈現(xiàn)。實(shí)驗(yàn)任務(wù)要求被試在聆聽(tīng)過(guò)程中關(guān)注音樂(lè)的表現(xiàn)性, 并對(duì)音樂(lè)的表現(xiàn)強(qiáng)度進(jìn)行評(píng)定。在被試聆聽(tīng)音樂(lè)的過(guò)程中, 通過(guò)fMRI技術(shù)記錄被試的大腦激活情況。每個(gè)版本呈現(xiàn)結(jié)束后, 被試需要判斷音樂(lè)表達(dá)的基調(diào), 并進(jìn)行等級(jí)評(píng)定。為了考察音樂(lè)訓(xùn)練的作用,實(shí)驗(yàn)采用音樂(lè)訓(xùn)練經(jīng)歷不同的兩組被試。
基于音樂(lè)的概念加工與右側(cè)MTG和右側(cè)STS有關(guān)(Steinbeis & Koelsch, 2008), 且已有研究發(fā)現(xiàn)音樂(lè)結(jié)構(gòu)層級(jí)性可以影響聽(tīng)者的加工(Koelsch et al., 2013), 我們對(duì)本研究結(jié)果的預(yù)期如下:1)原始版本比其他版本激活更大范圍的腦區(qū), 同時(shí), 依據(jù)結(jié)構(gòu)組織方式的不同, 各版本激活的腦區(qū)范圍和強(qiáng)度呈現(xiàn)出層級(jí)性差異; 2)激活的腦區(qū)包括右側(cè)MTG和右側(cè)STS等與概念加工相關(guān)的腦區(qū); 3)音樂(lè)家的激活強(qiáng)度高于非音樂(lè)家。
研究3 音樂(lè)象征手法對(duì)哲理性概念的表達(dá):ERP研究
本研究的目的是考察音樂(lè)家和非音樂(lè)家能否通過(guò)象征性的曲調(diào)啟動(dòng)哲理性概念的表征, 并誘發(fā)相應(yīng)的電生理反應(yīng)。本研究采用與研究 1相同的概念啟動(dòng)范式, 實(shí)驗(yàn)刺激包含音樂(lè)主題和概念詞。然而, 本研究的音樂(lè)刺激均為約定俗成的、具有象征性意義的音樂(lè)主題, 對(duì)音樂(lè)特征的影響進(jìn)行控制。概念詞選自音樂(lè)作品的標(biāo)題或相關(guān)文本, 均為抽象的哲理性概念, 如“生命”、“死亡”、“奉獻(xiàn)”、“命運(yùn)”等。根據(jù)音樂(lè)和詞的意義聯(lián)系, 前后刺激構(gòu)成一致或不一致的條件。為了厘清音樂(lè)訓(xùn)練的作用, 與研究 1相似, 本研究將在操縱刺激呈現(xiàn)方式的基礎(chǔ)上, 比較音樂(lè)家和非音樂(lè)家對(duì)哲理性概念加工所誘發(fā)的N400效應(yīng)。
基于不同符號(hào)屬性所誘發(fā)的意義加工依賴(lài)不同的神經(jīng)基礎(chǔ)(Downey et al., 2013; Pulvermüller,2013), 且本研究考察的音樂(lè)象征手法具有約定俗成的性質(zhì), 我們對(duì)本研究結(jié)果的預(yù)期如下:1)聽(tīng)者能夠根據(jù)象征手法啟動(dòng)哲理性概念的表征, 不一致的目標(biāo)刺激比一致的目標(biāo)刺激誘發(fā)更大的N400, 同時(shí), N400效應(yīng)的頭皮分布與研究 1的N400效應(yīng)頭皮分布不同; 2)兩組被試誘發(fā)的概念啟動(dòng)效應(yīng)沒(méi)有差異, 音樂(lè)訓(xùn)練對(duì)概念啟動(dòng)效應(yīng)的影響不受刺激呈現(xiàn)方式的調(diào)節(jié)。
如果研究假設(shè)得到支持, 則本研究的意義可以體現(xiàn)在如下方面。首先, 在3個(gè)子研究中, 音樂(lè)家與非音樂(lè)家都能夠激活哲理性概念的神經(jīng)表征,這不僅說(shuō)明, 音樂(lè)和語(yǔ)言相似, 能夠傳達(dá)高度抽象化的哲理性概念, 同時(shí)也說(shuō)明, 一般人也具備對(duì)音樂(lè)哲理性意義的加工能力。然而, 刺激呈現(xiàn)方式會(huì)影響音樂(lè)訓(xùn)練在抽象概念加工中的作用:當(dāng)哲理性概念的加工依賴(lài)于音樂(lè)特征時(shí), 在以語(yǔ)言材料作為目標(biāo)刺激的情況下, 音樂(lè)家和非音樂(lè)家誘發(fā)的 N400效應(yīng)沒(méi)有差異; 在以音樂(lè)作為目標(biāo)刺激的情況下, 僅音樂(lè)家可以誘發(fā)N400效應(yīng)。這表明, 音樂(lè)家可以對(duì)音樂(lè)直接誘發(fā)哲理性概念的加工, 而非音樂(lè)家對(duì)哲理性概念的激活更多依賴(lài)于語(yǔ)言。此外, fMRI結(jié)果發(fā)現(xiàn), 根據(jù)音樂(lè)結(jié)構(gòu)邏輯性的不同, 概念加工激活的腦區(qū)范圍和強(qiáng)度呈現(xiàn)出層級(jí)性差異, 且音樂(lè)家的大腦激活強(qiáng)度高于非音樂(lè)家。這不僅揭示了音樂(lè)在篇章水平上傳達(dá)哲理性概念的神經(jīng)基礎(chǔ), 同時(shí)也說(shuō)明音樂(lè)訓(xùn)練可能提高對(duì)音樂(lè)結(jié)構(gòu)的加工能力, 進(jìn)而促進(jìn)音樂(lè)外在意義的知覺(jué)。最后, 音樂(lè)主題特征誘發(fā)的N400效應(yīng)在頭皮分布上異于象征性音樂(lè)誘發(fā)的N400效應(yīng)。這表明, 盡管聽(tīng)者可以通過(guò)不同的音樂(lè)符號(hào)屬性參與抽象概念的加工, 但不同符號(hào)屬性誘發(fā)概念加工的神經(jīng)通路存在區(qū)別。
總之, 本項(xiàng)目研究結(jié)果將意味著對(duì)音樂(lè)哲理性概念的加工并不是音樂(lè)工作者的專(zhuān)利, 揭示了人類(lèi)對(duì)音樂(lè)外在意義的理解具有一定程度的普遍性。在此基礎(chǔ)上, 未來(lái)研究可以進(jìn)一步探究音樂(lè)意義加工是否具有跨文化、跨種族的普遍性。此外, 鑒于額顳癡呆病人對(duì)音樂(lè)外在意義的加工存在特異性損傷(Downey et al., 2013), 如果本研究可以探明音樂(lè)外在意義加工的神經(jīng)機(jī)制, 這對(duì)意義加工相關(guān)神經(jīng)障礙的診斷和治療當(dāng)不無(wú)借鑒之處。
周臨舒, 蔣存梅, 楊玉芳. (2012). 音樂(lè)和語(yǔ)言句法認(rèn)知的比較.科學(xué)通報(bào), 57(28–29), 2674–2685.
Baddeley, A. (2003). Working memory: Looking back and looking forward.Nature Reviews Neuroscience, 4(10),829–839.
Bigand, E., & Parncutt, R. (1999). Perceiving musical tension in long chord sequences.Psychological Research,62(4), 237–254.
Bigand, E., Parncutt, R., & Lerdahl, F. (1996). Perception of musical tension in short chord sequences: The influence of harmonic function, sensory dissonance, horizontal motion,and musical training.Perception & Psychophysics, 58(1),125–141.
Bigand, E., Poulin, B., Tillmann, B., Madurell, F., &D'Adamo, D. A. (2003). Sensory versus cognitive components in harmonic priming.Journal of Experimental Psychology:Human Perception and Performance, 29(1), 159–171.
Daltrozzo, J., & Sch?n, D. (2009). Conceptual processing in music as revealed by N400 effects on words and musical targets.Journal of Cognitive Neuroscience, 21(10), 1882–1892.
Darwin, C. (1871).The descent of man, and selection in relation to sex.London: John Murray.
Davies, S. (1994).Musical meaning and expression. New York: Cornell University Press.
Downey, L. E., Blezat, A., Nicholas, J., Omar, R., Golden, H.L., Mahoney, C. J., ... Warren, J. D. (2013). Mentalising music in frontotemporal dementia.Cortex, 49(7), 1844–1855.
Frey, A., Marie, C., Prod'Homme, L., Timsit-Berthier, M.,Sch?n, D., & Besson, M. (2009). Temporal semiotic units as minimal meaningful units in music? An electrophysiological approach.Music Perception, 26(3), 247–256.
Friederici, A. D., & Wartenburger, I. (2010). Language and brain.Wiley Interdisciplinary Reviews: Cognitive Science,1(2), 150–159.
Fritz, T., Jentschke, S., Gosselin, N., Sammler, D., Peretz, I.,Turner, R., ... Koelsch, S. (2009). Universal recognition of three basic emotions in music.Current Biology, 19(7),573–576.
Fritz, T. H., Schmude, P., Jentschke, S., Friederici, A. D., &Koelsch, S. (2013). From understanding to appreciating music cross-culturally.PLoS ONE, 8(9), e72500.
Giraud, A.-L., & Poeppel, D. (2012). Cortical oscillations and speech processing: Emerging computational principles and operations.Nature Neuroscience, 15(4), 511–517.
Goerlich, K. S., Witteman, J., Aleman, A., & Martens, S.(2011). Hearing feelings: Affective categorization of music and speech in alexithymia, an ERP study.PLoS ONE, 6(5), e19501.
Goerlich, K. S., Witteman, J., Schiller, N. O., van Heuven, V.J., Aleman, A., & Martens, S. (2012). The nature of affective priming in music and speech.Journal of Cognitive Neuroscience, 24(8), 1725–1741.
Gold, B. T., Balota, D. A., Jones, S. J., Powell, D. K., Smith,C. D., & Andersen, A. H. (2006). Dissociation of automatic and strategic lexical-semantics: Functional magnetic resonance imaging evidence for differing roles of multiple frontotemporal regions.The Journal of Neuroscience, 26(24), 6523–6532.
Hanslick, E. (1854).The beautiful in music(G. Cohen, Trans.1885, 7th ed.). New York: Liberal Arts Press.
Jackendoff, R., & Lerdahl, F. (2006). The capacity for music:What is it, and what’s special about it?Cognition, 100(1),33–72.
Kamiyama, K. S., Abla, D., Iwanaga, K., & Okanoya, K.(2013). Interaction between musical emotion and facial expression as measured by event-related potentials.Neuropsychologia, 51(3), 500–505.
Kivy, P. (1990).Music alone: Philosophical reflections on the purely musical experience. New York: Cornell University Press.
Kivy, P. (2002).Introduction to a philosophy of music.Oxford, UK: Oxford University Press.
Koelsch, S. (2011). Towards a neural basis of processing musical semantics.Physics of Life Reviews, 8(2), 89–105.
Koelsch, S. (2012).Brain and music. Oxford, UK: Wiley-Blackwell.
Koelsch, S., Kasper, E., Sammler, D., Schulze, K., Gunter, T.,& Friederici, A. D. (2004). Music, language and meaning:Brain signatures of semantic processing.Nature Neuroscience,7(3), 302–307.
Koelsch, S., Rohrmeier, M., Torrecuso, R., & Jentschke, S.(2013). Processing of hierarchical syntactic structure in music.Proceedings of the National Academy of Sciences of the United States of America, 110(38), 15443–15448.
Koopman, C., & Davies, S. (2001). Musical meaning in a broader perspective.The Journal of Aesthetics and Art Criticism, 59(3), 261–273.
Lau, E. F., Phillips, C., & Poeppel, D. (2008). A cortical network for semantics: (de) constructing the N400.Nature Reviews Neuroscience, 9(12), 920–933.
Meyer, L. B. (1956).Emotion and meaning in music.Chicago: University of Chicago Press.
N??t?neiv, R., Lehtokoski, A., Lennest, M., Cheour, M.,Huotilainen, M., Iivonen, A., ... Alho, K. (1997).Language-specific phoneme representations revealed by electric and magnetic brain responses.Nature, 385, 432–434.
Painter, J. G., & Koelsch, S. (2011). Can out-of-context musical sounds convey meaning? An ERP study on the processing of meaning in music.Psychophysiology, 48(5),645–655.
Patel, A. D. (2008).Music, language, and the brain. New York: Oxford University Press.
Poulin-Charronnat, B., Bigand, E., & Koelsch, S. (2006).Processing of musical syntax tonic versus subdominant:An event-related potential study.Journal of Cognitive Neuroscience, 18(9), 1545–1554.
Poulin-Charronnat, B., Bigand, E., Madurell, F., & Peereman,R. (2005). Musical structure modulates semantic priming in vocal music.Cognition, 94(3), B67–B78.
Pulvermüller, F. (2013). How neurons make meaning: Brain mechanisms for embodied and abstract-symbolic semantics.Trends in Cognitive Sciences, 17(9), 458–470.
Rebuschat, P., Rohrmeier, M., Hawkins, J. A., & Cross, I.(2011).Language and music as cognitive systems. New York: Oxford University Press.
Sch?n, D., Ystad, S., Kronland-Martinet, R., & Besson, M.(2010). The evocative power of sounds: Conceptual priming between words and nonverbal sounds.Journal of Cognitive Neuroscience, 22(5), 1026–1035.
Singer, W. (1995). Development and plasticity of cortical processing architectures.Science, 270(5237), 758–764.
Sollberge, B., Rebe, R., & Eckstein, D. (2003). Musical chords as affective priming context in a word-evaluation task.Music Perception, 20(3), 263–282.
Steinbeis, N. (2008).Investigating the meaning of music using EEG and fMRI(Unpublished doctorial dissertation).Max Planck Institute for Human Cognitive and Brain Sciences, Leipzig.
Steinbeis, N., & Koelsch, S. (2008). Comparing the processing of music and language meaning using EEG and fMRI provides evidence for similar and distinct neural representations.PLoS ONE, 3(5), e2226.
Steinbeis, N., & Koelsch, S. (2011). Affective priming effects of musical sounds on the processing of word meaning.Journal of Cognitive Neuroscience, 23(3), 604–621.
Wallin, N. L., Merker, B., & Brown, S. (2001).The origins of music. Cambridge, MA: MIT Press.
Zhou, L. S., Jiang, C. M., Delogu, F., & Yang, Y. F. (2014).Spatial conceptual associations between music and pictures as revealed by N400 effect.Psychophysiology,51(6), 520–528.
Zhou, L. S., Jiang, C. M., Wu, Y. Y., & Yang, Y. F. (2015).Conveying the concept of movement in music: An eventrelated brain potential study.Neuropsychologia, 77, 128–136.