手語(yǔ)模態(tài)對(duì)句子加工的影響?yīng)?/h1>
2018-01-31 08:40:43陳燕
考試周刊 2017年73期 關(guān)鍵詞：影響
摘 要： 手語(yǔ)模態(tài)對(duì)句子加工具有一定的影響，這是毋庸置疑的。單單針對(duì)手勢(shì)模態(tài)的語(yǔ)義和語(yǔ)音信息來(lái)說(shuō)，它不僅對(duì)詞匯的通達(dá)過(guò)程具有一定的影響，而且對(duì)對(duì)應(yīng)的其他條件也同樣如此。因此，本文將從手語(yǔ)模態(tài)對(duì)句子的加工影響進(jìn)行入手分析，觀察手勢(shì)音韻特征，闡述具體的影響因素和過(guò)程，以供參考。
關(guān)鍵詞： 手語(yǔ)模態(tài)；句子加工；影響
一、 前言
隨著各國(guó)學(xué)者陸續(xù)提出與句子加工相關(guān)的理論模型，手語(yǔ)模態(tài)得到了一定的發(fā)展，基本解決了目前句子加工中的一些難點(diǎn)問(wèn)題。但在具體問(wèn)題研究上還存在著一定的不足，很多句子還只是建立在聲音、語(yǔ)言的實(shí)驗(yàn)基礎(chǔ)上，在手語(yǔ)模態(tài)方面不能得以有效應(yīng)用。手語(yǔ)模態(tài)的建立還需要做進(jìn)一步加強(qiáng)，下面本文將細(xì)談它在句子加工中的相關(guān)影響。
二、 研究對(duì)象與方法
（一） 被試
因?yàn)槭菍?duì)手語(yǔ)模態(tài)進(jìn)行研究，所以我們找了十八位具有先天性耳聾的志愿者進(jìn)行了實(shí)驗(yàn)。這十八位被測(cè)試志愿者的挑選要求是：年齡相近、男女分配合理、裸眼或矯正視力正常，沒(méi)有相關(guān)的家族性精神障礙等條件。在具體的選擇過(guò)程中，半數(shù)為接受過(guò)特殊教育的南京市聾人學(xué)校學(xué)生，另一半則從社會(huì)人員中進(jìn)行挑選。
（二） 材料準(zhǔn)備
實(shí)驗(yàn)的進(jìn)行。被試者事先均已經(jīng)做了相關(guān)的手語(yǔ)測(cè)試，且保證能看懂刺激材料的手勢(shì)，可以接受實(shí)驗(yàn)中自變量的所有變化。自變量的相關(guān)設(shè)計(jì)為手勢(shì)音譯的變化，具體可分為四種：基準(zhǔn)手勢(shì)、意近手勢(shì)、音近手勢(shì)和無(wú)關(guān)手勢(shì)。實(shí)驗(yàn)要求所有的手勢(shì)都是高頻手勢(shì)。實(shí)驗(yàn)人員準(zhǔn)備好攝像機(jī)，對(duì)實(shí)驗(yàn)過(guò)程進(jìn)行拍攝記錄，并保證最后制作視頻的背景顏色和手勢(shì)具有較為鮮明的反差，這樣做的目的是方便觀察和記錄。
在實(shí)驗(yàn)進(jìn)行前，需要準(zhǔn)備好測(cè)試句子片段——由于一個(gè)句子平均分為7個(gè)手勢(shì)。因此只需要前面的6個(gè)手勢(shì)與4個(gè)水平手勢(shì)進(jìn)行排列組合，構(gòu)成4個(gè)測(cè)試片段。這四個(gè)水平手勢(shì)相關(guān)的截取長(zhǎng)度，應(yīng)該從準(zhǔn)備進(jìn)行開始，直到在手部放下，時(shí)間為1秒左右即可。在實(shí)驗(yàn)句子準(zhǔn)備過(guò)程中，一共需要152個(gè)句子，分為八個(gè)句干和四個(gè)水平手勢(shì)，一共可以構(gòu)成32個(gè)練習(xí)視頻。
（三） 實(shí)驗(yàn)程序
本次我們用EPrime軟件來(lái)編寫相關(guān)實(shí)驗(yàn)程序。為了更明顯地呈現(xiàn)出刺激效果，我們將其他的所有界面背景選擇呈現(xiàn)出灰色。相關(guān)實(shí)驗(yàn)的任務(wù)為判斷任務(wù)，相關(guān)的反應(yīng)操作鍵，為大家所用游戲手柄的左右鍵，這里要注意一點(diǎn)：被試者事先需要操作手柄進(jìn)行練習(xí)、熟悉程序及實(shí)驗(yàn)步驟，各方面確認(rèn)無(wú)異常后，才能正式開始實(shí)驗(yàn)。
實(shí)驗(yàn)開始后，被試者需要坐在電腦的正前方，對(duì)屏幕中出現(xiàn)的手語(yǔ)指導(dǎo)視頻進(jìn)行閱讀并理解對(duì)句子進(jìn)行判斷。在實(shí)驗(yàn)進(jìn)行的過(guò)程中，刺激材料的呈現(xiàn)具有一定的順序，分別是300ms的注視點(diǎn)“+”，然后是句干視頻，它為1500ms，接著出現(xiàn)的就是300ms的手勢(shì)視頻，最后則是4000ms的“？？”。在全部進(jìn)行完之后，對(duì)實(shí)驗(yàn)進(jìn)行按鍵結(jié)束，屏幕會(huì)出現(xiàn)灰色，用來(lái)讓被試者的眼睛進(jìn)行休息，如果在此期間被試者做出反應(yīng)，電腦則會(huì)自動(dòng)進(jìn)入到下一輪的測(cè)試。
三、 實(shí)驗(yàn)結(jié)果與討論
（一） N1
我們通過(guò)實(shí)驗(yàn)研究發(fā)現(xiàn)，在目標(biāo)手勢(shì)出現(xiàn)了之后，時(shí)間在100～200ms之內(nèi)，窗口會(huì)出現(xiàn)N1，它的潛伏期一般在130ms左右，在相同基準(zhǔn)和音近條件下N1的波峰更尖銳，并會(huì)在所有電極上進(jìn)行顯示，其中尤為突出的是中線和右線的電極上。在200～300ms時(shí)，窗口會(huì)出現(xiàn)P250——一道連續(xù)的更尖銳的波峰，它的潛伏期經(jīng)我們觀察發(fā)現(xiàn)一般是在250ms左右。對(duì)這樣的啟動(dòng)關(guān)系進(jìn)行重復(fù)測(cè)量和分析后，我們發(fā)現(xiàn)這樣啟動(dòng)關(guān)系的進(jìn)行分別為基準(zhǔn)手勢(shì)，義近手勢(shì)，音近手勢(shì)和無(wú)關(guān)手勢(shì)四種，一共有19個(gè)電極。從這樣的狀態(tài)來(lái)看，發(fā)現(xiàn)重復(fù)啟動(dòng)的關(guān)系，其主效應(yīng)沒(méi)有達(dá)到相應(yīng)的顯著水平，但是電極的主效應(yīng)卻極為顯著，重復(fù)啟動(dòng)關(guān)系和電極之間的交互作用并不顯著。因此，這里的N1可能是類似于視覺(jué)詞匯識(shí)別的研究結(jié)果，它代表了語(yǔ)意變量的激活標(biāo)志。
（二） N300
在實(shí)驗(yàn)進(jìn)行到刺激現(xiàn)象呈現(xiàn)之后，可以發(fā)現(xiàn)在200～400ms的時(shí)候，窗口內(nèi)約在320ms時(shí)，出現(xiàn)了一個(gè)腦電反應(yīng)N300，它的出現(xiàn)誘發(fā)了一個(gè)負(fù)走向并以頂部和中央?yún)^(qū)域?yàn)橹行?，分布極為廣泛的波動(dòng)現(xiàn)象——在前幾次的實(shí)驗(yàn)中曾記錄了類似反應(yīng)但并未加以關(guān)注，出現(xiàn)這種情況的原因可能是在于它的波動(dòng)幅度較小，也可能是因?yàn)檠芯空邔?duì)它的重視程度較低，相關(guān)的研究重點(diǎn)不在于此。在手勢(shì)詞匯通達(dá)屬性的研究和對(duì)電腦反應(yīng)的調(diào)控方面，更加關(guān)注于手勢(shì)詞匯相關(guān)的語(yǔ)義表現(xiàn)特征和一些相對(duì)更晚期的N400。對(duì)它們的重復(fù)啟動(dòng)關(guān)系分別進(jìn)行4×19的重復(fù)測(cè)量差并對(duì)結(jié)果進(jìn)行分析，從相應(yīng)的實(shí)驗(yàn)結(jié)果可以看出，重復(fù)啟動(dòng)關(guān)系的主效應(yīng)達(dá)到了顯著的水平程度，相關(guān)的電極主效應(yīng)也極其顯著，而且，重復(fù)啟動(dòng)關(guān)系與電極的交互作用也相對(duì)顯著。如果對(duì)重復(fù)啟動(dòng)關(guān)系的主效應(yīng)進(jìn)行下一步的多重比較檢驗(yàn)，可以發(fā)現(xiàn)，基準(zhǔn)和音近的啟動(dòng)效應(yīng)已經(jīng)達(dá)到了顯著的水平，意近的啟動(dòng)效應(yīng)也接近于顯著效果，但是無(wú)關(guān)啟動(dòng)效應(yīng)卻不顯著。但是即使如此，無(wú)關(guān)手勢(shì)也同樣誘發(fā)了N400，因此，我們認(rèn)為交互激活模型，是可以應(yīng)用于手語(yǔ)模態(tài)與句子加工的。
四、 結(jié)語(yǔ)
對(duì)中國(guó)手語(yǔ)模態(tài)與句子加工之間的影響關(guān)系進(jìn)行分析，需要對(duì)手語(yǔ)模式實(shí)驗(yàn)進(jìn)行精心設(shè)計(jì)，充分做好實(shí)驗(yàn)準(zhǔn)備，保證每一個(gè)環(huán)節(jié)的正常實(shí)施。并在進(jìn)行實(shí)驗(yàn)的同時(shí)，認(rèn)真觀察實(shí)驗(yàn)數(shù)據(jù)波動(dòng)，以便于對(duì)數(shù)據(jù)進(jìn)行比較和研究，最后才能得出影響關(guān)系。
參考文獻(xiàn)：
[1]晏心.長(zhǎng)期手語(yǔ)經(jīng)驗(yàn)對(duì)雙模態(tài)雙語(yǔ)者口語(yǔ)、書面語(yǔ)理解系統(tǒng)的塑作用.2011.
[2]黃曉曉.基于情景語(yǔ)料庫(kù)的自然手語(yǔ)構(gòu)詞研究.2012.
作者簡(jiǎn)介：
陳燕，江蘇省南京市，南京市聾人學(xué)校。endprint
猜你喜歡
美食網(wǎng)紅如何影響我們吃什么英語(yǔ)文摘(2022年4期)2022-06-05 07:45:18 是什么影響了滑動(dòng)摩擦力的大小中學(xué)生數(shù)理化·八年級(jí)物理人教版(2022年3期)2022-03-16 05:55:08 哪些顧慮影響擔(dān)當(dāng)?當(dāng)代陜西(2021年2期)2021-03-29 07:41:24 影響大師家庭影院技術(shù)(2020年10期)2020-12-14 07:54:18 沒(méi)錯(cuò)，痛經(jīng)有時(shí)也會(huì)影響懷孕媽媽寶寶(2017年3期)2017-02-21 01:22:28 擴(kuò)鏈劑聯(lián)用對(duì)PETG擴(kuò)鏈反應(yīng)與流變性能的影響中國(guó)塑料(2016年3期)2016-06-15 20:30:00 基于Simulink的跟蹤干擾對(duì)跳頻通信的影響通信電源技術(shù)(2016年3期)2016-03-26 07:13:38 如何影響他人知識(shí)經(jīng)濟(jì)·中國(guó)直銷(2016年3期)2016-02-27 16:15:49 APRIL siRNA對(duì)SW480裸鼠移植瘤的影響現(xiàn)代檢驗(yàn)醫(yī)學(xué)雜志(2014年6期)2014-02-02 03:02:04
摘 要： 手語(yǔ)模態(tài)對(duì)句子加工具有一定的影響，這是毋庸置疑的。單單針對(duì)手勢(shì)模態(tài)的語(yǔ)義和語(yǔ)音信息來(lái)說(shuō)，它不僅對(duì)詞匯的通達(dá)過(guò)程具有一定的影響，而且對(duì)對(duì)應(yīng)的其他條件也同樣如此。因此，本文將從手語(yǔ)模態(tài)對(duì)句子的加工影響進(jìn)行入手分析，觀察手勢(shì)音韻特征，闡述具體的影響因素和過(guò)程，以供參考。
關(guān)鍵詞： 手語(yǔ)模態(tài)；句子加工；影響
一、 前言
隨著各國(guó)學(xué)者陸續(xù)提出與句子加工相關(guān)的理論模型，手語(yǔ)模態(tài)得到了一定的發(fā)展，基本解決了目前句子加工中的一些難點(diǎn)問(wèn)題。但在具體問(wèn)題研究上還存在著一定的不足，很多句子還只是建立在聲音、語(yǔ)言的實(shí)驗(yàn)基礎(chǔ)上，在手語(yǔ)模態(tài)方面不能得以有效應(yīng)用。手語(yǔ)模態(tài)的建立還需要做進(jìn)一步加強(qiáng)，下面本文將細(xì)談它在句子加工中的相關(guān)影響。
二、 研究對(duì)象與方法
（一） 被試
因?yàn)槭菍?duì)手語(yǔ)模態(tài)進(jìn)行研究，所以我們找了十八位具有先天性耳聾的志愿者進(jìn)行了實(shí)驗(yàn)。這十八位被測(cè)試志愿者的挑選要求是：年齡相近、男女分配合理、裸眼或矯正視力正常，沒(méi)有相關(guān)的家族性精神障礙等條件。在具體的選擇過(guò)程中，半數(shù)為接受過(guò)特殊教育的南京市聾人學(xué)校學(xué)生，另一半則從社會(huì)人員中進(jìn)行挑選。
（二） 材料準(zhǔn)備
實(shí)驗(yàn)的進(jìn)行。被試者事先均已經(jīng)做了相關(guān)的手語(yǔ)測(cè)試，且保證能看懂刺激材料的手勢(shì)，可以接受實(shí)驗(yàn)中自變量的所有變化。自變量的相關(guān)設(shè)計(jì)為手勢(shì)音譯的變化，具體可分為四種：基準(zhǔn)手勢(shì)、意近手勢(shì)、音近手勢(shì)和無(wú)關(guān)手勢(shì)。實(shí)驗(yàn)要求所有的手勢(shì)都是高頻手勢(shì)。實(shí)驗(yàn)人員準(zhǔn)備好攝像機(jī)，對(duì)實(shí)驗(yàn)過(guò)程進(jìn)行拍攝記錄，并保證最后制作視頻的背景顏色和手勢(shì)具有較為鮮明的反差，這樣做的目的是方便觀察和記錄。
在實(shí)驗(yàn)進(jìn)行前，需要準(zhǔn)備好測(cè)試句子片段——由于一個(gè)句子平均分為7個(gè)手勢(shì)。因此只需要前面的6個(gè)手勢(shì)與4個(gè)水平手勢(shì)進(jìn)行排列組合，構(gòu)成4個(gè)測(cè)試片段。這四個(gè)水平手勢(shì)相關(guān)的截取長(zhǎng)度，應(yīng)該從準(zhǔn)備進(jìn)行開始，直到在手部放下，時(shí)間為1秒左右即可。在實(shí)驗(yàn)句子準(zhǔn)備過(guò)程中，一共需要152個(gè)句子，分為八個(gè)句干和四個(gè)水平手勢(shì)，一共可以構(gòu)成32個(gè)練習(xí)視頻。
（三） 實(shí)驗(yàn)程序
本次我們用EPrime軟件來(lái)編寫相關(guān)實(shí)驗(yàn)程序。為了更明顯地呈現(xiàn)出刺激效果，我們將其他的所有界面背景選擇呈現(xiàn)出灰色。相關(guān)實(shí)驗(yàn)的任務(wù)為判斷任務(wù)，相關(guān)的反應(yīng)操作鍵，為大家所用游戲手柄的左右鍵，這里要注意一點(diǎn)：被試者事先需要操作手柄進(jìn)行練習(xí)、熟悉程序及實(shí)驗(yàn)步驟，各方面確認(rèn)無(wú)異常后，才能正式開始實(shí)驗(yàn)。
實(shí)驗(yàn)開始后，被試者需要坐在電腦的正前方，對(duì)屏幕中出現(xiàn)的手語(yǔ)指導(dǎo)視頻進(jìn)行閱讀并理解對(duì)句子進(jìn)行判斷。在實(shí)驗(yàn)進(jìn)行的過(guò)程中，刺激材料的呈現(xiàn)具有一定的順序，分別是300ms的注視點(diǎn)“+”，然后是句干視頻，它為1500ms，接著出現(xiàn)的就是300ms的手勢(shì)視頻，最后則是4000ms的“？？”。在全部進(jìn)行完之后，對(duì)實(shí)驗(yàn)進(jìn)行按鍵結(jié)束，屏幕會(huì)出現(xiàn)灰色，用來(lái)讓被試者的眼睛進(jìn)行休息，如果在此期間被試者做出反應(yīng)，電腦則會(huì)自動(dòng)進(jìn)入到下一輪的測(cè)試。
三、 實(shí)驗(yàn)結(jié)果與討論
（一） N1
我們通過(guò)實(shí)驗(yàn)研究發(fā)現(xiàn)，在目標(biāo)手勢(shì)出現(xiàn)了之后，時(shí)間在100～200ms之內(nèi)，窗口會(huì)出現(xiàn)N1，它的潛伏期一般在130ms左右，在相同基準(zhǔn)和音近條件下N1的波峰更尖銳，并會(huì)在所有電極上進(jìn)行顯示，其中尤為突出的是中線和右線的電極上。在200～300ms時(shí)，窗口會(huì)出現(xiàn)P250——一道連續(xù)的更尖銳的波峰，它的潛伏期經(jīng)我們觀察發(fā)現(xiàn)一般是在250ms左右。對(duì)這樣的啟動(dòng)關(guān)系進(jìn)行重復(fù)測(cè)量和分析后，我們發(fā)現(xiàn)這樣啟動(dòng)關(guān)系的進(jìn)行分別為基準(zhǔn)手勢(shì)，義近手勢(shì)，音近手勢(shì)和無(wú)關(guān)手勢(shì)四種，一共有19個(gè)電極。從這樣的狀態(tài)來(lái)看，發(fā)現(xiàn)重復(fù)啟動(dòng)的關(guān)系，其主效應(yīng)沒(méi)有達(dá)到相應(yīng)的顯著水平，但是電極的主效應(yīng)卻極為顯著，重復(fù)啟動(dòng)關(guān)系和電極之間的交互作用并不顯著。因此，這里的N1可能是類似于視覺(jué)詞匯識(shí)別的研究結(jié)果，它代表了語(yǔ)意變量的激活標(biāo)志。
（二） N300
在實(shí)驗(yàn)進(jìn)行到刺激現(xiàn)象呈現(xiàn)之后，可以發(fā)現(xiàn)在200～400ms的時(shí)候，窗口內(nèi)約在320ms時(shí)，出現(xiàn)了一個(gè)腦電反應(yīng)N300，它的出現(xiàn)誘發(fā)了一個(gè)負(fù)走向并以頂部和中央?yún)^(qū)域?yàn)橹行?，分布極為廣泛的波動(dòng)現(xiàn)象——在前幾次的實(shí)驗(yàn)中曾記錄了類似反應(yīng)但并未加以關(guān)注，出現(xiàn)這種情況的原因可能是在于它的波動(dòng)幅度較小，也可能是因?yàn)檠芯空邔?duì)它的重視程度較低，相關(guān)的研究重點(diǎn)不在于此。在手勢(shì)詞匯通達(dá)屬性的研究和對(duì)電腦反應(yīng)的調(diào)控方面，更加關(guān)注于手勢(shì)詞匯相關(guān)的語(yǔ)義表現(xiàn)特征和一些相對(duì)更晚期的N400。對(duì)它們的重復(fù)啟動(dòng)關(guān)系分別進(jìn)行4×19的重復(fù)測(cè)量差并對(duì)結(jié)果進(jìn)行分析，從相應(yīng)的實(shí)驗(yàn)結(jié)果可以看出，重復(fù)啟動(dòng)關(guān)系的主效應(yīng)達(dá)到了顯著的水平程度，相關(guān)的電極主效應(yīng)也極其顯著，而且，重復(fù)啟動(dòng)關(guān)系與電極的交互作用也相對(duì)顯著。如果對(duì)重復(fù)啟動(dòng)關(guān)系的主效應(yīng)進(jìn)行下一步的多重比較檢驗(yàn)，可以發(fā)現(xiàn)，基準(zhǔn)和音近的啟動(dòng)效應(yīng)已經(jīng)達(dá)到了顯著的水平，意近的啟動(dòng)效應(yīng)也接近于顯著效果，但是無(wú)關(guān)啟動(dòng)效應(yīng)卻不顯著。但是即使如此，無(wú)關(guān)手勢(shì)也同樣誘發(fā)了N400，因此，我們認(rèn)為交互激活模型，是可以應(yīng)用于手語(yǔ)模態(tài)與句子加工的。
四、 結(jié)語(yǔ)
對(duì)中國(guó)手語(yǔ)模態(tài)與句子加工之間的影響關(guān)系進(jìn)行分析，需要對(duì)手語(yǔ)模式實(shí)驗(yàn)進(jìn)行精心設(shè)計(jì)，充分做好實(shí)驗(yàn)準(zhǔn)備，保證每一個(gè)環(huán)節(jié)的正常實(shí)施。并在進(jìn)行實(shí)驗(yàn)的同時(shí)，認(rèn)真觀察實(shí)驗(yàn)數(shù)據(jù)波動(dòng)，以便于對(duì)數(shù)據(jù)進(jìn)行比較和研究，最后才能得出影響關(guān)系。
參考文獻(xiàn)：
[1]晏心.長(zhǎng)期手語(yǔ)經(jīng)驗(yàn)對(duì)雙模態(tài)雙語(yǔ)者口語(yǔ)、書面語(yǔ)理解系統(tǒng)的塑作用.2011.
[2]黃曉曉.基于情景語(yǔ)料庫(kù)的自然手語(yǔ)構(gòu)詞研究.2012.
作者簡(jiǎn)介：
陳燕，江蘇省南京市，南京市聾人學(xué)校。endprint
猜你喜歡
英語(yǔ)文摘(2022年4期)2022-06-05 07:45:18
中學(xué)生數(shù)理化·八年級(jí)物理人教版(2022年3期)2022-03-16 05:55:08
當(dāng)代陜西(2021年2期)2021-03-29 07:41:24
家庭影院技術(shù)(2020年10期)2020-12-14 07:54:18
媽媽寶寶(2017年3期)2017-02-21 01:22:28
中國(guó)塑料(2016年3期)2016-06-15 20:30:00
通信電源技術(shù)(2016年3期)2016-03-26 07:13:38
知識(shí)經(jīng)濟(jì)·中國(guó)直銷(2016年3期)2016-02-27 16:15:49
現(xiàn)代檢驗(yàn)醫(yī)學(xué)雜志(2014年6期)2014-02-02 03:02:04
