情感研究歷史悠久。西方近代在達(dá)爾文的影響下,跨學(xué)科情感研究成果豐富,研究方法和分析模型層出不窮。本文簡(jiǎn)要回顧了臉部表情研究法、誘發(fā)事件分析法與結(jié)果反推法、實(shí)驗(yàn)法以及人工智能、情感機(jī)器人與情感計(jì)算,并在此基礎(chǔ)上探討用移動(dòng)設(shè)備研究情感變化的方法及其分析模型。志愿者每隔一小時(shí)用移動(dòng)設(shè)備自錄音錄像,記錄當(dāng)下情感。前后有22位大學(xué)生、研究生志愿者參加。采錄到的語料構(gòu)成了由轉(zhuǎn)寫文字、語音流和視頻流三類數(shù)據(jù)組成的多模態(tài)專門用途語料庫(kù)。文章根據(jù)多模態(tài)語料庫(kù)語言學(xué)原理勾畫了語料處理的概念建模、數(shù)據(jù)建模和操作實(shí)施評(píng)估三階段法,并對(duì)本方法的優(yōu)劣加以討論。 

【文章來源】：外語電化教學(xué). 2018,(01)北大核心CSSCI

【文章頁(yè)數(shù)】：9 頁(yè)

【部分圖文】：

考試與情感研究示意圖

芏鵲男枰??山??步細(xì)化。本項(xiàng)目把“情感己”進(jìn)一步細(xì)化為:“背景情感己”、“基本情感己”和“社會(huì)情感己”;“社會(huì)情感己”還進(jìn)一步細(xì)化為“對(duì)人”和“對(duì)己”;后者再進(jìn)一步細(xì)化為“正面”和“負(fù)面”。“行為舉止己”先細(xì)化為“言語己”和“體態(tài)語己”;前者再細(xì)化為“語力己”、“言詞己”和“韻律己”;后者再細(xì)化為“臉部表情己”、“目光己”和“手勢(shì)己”。本項(xiàng)目的整人概念模型如圖10所示。圖10本項(xiàng)目情感研究整人建模圖3．2．2數(shù)據(jù)建模確定填入“己{…{…}…}”的數(shù)據(jù)類型。以“背·7·張舍茹等:用移動(dòng)設(shè)備研究大學(xué)生情感變化:方法及其分析模型

景情感己”為例。本項(xiàng)目能夠得到的數(shù)據(jù)類型是志愿者關(guān)于自己當(dāng)下情感的口述，屬于反思型的數(shù)據(jù)。由于本項(xiàng)目還有自錄音錄像，因此研究者從錄音錄像中得到研究者視聽覺感知到的信息，屬于視聽感知分類型。再以“言語己”為例。“言詞己”的數(shù)據(jù)類型是文字轉(zhuǎn)寫型;“韻律己”的數(shù)據(jù)類型是數(shù)字化聲學(xué)和韻律特征提取。本項(xiàng)目的數(shù)據(jù)類型如圖11所示。圖11本項(xiàng)目數(shù)據(jù)類型國(guó)內(nèi)外同類研究一般不做數(shù)據(jù)類型建模。做與不做的區(qū)別在于:做數(shù)據(jù)類型建模對(duì)于評(píng)估語料庫(kù)處理加工的質(zhì)量來說是非常重要的。例如，“言詞己”的原始數(shù)據(jù)是音頻流，把音頻流里的內(nèi)容用文字轉(zhuǎn)寫下來，即把原始的音頻數(shù)據(jù)類型轉(zhuǎn)化為文字?jǐn)?shù)據(jù)類型，這個(gè)轉(zhuǎn)換過程會(huì)發(fā)生信息丟失。再比如，志愿者自述當(dāng)下情感，本質(zhì)上是屬于自我反思類，而自我反思類數(shù)據(jù)是有可能違心地說出來的。研究者聽到和看到志愿者的錄音錄像，對(duì)其進(jìn)行分類，帶有很大的主觀性。本項(xiàng)目利用音頻處理工具Praat和視頻處理工具ElAN對(duì)“情感己”和“行為舉止己”同時(shí)做分析，由此得到不同數(shù)據(jù)類型的實(shí)時(shí)同步狀態(tài)，實(shí)現(xiàn)了不同數(shù)據(jù)類型的互補(bǔ)。3．2．3實(shí)際分析操作與驗(yàn)證現(xiàn)以學(xué)生李某(女)2013年12月23日提供的語料作為樣例演示實(shí)際分析操作與驗(yàn)證。該生早晨7點(diǎn)半開始當(dāng)天的第一次采樣，為我們的分析提供了有用的背景知識(shí)。其錄音轉(zhuǎn)寫如下:……現(xiàn)在是12月22號(hào)［注:日期記錯(cuò)了］，早上七點(diǎn)半，哎呦，早上好掙扎地起床呀，哎，想想還有那么多東西還沒有復(fù)習(xí)呢，好緊張呀，嗯，哎呀，沒辦法，起床吧，再堅(jiān)持一下，過了這一刻就可以多睡會(huì)兒了，嘿嘿，下一個(gè)時(shí)刻?

【參考文獻(xiàn)】：
期刊論文
[1]當(dāng)下親歷與認(rèn)知、多模態(tài)感官系統(tǒng)與大數(shù)據(jù)研究模型——以新生嬰兒親歷為例[J]. 顧曰國(guó).  當(dāng)代語言學(xué). 2016(04)
[2]論言思情貌整一原則與鮮活話語研究——多模態(tài)語料庫(kù)語言學(xué)方法[J]. 顧曰國(guó).  當(dāng)代修辭學(xué). 2013(06)



本文編號(hào)：3503482