情緒識(shí)別研究述評(píng)

唐嵩瀟

（吉林化工學(xué)院 學(xué)工部，吉林 吉林 132022）

?

情緒識(shí)別研究述評(píng)

唐嵩瀟

（吉林化工學(xué)院 學(xué)工部，吉林 吉林 132022）

情緒作為人類心理活動(dòng)的重要組成部分，在組織和指導(dǎo)人們的行為、交流與預(yù)測(cè)他人意愿方面，都起著舉足重輕的作用。由于生理變化、表情變化和聲音的變化等因素，使人們表達(dá)出自己的情緒時(shí)產(chǎn)生對(duì)應(yīng)信號(hào)，并且引起他人推斷，這一過程就是情緒的識(shí)別過程。情緒識(shí)別研究作為心理學(xué)和認(rèn)知科學(xué)領(lǐng)域的重要分支，已經(jīng)越來越受到很多學(xué)者的重視。通過大量文獻(xiàn)分析，探討了情緒的定義與分類，情緒識(shí)別的定義、研究現(xiàn)狀以及當(dāng)前研究下存在的不足，并對(duì)情緒識(shí)別研究的未來方向及其應(yīng)用價(jià)值進(jìn)行了展望，這將給情緒心理學(xué)的研究領(lǐng)域提供一定的參考價(jià)值。

情緒；情緒識(shí)別；面部表情；身段表情；語(yǔ)音

情緒是什么？心理學(xué)上認(rèn)為，情緒是個(gè)體受到某種內(nèi)在的或外在的刺激時(shí)所產(chǎn)生的一種身心狀態(tài)，比如：歡樂時(shí)，笑逐顏開、手舞足蹈；憤怒時(shí)，豎眉立眼、心跳加快；悲哀時(shí)，雙眉深鎖、涕淚交流；恐懼時(shí)，臉色蒼白、周身發(fā)抖。個(gè)體的情緒往往和所受的內(nèi)在的或外在的刺激密切相關(guān)，然而其情緒狀態(tài)也往往會(huì)通過一定的外在表達(dá)形式（如面部表情、語(yǔ)音表情和身段表情等）表現(xiàn)出來，也正是由于情緒的這些外在表達(dá)形式的表現(xiàn)從而使人們?cè)谌粘Ｉ钪畜w驗(yàn)到了情緒識(shí)別的作用。首先人們可以把自己的想法通過情緒傳達(dá)給他人，其次，人們也可以通過他人的情緒狀態(tài)，來判斷當(dāng)事人的想法與心聲。因此，情緒識(shí)別研究在社會(huì)心理學(xué)及認(rèn)知科學(xué)領(lǐng)域上具有非常重要的意義。

一、情緒和情緒識(shí)別

（一） 情緒的定義及其分類

在百度百科里，“情緒”有六種釋義：①[lingering affection]：纏綿的情意；②[feeling]：泛指感情；③[mood]：心情、心境；④[condition]：情況、端緒；⑤[vigour,spirit]：勁頭；⑥[depression,moodiness]：指不正當(dāng)或不愉快的情感。本文中的“情緒”是一個(gè)心理學(xué)名詞，國(guó)內(nèi)外的學(xué)者對(duì)“情緒”有很多定義。中國(guó)的北大教授孟昭蘭在其著作《人類情緒》指出：無論情緒、情感或感情，指的是不同于認(rèn)識(shí)和意志的同一過程和心理現(xiàn)象[1]；Davidson等[2]發(fā)現(xiàn)，情緒的產(chǎn)生，是由于個(gè)體適應(yīng)環(huán)境的結(jié)果，并且情緒作為一種生理現(xiàn)象或生理現(xiàn)象，其產(chǎn)生具有瞬時(shí)性；Keith Oatley等[3]在其著作中提出，情緒起到了人們溝通的作用。是由心理變化、生理變化、外部環(huán)境、主觀感受等方面的共同影響。

由于情緒的復(fù)雜性，不同的學(xué)者對(duì)情緒的定義各不相同。這是由于它是腦的各個(gè)結(jié)構(gòu)和系統(tǒng)綜合作用的結(jié)果，并且它還是感知、判斷、思維、記憶、意識(shí)上和意識(shí)下等心理認(rèn)知水平綜合作用的結(jié)果。通常來說，情緒包含以下四個(gè)組成成分：（1）情緒涉及到身體上的一些變化，情緒通過這些變化來表達(dá)出來；（2）情緒是行動(dòng)的準(zhǔn)備階段，跟實(shí)際行為有聯(lián)系；（3）情緒包含有意識(shí)體驗(yàn)；（4）情緒涉及到對(duì)外界事物的態(tài)度，同時(shí)包含認(rèn)知成分。

由于情緒的定義在心理學(xué)領(lǐng)域并沒有十分統(tǒng)一，如何有效的劃分情緒類型也一直是一個(gè)頗有爭(zhēng)論的問題。早在2000多年前的周朝，古書《禮記》里就把人的情緒稱為“七情”，即喜、怒、哀、懼、愛、惡、欲。目前對(duì)于情緒的劃分方式有很多種，情緒也有很多種，如高興、愉快、難過、悲傷、憤怒、恐懼、厭惡、恐懼、驚奇、愛和憐憫，等等。現(xiàn)代心理學(xué)家把情緒分為四類：快樂、憤怒、悲哀、恐懼。（1）快樂（Joy）：感到幸福或滿意。（2）憤怒（Anger）：是一種緊張、不愉快的情緒體驗(yàn)，通常發(fā)生在挫折之后，在人的成長(zhǎng)過程中出現(xiàn)較早。（3）悲哀（Sadness）：當(dāng)理想沒有實(shí)現(xiàn)、愿望破滅或失去了心愛的對(duì)象時(shí)所產(chǎn)生的一種體驗(yàn)。理想、愿望和對(duì)象的價(jià)值及重要性決定了悲哀情緒的體驗(yàn)程度；（4）恐懼（Fear）：是有機(jī)體為了擺脫或躲避某種情景而又無能為力的情緒體驗(yàn)。缺乏處理不利情景的能力與手段常常是引起恐懼情緒的罪魁禍?zhǔn)住?/p>

現(xiàn)在普遍認(rèn)為情緒可以分為基本情緒和復(fù)合情緒，基本情緒分為社會(huì)情緒、生理情緒、認(rèn)知情緒、精神情緒，復(fù)合情緒是包含基本情緒中的兩種或兩種以上的情緒復(fù)合體[4]。通常我們所說的情緒更多的是復(fù)合情緒而不僅僅是某一種基本情緒[5]。在我們?nèi)粘Ｉ钪休^為常見的一種劃分方式是把情緒分為正面情緒（積極情緒）和負(fù)面情緒（消極情緒），如圖1所示:

圖1 情緒的分類

（二） 情緒識(shí)別的定義

通過以上對(duì)情緒概念的闡述，產(chǎn)生情緒時(shí)，必然會(huì)發(fā)生表情、聲音或身段等方面的變化。因此，可以通過上述變化對(duì)其個(gè)體情緒進(jìn)行推測(cè)與判斷。生理的變化與心理變化共同對(duì)情緒產(chǎn)生作用，而對(duì)于內(nèi)部的生理變化與心理變化，我們沒有辦法進(jìn)行直接的觀察。因此，通過表情、語(yǔ)調(diào)、肢體動(dòng)作方面直觀可測(cè)的因素進(jìn)行切入，進(jìn)而個(gè)體的內(nèi)部情緒就會(huì)間接的得知。而這一過程就是情緒識(shí)別的過程[6]。

（三） 情緒識(shí)別研究的意義

情緒作為一種心理活動(dòng)操控著我們的一言一行，它對(duì)生活、學(xué)習(xí)、工作以及身心健康等各個(gè)方面都有著極大的影響。圖2列出了情緒對(duì)個(gè)人、組織、人際關(guān)系和社會(huì)關(guān)系等方面的影響。

圖2 情緒的影響

圖3說明了積極情緒有利于我們的身段健康、智力發(fā)展和水平發(fā)揮，而消極情緒則對(duì)它們產(chǎn)生不利影響。

通過情緒識(shí)別研究可以讓個(gè)體更加了解自己和他人的情緒，從而能夠?qū)η榫w進(jìn)行有效的控制和管理，這不僅有利于身心健康，還可以大大提高生活、學(xué)習(xí)和工作能力及效率。與此同時(shí)，情緒研究又屬于社會(huì)心理學(xué)和認(rèn)知科學(xué)領(lǐng)域范疇，通過對(duì)情緒識(shí)別的研究，一方面可以極大豐富情緒心理學(xué)研究理論，另一方面它還具有很大的現(xiàn)實(shí)意義，能夠幫助和指導(dǎo)人類的社會(huì)實(shí)踐活動(dòng)，主要體現(xiàn)在：

1.促進(jìn)個(gè)體適應(yīng)環(huán)境與社會(huì)。在環(huán)境與社會(huì)迅速發(fā)展的今天，情緒的識(shí)別能夠幫助我們較快較好地適應(yīng)社會(huì)環(huán)境。個(gè)體適應(yīng)社會(huì)的一種重要表現(xiàn)就是對(duì)談話者的表情能夠做出準(zhǔn)確分析判斷且迅速回應(yīng)。在家庭、職場(chǎng)與社會(huì)生活中，通過準(zhǔn)確迅速的情緒識(shí)別來適時(shí)調(diào)整自己的語(yǔ)言、舉止和行為，是能夠讓我們很容易適應(yīng)社會(huì)并達(dá)到目標(biāo)。舉個(gè)例子來說明，職場(chǎng)應(yīng)聘中應(yīng)聘者若能對(duì)主考官的表情情緒和語(yǔ)音情緒進(jìn)行迅速準(zhǔn)確識(shí)別，通過面試官情緒來初步了解自己的表現(xiàn)，進(jìn)而對(duì)自己的面試表現(xiàn)進(jìn)行調(diào)節(jié)，給主考官留下好印象，從而面試成功獲得該工作機(jī)會(huì)；對(duì)于主考官，他也可以通過表情識(shí)別來發(fā)覺應(yīng)聘者的個(gè)人特質(zhì)，并判斷應(yīng)聘者是否有能力勝任該工作，有利于最優(yōu)化的崗位選擇。

2.促進(jìn)心理咨詢工作的開展。在心理咨詢過程中，來訪者在進(jìn)行敘述時(shí)多會(huì)帶有情緒表現(xiàn)，而由于人的本能防御心理，這些表述通常帶有一定掩飾性，從而可能為建立咨訪關(guān)系和解決心理咨詢?nèi)说膯栴}帶來阻力。因此為保障良好的咨詢關(guān)系，達(dá)到良好的咨詢效果，情緒識(shí)別起到至關(guān)重要的作用。即使來訪者沒有袒露心聲，但是從外部表現(xiàn)即會(huì)反映出其心理情緒狀態(tài)。通過情緒識(shí)別，咨詢師在咨詢過程中對(duì)心理咨詢?nèi)说男睦頎顟B(tài)進(jìn)行分析判斷，有利于咨訪關(guān)系的建立和問題的解決。

3.促進(jìn)情緒障礙等臨床研究的發(fā)展。情緒障礙是臨床上常見的一種心理障礙，患者常常表現(xiàn)出絕望、沮喪、悲傷等情緒特點(diǎn)。因此，可以以正常人的情緒識(shí)別特征作為基準(zhǔn)進(jìn)行研究，間接探討情緒障礙個(gè)體的情緒產(chǎn)生與反饋。進(jìn)而為心境障礙患者提供實(shí)踐支持與理論支持。創(chuàng)新治療方案。

4.促進(jìn)測(cè)謊技術(shù)在生活中的應(yīng)用。通過情緒識(shí)別的作用，可以將表情識(shí)別、身段識(shí)別，特別是語(yǔ)音識(shí)別的理論與方法巧妙的聯(lián)系到科學(xué)技術(shù)應(yīng)用方面，例如測(cè)謊技術(shù)上。將情緒識(shí)別方面的理論意義與實(shí)踐數(shù)據(jù)與科技產(chǎn)品進(jìn)行智能匹配，進(jìn)而能將被測(cè)者的心理情緒狀態(tài)推測(cè)出來，并且具有較高的參考價(jià)值。例如：在機(jī)場(chǎng)、審訊室等重要場(chǎng)合，在被調(diào)查者不知情的情況下，對(duì)其表情、身段、語(yǔ)音進(jìn)行分析判斷，即使將情緒特征數(shù)據(jù)進(jìn)行統(tǒng)計(jì)，達(dá)到測(cè)試目的。

二、情緒識(shí)別研究

生理信號(hào)情緒識(shí)別、表情情緒識(shí)別和語(yǔ)音情緒識(shí)別是當(dāng)今情緒識(shí)別研究的主要內(nèi)容。三種識(shí)別方式所推斷情緒的依據(jù)不同，即分別通過生理方面的變化、個(gè)體面部表情的變化、聲調(diào)語(yǔ)速方面的變化來進(jìn)行判斷。而三種情緒識(shí)別方式中，表情情緒識(shí)別與語(yǔ)音情緒識(shí)別為主流研究領(lǐng)域。主要是因?yàn)樗鼈冎庇^且方便采集，但是缺點(diǎn)是結(jié)果通常受主試和被試的主觀因素影響；生理信號(hào)情緒識(shí)別由于只受到機(jī)體的客觀因素作用，因此識(shí)別率比較準(zhǔn)確。目前生理信號(hào)情緒識(shí)別在國(guó)內(nèi)外也逐漸引起了眾多心理學(xué)研究者的興趣，但是它一般都需要特定的儀器設(shè)備進(jìn)行測(cè)量，測(cè)量過程較為困難，也無法做到實(shí)時(shí)識(shí)別。因此，在人們?nèi)粘Ｉ钪袘?yīng)用較多的仍然是表情情緒識(shí)別和語(yǔ)音情緒識(shí)別，其作用也比較大。

（一） 生理信號(hào)情緒識(shí)別研究

生理信號(hào)情緒識(shí)別即從生理信號(hào)中抽取出特征模式來識(shí)別情緒。通過生理信號(hào)的獲取，在計(jì)算機(jī)上進(jìn)行處理分析，根據(jù)收集的原始數(shù)據(jù)與實(shí)驗(yàn)數(shù)據(jù)相結(jié)合，探討哪種情緒起到至關(guān)重要的作用。主要生理信號(hào)主要包括有：心電信號(hào)（ECG）、肌電信號(hào)（EMG）、呼吸信號(hào)（RSP），皮電信號(hào)（SC）。

1.心電信號(hào)（ECG）

人體心臟每周期竇房結(jié)發(fā)出的一次電興奮，電興奮按一定的途徑和時(shí)程，依次傳向心房和心室，引發(fā)整個(gè)心臟興奮，從而使心臟產(chǎn)生周期性收縮，并推動(dòng)全身血液的循環(huán)。心臟電變化曲線（即ECG心電圖）就是通過把測(cè)量電極放置于人體表面的特定部位記錄采集得到的，其波形反映了具收縮性的心房心室去極化和再極化的序列，該電活動(dòng)同心房心室的收縮與舒張有密切關(guān)系。典型的心電圖，如圖4所示。

有研究表明，憤怒及恐懼時(shí)人的心率最快，高興時(shí)較快，當(dāng)悲傷和驚奇時(shí)心率減慢，在厭惡時(shí)心率達(dá)到最低點(diǎn)；并且男女之間的性別差異對(duì)心電信號(hào)也會(huì)產(chǎn)生影響，男性的心率比女性的心率反應(yīng)水平較低[7]。

圖4 典型ECG信號(hào)特性指標(biāo)

2.肌電信號(hào)（EMG）

作為生物信號(hào)的一種，表皮肌肉的電活動(dòng)與皮膚表面區(qū)域和時(shí)間的綜合產(chǎn)生了肌電信號(hào)（EMG）

肌電圖信號(hào)是一維的時(shí)間序列信號(hào)，肌肉表面引導(dǎo)電極所接觸的眾多運(yùn)動(dòng)單位在活動(dòng)時(shí)會(huì)產(chǎn)生一定電變化，進(jìn)而得到肌電信號(hào)圖?？梢钥闯觯‰娦盘?hào)和不同活動(dòng)狀態(tài)及機(jī)能狀態(tài)下活動(dòng)的運(yùn)動(dòng)單位的數(shù)量、運(yùn)動(dòng)單位活動(dòng)的同步化程度、運(yùn)動(dòng)單位募集模式、不同運(yùn)動(dòng)單位的放電頻率以及表面電極所放置的位置、體溫、皮下脂肪的厚度等因素有很大關(guān)系。表皮肌肉的電活動(dòng)與皮膚表面區(qū)域和時(shí)間的綜合產(chǎn)生了肌電信號(hào)（EMG）

程波等[8]通過小波變換對(duì)肌電信號(hào)（EMG）情感識(shí)別進(jìn)行模擬，得出用表面肌電信號(hào)對(duì)joy、anger、sadness、pleasure 四種情感識(shí)別效果較好，用單一生理信號(hào)進(jìn)行情感識(shí)別是可以達(dá)到較好效果的。

3.呼吸信號(hào)（RSP）

呼吸是人體重要的一個(gè)生理過程。通過人體與外界的氣體交換，使外界環(huán)境的養(yǎng)分通過呼吸達(dá)到機(jī)體內(nèi)，并將二氧化碳?xì)怏w排出體外。

林時(shí)來等[9]在論文中通過采集212 個(gè)被試6 種不同情緒（高興、厭惡、驚奇、悲傷、恐懼、憤怒）的呼吸信號(hào)數(shù)據(jù)進(jìn)行仿真實(shí)驗(yàn)，發(fā)現(xiàn)高興的識(shí)別效果是最好的，測(cè)試識(shí)別率最好達(dá)到92.06%，相應(yīng)的驗(yàn)證識(shí)別率達(dá)到了87.28%；厭惡的識(shí)別效果最差，測(cè)試識(shí)別率只有83.26%，相應(yīng)的驗(yàn)證識(shí)別率為69.62%。

4.皮電信號(hào)（SC）

皮電信號(hào)是通過在人們手指上安裝一個(gè)小伏電壓，進(jìn)而進(jìn)行測(cè)量的。

不同的情緒狀態(tài)下的人們，汗腺的分泌以及皮膚血管的舒張與收縮等會(huì)使皮膚的電阻發(fā)生改變，而通過改變的電阻，測(cè)量人們的情緒狀態(tài)。同樣，皮膚電反應(yīng)的基礎(chǔ)水平的個(gè)體差異性顯著，并且與個(gè)性特征有很大聯(lián)系。

（二） 表情情緒識(shí)別研究

1.面部表情識(shí)別

面孔蘊(yùn)涵著豐富的信息，它既具有生物學(xué)意義，又具有社會(huì)意義。通過人們的面部特征，能夠獲得許多個(gè)體的信息。早在19世紀(jì)，研究者們就開始了對(duì)面部特征的分析，即從面部特征的變化探討其相對(duì)應(yīng)的情緒。在達(dá)爾文提出人類的面部表情特征是先天具備以來，心理學(xué)者們逐漸對(duì)面部表情識(shí)別這一課題感到興趣。到上世紀(jì)70年代，F(xiàn)risen和Ekman認(rèn)為人類的面部表情是由高興、驚訝、悲傷、憤怒、恐懼與厭惡構(gòu)成。1980年后，關(guān)于人臉面部表情的研究開始在國(guó)內(nèi)心理學(xué)界陸續(xù)開展起來。

目前，國(guó)內(nèi)外關(guān)于面部表情的研究主要形成了以下五種理論：（1）整體說。該理論認(rèn)為，人類的面部表情特征具有整體性。面部特征的每一個(gè)痕跡都不是獨(dú)立存在，而是整合在一起的。（2）先天機(jī)制說。該理論強(qiáng)調(diào)的是面部認(rèn)知能力。1991年Johnson和Morton曾指出個(gè)體的面部表情特征具有與生俱來的特點(diǎn)。嬰兒出生后30天前后，人類的先天的認(rèn)知偏好機(jī)制會(huì)迅速衰減，且隨著嬰兒不斷長(zhǎng)大，在視覺偏好中原先的內(nèi)在加工傾向所起的決定性作用變小，記憶和經(jīng)驗(yàn)則慢慢變得重要。（3）專家說。該理論則強(qiáng)調(diào)，人類是由進(jìn)化形成的能夠做到對(duì)不同個(gè)體面孔進(jìn)行識(shí)別的專家。該理論認(rèn)為，大腦的面孔反應(yīng)區(qū)是對(duì)全部物體做出反應(yīng)的。（4）機(jī)能模型。面孔加工機(jī)能模型于1986年被Young和Bruce提出，他們用該理論對(duì)人臉認(rèn)知加工的過程進(jìn)行了解釋。他們強(qiáng)調(diào)在人臉認(rèn)知中有兩個(gè)平行路線，一個(gè)加工面孔表情信息，一個(gè)對(duì)面孔特征信息進(jìn)行編碼，二者的功能是相對(duì)獨(dú)立的。（5）交互加工與結(jié)構(gòu)參照假說。該觀點(diǎn)則認(rèn)為，一個(gè)面孔會(huì)以什么樣的特殊方式表達(dá)情緒決定于該面孔的潛在結(jié)構(gòu)。

面部表情是指通過面部的各個(gè)器官如眼睛、額眉、鼻頰、口唇等肌肉變化所表現(xiàn)出來的各種情緒，它能精細(xì)的表達(dá)出不同性質(zhì)的情感與情緒，人們鑒別情緒的主要通過面部表情，所以關(guān)于面部表情情緒識(shí)別的研究也非常多。五官是面孔中的重要組成，是傳達(dá)情緒的舵手，其中嘴巴和眼睛的作用尤為突出。嘴巴周圍的口部肌肉的變化能夠?yàn)榍楦星榫w傳達(dá)提供重要線索，如人在緊張的時(shí)候，則會(huì)“張口結(jié)舌”；俗語(yǔ)說“眼睛是人心靈的窗戶”，通過眼睛我們能夠看出人的內(nèi)心世界，當(dāng)然也就包括人的感情和情緒，而不同的眼神也能夠反映出人不同的態(tài)度喜好和心理活動(dòng)。由此可見，面部表情是人類基本情緒的最基本的外顯反應(yīng)，它是人類信息溝通和傳遞的重要工具[10]。一些情緒心理學(xué)家具體地研究了9種原始情緒，包括愉快、悲傷、驚奇、興趣、恐懼、痛苦、輕蔑、羞愧與憤怒出現(xiàn)時(shí)面部肌肉組合和其對(duì)應(yīng)的表情模式。

2.身段表情識(shí)別

身段表情情緒識(shí)別是指通過身段動(dòng)作、身段姿勢(shì)、位置以及動(dòng)作的多少、行動(dòng)的特點(diǎn)等信息來進(jìn)行情緒識(shí)別。身段表情的研究比面部表情的研究要晚得多和少得多，而實(shí)際上，身段表情和面部表情一樣能夠傳達(dá)出個(gè)體的情緒狀態(tài)，同時(shí)更能夠表明其動(dòng)作意圖。例如一個(gè)人感覺到害怕，他所處的的姿態(tài)不僅僅包括被脅迫被危害等姿態(tài)，還會(huì)表現(xiàn)出渾身顫抖、逃跑或四肢僵硬等方面的身段信息。所以，身段表情識(shí)別的研究是最具有實(shí)踐意義的，是與個(gè)體狀態(tài)最為貼切的。表2是達(dá)爾文（1872）所研究的身段表情與情緒表達(dá)的對(duì)照表[10]。

3.語(yǔ)音情緒識(shí)別研究

語(yǔ)音情緒識(shí)別是指人們的情緒狀態(tài)是通過個(gè)體的聲音言語(yǔ)方面，如音調(diào)、音色、響度等方面識(shí)別出來的。言語(yǔ)作為一種社會(huì)符號(hào)，是人們交流的重要媒介之一，言語(yǔ)所傳遞的內(nèi)容，不僅僅是字面意義上所表達(dá)的意思，而且包括從語(yǔ)調(diào)、停頓等方面表達(dá)的深層意義。例如帶有情緒聲調(diào)的聲音，就是一個(gè)非常明顯的非語(yǔ)言信息。非語(yǔ)言信息可以包含很多內(nèi)容，諸如音調(diào)、響度、說話快慢等等。有許多傾聽者就非常擅于從說話者的非語(yǔ)言信息中聽出說話者的一些情緒狀態(tài)，包括悲傷、高興和憤怒等。為了能夠準(zhǔn)確的獲取說話者想要表達(dá)的信息，聆聽者還需要把言語(yǔ)信息進(jìn)行一定的整合，包括說話者的方式、短語(yǔ)、單詞和音節(jié)等。當(dāng)人處于一定情緒狀態(tài)下時(shí)，由于生理作用，人們會(huì)產(chǎn)生與平時(shí)不一樣的狀態(tài)，從而導(dǎo)致一定情緒狀態(tài)下的語(yǔ)氣和語(yǔ)調(diào)會(huì)發(fā)生一些變化，研究人員把這種現(xiàn)象稱為語(yǔ)音情緒表達(dá)。語(yǔ)音情緒識(shí)別就是指對(duì)所說言語(yǔ)進(jìn)行推斷，進(jìn)而評(píng)估其情緒狀態(tài)的過程。

研究表明，如憤怒，害怕和興奮等等起伏波動(dòng)較大的情緒，其產(chǎn)生將會(huì)激勵(lì)交感神經(jīng)系（sympathetic nervous system），進(jìn)而導(dǎo)致一系列明顯的生理變化。例如呼吸急促，心率加快，偶爾會(huì)產(chǎn)生肌肉震顫等等。說話時(shí)的響度與音調(diào)也會(huì)相應(yīng)的變高。在另一方面，對(duì)于一些較為平緩的情緒如悲傷等等，其產(chǎn)生將會(huì)激勵(lì)副交感神經(jīng)系（parasympathetic nervous system），從而導(dǎo)致呼吸緩慢，心率降低。說話時(shí)的語(yǔ)音也相應(yīng)的變低，緩慢，具有很少的高頻能量。這些生理上的變化說明了處于不同的情緒中，能量在不同頻譜上的分布，速率存在著不同。根據(jù)眾多研究的結(jié)果，基音（pitch，fundamental frequency，F(xiàn)O）是識(shí)別情緒最重要的聲學(xué)特征。其它的一些特征還包括有能量，持續(xù)時(shí)間，說話速率等等。綜合來說，情緒對(duì)語(yǔ)音的影響主要表現(xiàn)在以下三個(gè)方面：基音曲線 （fundamental frequency contour），連續(xù)聲學(xué)特征（continuous acoustic variables），和語(yǔ)音品質(zhì) （voice quality）?；羟€主要用來描述基音序列的幾何分布。連續(xù)聲學(xué)特征包括有基因的大小，能量，說話速率，能量在頻譜上的分布等等，這些特征也有時(shí)被稱為韻律特征（prosodic features）。語(yǔ)音品質(zhì)包括有松緊度，粗糙度，有無帶呼吸聲。這三種語(yǔ)音品質(zhì)的類型在某種程度上是互相相關(guān)的。

（三） 目前情緒識(shí)別研究中的不足

通過對(duì)情緒識(shí)別研究的調(diào)研，發(fā)現(xiàn)目前情緒識(shí)別研究中還存在一些主要不足之處：

1.面部表情識(shí)別和語(yǔ)音情緒識(shí)別的研究比較成熟，而生理信號(hào)識(shí)別和身段表情識(shí)別由于技術(shù)的困難性。所以研究較少。生理信號(hào)識(shí)別、語(yǔ)音表情識(shí)別和身段表情識(shí)別上沒有大量的理論支持與數(shù)據(jù)支持；

2.關(guān)于對(duì)生理信號(hào)、面部表情、身段表情和語(yǔ)音四者同某種特定情緒之間的相互聯(lián)系的研究較少。

三、情緒識(shí)別研究展望

通過情緒及情緒識(shí)別研究的相關(guān)文獻(xiàn)的歸納學(xué)習(xí)和分析，得出以下四個(gè)方面情緒識(shí)別研究的發(fā)展方向。

一是情緒識(shí)別的系統(tǒng)化研究。根據(jù)上文對(duì)目前情緒識(shí)別研究中的不足，我們可以看出情緒識(shí)別將來的研究重點(diǎn)會(huì)是把生理信號(hào)、面部表情、身段表情和語(yǔ)音四者同某種特定情緒之間的相互的聯(lián)系進(jìn)行研究，形成一個(gè)系統(tǒng)的情緒識(shí)別體系。

二是特殊被試的情緒識(shí)別研究。以往有一些針對(duì)特殊個(gè)體的面部表情情緒識(shí)別研究，如對(duì)焦慮癥患者進(jìn)行面部情緒識(shí)別時(shí)，被試的中性情緒與負(fù)性情緒直接容易混淆。對(duì)于身段表情與語(yǔ)音情緒識(shí)別中是否也存在相同或類似的特性是值得人們待人們進(jìn)一步去研究的，而在這方面的探討需要大量的理論支持與實(shí)證研究。

三是表情情緒交互作用的腦電研究。面孔的事件相關(guān)電位技術(shù)（ERP）與功能磁共振成像技術(shù)（FMRI）研究已經(jīng)較為普及，單獨(dú)就面部表情識(shí)別的ERP研究非常多。而面部表情、身段表情和語(yǔ)音中三者或兩者之間交互作用時(shí)的腦電波效應(yīng)的相關(guān)研究幾乎還沒有，表情情緒交互作用的腦電研究非常值得進(jìn)一步去研究。

四是表情情緒具體化及交互作用的研究。目前一些學(xué)者探討了恐懼和高興情緒在面部表情、身段表情和語(yǔ)音情緒上的相互作用與影響以及高興和悲傷的身段表情對(duì)面孔識(shí)別與語(yǔ)音的影響，但是關(guān)于其他具體情緒類型及其交互作用還有待研究。

情緒作為社會(huì)化信息的載體，在社會(huì)生活中起著重要的作用。個(gè)體出生之后就開始形成對(duì)面部表情、身段表情和語(yǔ)音的識(shí)別能力，這種能力也在不斷的社會(huì)化過程中得到了發(fā)展，并在人們的日常生活中上發(fā)揮著舉足輕重的作用。我們應(yīng)重視情緒識(shí)別的研究，對(duì)于研究較少的身段識(shí)別研究應(yīng)有更多的深入和探索；根據(jù)目前情緒識(shí)別研究中的不足，需加強(qiáng)對(duì)情緒識(shí)別系統(tǒng)性的研究，形成一個(gè)系統(tǒng)的情緒識(shí)別研究體系，以幫助于人們準(zhǔn)確而快速的對(duì)情緒進(jìn)行識(shí)別；而最重要的是，我們要利用已有的研究成果及其理論來指導(dǎo)我們的現(xiàn)實(shí)生活，更全面的為我們的生活服務(wù)。

[1] 孟昭蘭.人類情緒[M].上海：上海人民出版社,1989.

[2] Richard J Davidson,Heather Abercrombie,Jack B Nitschke and Katherine Putnam,Regional brain function,emotion and disorders of emotion [J].Current Opinion Neurobiology,1999,9（2）:228-234.

[3] Keith Oatley,Dacher Keltner,Jennifer M Jenkins,Understanding Emotion[M].Cambridge,MA:Blackwell, 2006.

[4] Buck R.Biological affects:a typology[J].Psychological Review,1999,106（2）:301-336.

[5] 葉映華.現(xiàn)代人情緒管理[D].杭州：浙江大學(xué)，2008:4.

[6] 張威.漢語(yǔ)語(yǔ)音情緒識(shí)別[D].北京：中國(guó)科學(xué)科技大學(xué),2007.

[7] 劉月華.典型生理信號(hào)綜合測(cè)量及情緒識(shí)別研究[D].上海：上海交通大學(xué),2011.

[8] 程波,劉光遠(yuǎn).基于小波變換的表面肌電信號(hào)的情感識(shí)別[J].計(jì)算機(jī)工程與應(yīng)用,2007（35）:216-218.

[9] 林時(shí)來,劉光遠(yuǎn),張慧玲.蟻群算法在呼吸信號(hào)情感識(shí)別中的應(yīng)用研究[J].計(jì)算機(jī)工程與應(yīng)用,2011（2）:169-172.

[10] 張琰.三種情緒表情的識(shí)別及其相互影響研究[D].蘇州：蘇州大學(xué),2010.

The Commentary on the Emotion Recognition Research

TANG Song-xiao

（Student Work Department,Jilin Institute of Chemical Technology,Jilin City 132022,China）

Emotion,as a form of human responses to the objective world,is an important part of our human psychology.Emotion plays an important role both in organizing and guiding others’ behavior,communication and in predicting others’ will.Emotion recognition is a process to infer the individual’s emotion status through physiological changes,expression changes and voice changes when emotions happen.As an important branch of psychology and cognitive sciences,study on emotion recognition has been noticed by majority of scholars.In this paper,according to a lot of literature researches,the definition of emotion,classification of emotion and the definition of emotion recognition were reviewed and summed up and the inadequacies of the study were analyzed.Finally,the future direction and the application of the studies on emotion recognition were prospected,which would provide some reference for the study in emotional psychology.

emotion；emotion recognition；facial expression；posturesvoice

2015-09-25

唐嵩瀟（1990-），女，吉林省吉林市人，吉林化工學(xué)院助教，碩士，主要從事認(rèn)知心理學(xué)方面的研究。

1007-2853（2015）10-0109-06

B 849

A

10.16039/j.cnki.cn22-1249.2015.10.031