漢語(yǔ)言文字的交互方式與技術(shù)實(shí)踐研究

楊潔　楊志麟　王可　王文聰

摘 要：漢語(yǔ)言文字（下文簡(jiǎn)稱：漢字）交互設(shè)計(jì)的形式多樣，不勝枚舉，甚至出現(xiàn)了定義模糊、界限難以劃定的現(xiàn)象。然而，交互設(shè)計(jì)的本質(zhì)是行為設(shè)計(jì)。因此，設(shè)計(jì)核心在于交互方式的設(shè)計(jì)與通過(guò)相關(guān)技術(shù)將其實(shí)現(xiàn)。筆者從漢字交互原則展開(kāi)，闡述了關(guān)于交互方式和交互技術(shù)實(shí)現(xiàn)的研究觀點(diǎn)，為未來(lái)的漢字交互設(shè)計(jì)提供了若干研究思路和多角度思考參考。

關(guān)鍵詞：漢語(yǔ)言文字；交互方式；交互技術(shù)實(shí)踐；漢字交互原則

1 漢字交互原則

漢字交互原則從文化傳播、人機(jī)交互、設(shè)計(jì)心理三方面可以歸結(jié)為三條原則，分別是漢字文化解碼、對(duì)話自然含蓄和生活態(tài)度外顯。

1.1 漢字文化解碼

解碼，指譯出代碼符號(hào)的消息。是話語(yǔ)信息傳遞過(guò)程中，受話人分析理解話語(yǔ)意義內(nèi)容的一種方式。[1]漢字文化解碼，在筆者理解就是用交互設(shè)計(jì)的方法把漢語(yǔ)言文字還原成它所代表的內(nèi)容或者將漢語(yǔ)讀音、漢字符號(hào)、讀寫的行為轉(zhuǎn)換成它所代表的信息、數(shù)據(jù)等的過(guò)程。解碼的過(guò)程是完成文化發(fā)布格式的更新，發(fā)布為本時(shí)代傳播效率更高、效果更好的文化格式。因此，解碼的重點(diǎn)是交互發(fā)布格式的選擇：移動(dòng)端、可穿戴設(shè)備、交互裝置藝術(shù)等。選擇的標(biāo)準(zhǔn)在于漢字文化與交互技術(shù)的匹配程度和具體的實(shí)踐條件限制。

1.2 對(duì)話自然含蓄

對(duì)話，在人機(jī)交互（英文HCI）領(lǐng)域一般區(qū)分為人與機(jī)器對(duì)話、人與系統(tǒng)的對(duì)話、機(jī)器與系統(tǒng)的對(duì)話三種?，F(xiàn)代交互技術(shù)的研究趨向于更為自然的對(duì)話與交互設(shè)計(jì)，將對(duì)話的語(yǔ)言從程序、字符、圖形、聲音等拓展到肢體語(yǔ)言、腦電意識(shí)語(yǔ)言等更廣闊的語(yǔ)言范圍。因此，語(yǔ)言表達(dá)的技藝成為一個(gè)新的研究重點(diǎn)和難點(diǎn)。漢語(yǔ)言文字表達(dá)技藝的核心總結(jié)為“含蓄”，即指委婉而非直言，謙虛靈活應(yīng)對(duì)。這種表達(dá)更容易被別人接受，也更能表現(xiàn)出對(duì)別人的尊重，達(dá)到有效交流，溝通思想的目的。

1.3 生活態(tài)度外顯

生活態(tài)度，是人們一種穩(wěn)定的心理傾向和基本意愿，通過(guò)生活實(shí)踐而形成的。漢字交互中通過(guò)將用戶內(nèi)在穩(wěn)定的心理和意愿等情感表現(xiàn)為交互行為方式、交互視聽(tīng)語(yǔ)言和交互技術(shù)實(shí)踐等，提高了漢語(yǔ)言文字傳播的廣度和深度。外顯的目的就是為了更好的傳播和溝通，其優(yōu)勢(shì)在于滿足用戶超越語(yǔ)言表達(dá)范疇的精神品位追求。生活態(tài)度的外顯的重點(diǎn)應(yīng)著眼于交互方式的研究，難點(diǎn)在于對(duì)于生活態(tài)度的解析和行為重構(gòu)設(shè)計(jì)。生活態(tài)度外顯的需求，來(lái)自于不同用戶群體多方面水平的差異，例如，經(jīng)濟(jì)條件的限制、情感化需求、社交認(rèn)同的需要等。

2 交互方式的繼承與創(chuàng)新

2.1 交互方式的選擇

交互方式的選擇，是完成從問(wèn)題研究范疇到設(shè)計(jì)研究范疇的轉(zhuǎn)型。因此它是漢字交互設(shè)計(jì)的關(guān)鍵步驟。交互方式有兩種基本類型：第一，以活動(dòng)為基礎(chǔ)的交互，如指令、交談、導(dǎo)航與操控、探索與瀏覽；第二，以對(duì)象為基礎(chǔ)的交互，通?；趯?duì)物理世界物體的模擬，如一本書(shū)、一個(gè)工作臺(tái)等場(chǎng)景。在完成交互設(shè)計(jì)時(shí)，經(jīng)常是兩種類型的交互方式的綜合運(yùn)用。通常，交互方式依據(jù)用戶需求、設(shè)計(jì)預(yù)算、支持用戶行為的適當(dāng)?shù)慕换ゼ夹g(shù)和其他限制等因素進(jìn)行選擇，進(jìn)而發(fā)布成不同風(fēng)格的交互格式。

2.2 交互方式的繼承與創(chuàng)新的內(nèi)容

交互方式的繼承是對(duì)于用戶行為習(xí)慣的尊重和滿足本民族或當(dāng)?shù)匚幕^承需求，這也正是漢字交互設(shè)計(jì)存在的意義。例如，中國(guó)人對(duì)于打開(kāi)卷軸或扇子的動(dòng)作并不陌生，這來(lái)源于人們有相關(guān)的生活經(jīng)歷或具備基本的漢文化知識(shí)。那么在漢字交互設(shè)計(jì)中采用“平移展開(kāi)”或“扇形滑動(dòng)”相關(guān)動(dòng)作行為設(shè)計(jì)，這對(duì)于中國(guó)用戶來(lái)說(shuō)，會(huì)得到良好的用戶體驗(yàn)：文化認(rèn)同感、減少行為學(xué)習(xí)的負(fù)擔(dān)。

交互方式創(chuàng)新的對(duì)象是客戶旅程，[2]它涵蓋了某個(gè)產(chǎn)品或服務(wù)的各個(gè)階段中的體驗(yàn)感受：客戶的情感、目的、交互、障礙等。創(chuàng)新的難點(diǎn)在于避免設(shè)計(jì)與客戶體驗(yàn)格格不入的孤立的接觸點(diǎn)（touch point）或產(chǎn)品的特征。客戶在使用一個(gè)較復(fù)雜的產(chǎn)品或服務(wù)時(shí)，往往需要在一定時(shí)間內(nèi)分多個(gè)步驟或多個(gè)渠道對(duì)不同的接觸點(diǎn)進(jìn)行操作。因此，高水平的交互方式的創(chuàng)新是階段體驗(yàn)層次分明、不同接觸點(diǎn)自然過(guò)渡、產(chǎn)品功能從整體到階段，執(zhí)行力好的設(shè)計(jì)。

2.3 漢字交互方式的繼承與創(chuàng)新融合之術(shù)

日常生活的處處可見(jiàn)可聞的漢語(yǔ)言文字，不僅是社會(huì)化交流的必須，也影響著我們的思維方式和行為方式。它不但體現(xiàn)為口頭語(yǔ)言，還可以包括肢體語(yǔ)言和表情語(yǔ)言等。例如，中國(guó)人見(jiàn)面時(shí)作揖，雙手抱拳高拱、身子略彎以示敬禮；西方人見(jiàn)面時(shí)握手、擁抱或親吻臉頰表示友好。 交互行為會(huì)受到文化習(xí)俗的影響呈現(xiàn)多樣化的交互方式。當(dāng)下開(kāi)放的中國(guó)社會(huì)中西文化交匯、傳統(tǒng)文化行為與流行文化行為交織的狀態(tài)下，交互方式既要也要?jiǎng)?chuàng)新，這融合之術(shù)在于“信息的編碼與解碼”。

習(xí)俗會(huì)變遷、中外有差異，但我們要傳遞的信息是明確的。無(wú)論見(jiàn)面時(shí)作揖、握手、擁抱或親吻臉頰……不同動(dòng)作都是表達(dá)“您好！”之意。交互設(shè)計(jì)隨著科技更迭和文化差異，在信息傳遞中的編碼和解碼方式不斷變化?！熬幋a和解碼”理論，最早出現(xiàn)在80年代的美國(guó)電視傳媒領(lǐng)域研究中。在漢字交互設(shè)計(jì)中的理解，編碼，是按照一定設(shè)計(jì)思維方式的將承載信息的漢語(yǔ)言文字轉(zhuǎn)換成計(jì)算機(jī)程序語(yǔ)言，方便傳播和交互方式的創(chuàng)新。解碼，則是目標(biāo)用戶通過(guò)一定的交互行為從計(jì)算機(jī)程序語(yǔ)言獲取信息的過(guò)程。例如，2016年南京藝術(shù)學(xué)院工業(yè)設(shè)計(jì)學(xué)院交互設(shè)計(jì)專業(yè)萬(wàn)文杰和葛一漢同學(xué)的畢業(yè)設(shè)計(jì)作品《交互有聲臉譜》，幾十個(gè)京劇臉譜面具背后暗藏玄機(jī)。用戶輕輕叩擊京劇臉譜，不同角色的京劇臉譜就會(huì)發(fā)出對(duì)應(yīng)角色的京劇唱腔唱詞。京劇角色的信息如性格、語(yǔ)言特征和情感等以“唱”的語(yǔ)言形式和京劇臉譜視覺(jué)形式被重組編碼，用戶以“叩擊”的交互方式解碼并獲取信息，得到全新視、聽(tīng)、觸等多元體驗(yàn)。這樣，使得京劇的藝術(shù)魅力不再局限于舞臺(tái)或廣電等傳統(tǒng)傳播平臺(tái)，交互設(shè)計(jì)讓它有了新的展示平臺(tái)和觀眾的交互方式也日漸多元化。

3 漢字交互技術(shù)實(shí)踐與趨勢(shì)研究

3.1 漢字交互技術(shù)實(shí)踐

漢語(yǔ)言文字交互設(shè)計(jì)項(xiàng)目的實(shí)踐開(kāi)始于2014年，在廣博的漢語(yǔ)言文字中，交互設(shè)計(jì)團(tuán)隊(duì)不斷從新角度選擇題材、嘗試不同交互技術(shù)應(yīng)用、借鑒相關(guān)交叉學(xué)科的設(shè)計(jì)思維方法、理論和設(shè)計(jì)形態(tài)，完成多種類交互技術(shù)實(shí)踐，發(fā)布不同交互格式的設(shè)計(jì)作品。筆者將按交互格式分類、選擇典型案例介紹漢字交互技術(shù)實(shí)踐案例如下：

第一，增強(qiáng)模式網(wǎng)頁(yè)體驗(yàn)。網(wǎng)頁(yè)發(fā)布，受到交互智能產(chǎn)品多元化沖擊，需要轉(zhuǎn)型為能更好適應(yīng)不斷更新的智能交互設(shè)備的新發(fā)布形式——增強(qiáng)模式網(wǎng)頁(yè)體驗(yàn)。2014年南京藝術(shù)學(xué)院工業(yè)設(shè)計(jì)學(xué)院交互設(shè)計(jì)專業(yè)林荒同學(xué)的畢業(yè)設(shè)計(jì)作品《書(shū)法藝術(shù)體驗(yàn)》選擇HTML5交互技術(shù)應(yīng)用，歷代著名書(shū)法家的書(shū)法作品欣賞網(wǎng)頁(yè)交互體驗(yàn)更具美感和快感。HTML5語(yǔ)言的應(yīng)用，也讓跨平臺(tái)展示更具便捷，文本、圖片和視頻，可以自適應(yīng)不同平臺(tái)的尺度變化，極大地保持了設(shè)計(jì)的一致性和高效率。

第二，移動(dòng)端交互（平板電腦和移動(dòng)設(shè)備）。從智能手機(jī)誕生以來(lái)，移動(dòng)端的交互設(shè)計(jì)一直是交互設(shè)計(jì)的重要領(lǐng)域，技術(shù)革新快、商業(yè)應(yīng)用效果好，因此是交互專業(yè)技術(shù)研究的重要領(lǐng)域之一。南京藝術(shù)學(xué)院工業(yè)設(shè)計(jì)學(xué)院交互專業(yè)2014年畢業(yè)設(shè)計(jì)作品《方言地圖》以平板電腦作為交互體驗(yàn)和展示載體，用戶通過(guò)手指觸摸屏幕及語(yǔ)言指令互動(dòng)方式感受了以八大官話為代表的漢語(yǔ)方言的特色。平板電腦和移動(dòng)設(shè)備，例如智能手機(jī)、智能手表手環(huán)等可穿戴設(shè)備，帶來(lái)了無(wú)處不在的交互體驗(yàn)。在這類的設(shè)計(jì)實(shí)踐中，需要注意的重點(diǎn)在于誰(shuí)是用戶、用戶用設(shè)備做什么、怎樣拿著設(shè)備等。

第三，交互游戲。南京藝術(shù)學(xué)院工業(yè)設(shè)計(jì)學(xué)院交互專業(yè)陸娟娟、莊慧敏二位同學(xué)作品《漢字生肖》（見(jiàn)圖1）是一款基于圖像識(shí)別技術(shù)，為兒童早期語(yǔ)言學(xué)習(xí)服務(wù)的交互設(shè)計(jì)。游戲方式是利用立方體通過(guò)圖像識(shí)別技術(shù)把漢字通過(guò)動(dòng)物動(dòng)態(tài)的方式展示。剪紙畫風(fēng)交互視覺(jué)設(shè)計(jì)展現(xiàn)了中國(guó)味道的十二生肖動(dòng)態(tài)形象與漢字造型及讀音。

圖1 交互游戲《漢字生肖》作者：陸娟娟、莊慧敏，指導(dǎo)教師：楊志麟、楊潔、王可

圖2 交互作品《顏文緒字》作者：王宇，指導(dǎo)教師：楊潔

第四，多屏互動(dòng)。南京藝術(shù)學(xué)院工業(yè)設(shè)計(jì)學(xué)院交互專業(yè)王宇同學(xué)作品《顏文緒字》（見(jiàn)圖2）是基于智能電視和平板電腦或智能手機(jī)的多屏互動(dòng)，運(yùn)用表情識(shí)別技術(shù)認(rèn)識(shí)偏僻文字的實(shí)際應(yīng)用。平板電腦通過(guò)攝像頭識(shí)別表情、并表情解碼，再通過(guò)無(wú)線網(wǎng)絡(luò)將內(nèi)容傳輸?shù)街悄茈娨曂瓿烧故净?dòng)。多屏互動(dòng)基于DLNA協(xié)議，通過(guò)WIFI網(wǎng)絡(luò)，在不同多媒體終端進(jìn)行傳播內(nèi)容傳輸、展示、控制等一系列操作。通過(guò)跨平臺(tái)（智能家電、智能手機(jī)、可穿戴設(shè)備、車載多媒體等）和內(nèi)容的整合發(fā)布，可以創(chuàng)新的交互方式和體驗(yàn)，打破了單一交互終端交互體驗(yàn)上的局限性。它代表了一個(gè)新的交互方向“智能生態(tài)系統(tǒng)”的交互設(shè)計(jì)，是值得我們繼續(xù)深入研究的交互技術(shù)方向。

第五，展呈交互。博物館、展覽館、博覽會(huì)及各類展覽活動(dòng)中能越來(lái)越多看到新潮的交互技術(shù)應(yīng)用。漢字博物館、漢字語(yǔ)言知識(shí)競(jìng)賽等活動(dòng)也會(huì)伴隨著交互技術(shù)的應(yīng)用。因此，我們團(tuán)隊(duì)也嘗試著運(yùn)用軟硬件結(jié)合和VVVV語(yǔ)言的編寫，完成了南京藝術(shù)學(xué)院工業(yè)設(shè)計(jì)學(xué)院交互專業(yè)2016年畢業(yè)設(shè)計(jì)作品《時(shí)節(jié)味道》。本設(shè)計(jì)以機(jī)械拉線開(kāi)關(guān)和撥動(dòng)開(kāi)關(guān)兩種方式控制屏幕上多媒體播放，從操作方式復(fù)古性角度完成對(duì)展覽呈現(xiàn)方式的創(chuàng)新。

第六，無(wú)邊界交互（活動(dòng)和體驗(yàn)）。隨著技術(shù)發(fā)展，交互不再局限在屏幕里和指尖的滑動(dòng)。人們身體發(fā)出的多種信息都可以被智能交互設(shè)備識(shí)別產(chǎn)出互動(dòng)。例如，南京藝術(shù)學(xué)院工業(yè)設(shè)計(jì)學(xué)院交互專業(yè)鄭萍萍和馮婷同學(xué)的交互作品《甲骨文》運(yùn)用體感交互技術(shù)，通過(guò)單人或雙人的肢體語(yǔ)言實(shí)現(xiàn)甲骨文欣賞體驗(yàn)互動(dòng)。再如，南京藝術(shù)學(xué)院工業(yè)設(shè)計(jì)學(xué)院交互專業(yè)王宇同學(xué)作品《顏文緒字》通過(guò)用戶表情變化完成與智能設(shè)備互動(dòng)，表情識(shí)別技術(shù)，不但解放了雙手，也讓用戶體驗(yàn)了新的交互方式帶來(lái)的樂(lè)趣。最后，2016年南京藝術(shù)學(xué)院工業(yè)設(shè)計(jì)學(xué)院交互設(shè)計(jì)專業(yè)萬(wàn)文杰和葛一漢同學(xué)的畢業(yè)設(shè)計(jì)作品《交互有聲臉譜》用聲控技術(shù)完成的京劇唱腔體驗(yàn)交互設(shè)計(jì)。身體語(yǔ)言、表情語(yǔ)言、語(yǔ)音控制等多方面的交互技術(shù)嘗試也為漢語(yǔ)言文字的交互設(shè)計(jì)應(yīng)用拓寬了設(shè)計(jì)的邊界。

漢字交互設(shè)計(jì)不斷實(shí)踐應(yīng)用多種交互技術(shù)，追求體現(xiàn)多種風(fēng)貌的漢字交互設(shè)計(jì)作品。漢字交互作品或者學(xué)院風(fēng)，或者有商業(yè)應(yīng)用前景，都是對(duì)漢字交互設(shè)計(jì)形態(tài)的不斷嘗試。通過(guò)不同技術(shù)的應(yīng)用，不得不說(shuō)，交互技術(shù)對(duì)漢字交互設(shè)計(jì)形態(tài)、交互方式和體驗(yàn)的影響是巨大的。同時(shí)交互技術(shù)的新浪潮也不斷涌現(xiàn)，推進(jìn)漢字交互設(shè)計(jì)的研究深入，對(duì)交互技術(shù)趨勢(shì)的研究勢(shì)在必行。

3.2 交互技術(shù)趨勢(shì)研究

2016年被稱為VR元年。VR是Virtual Reality的縮寫，即虛擬現(xiàn)實(shí)，指借助計(jì)算機(jī)及最新傳感器技術(shù)創(chuàng)造的一種仿真的、沉浸式的人機(jī)交互手段。但支持這項(xiàng)技術(shù)的硬件如VR眼鏡尚存在一些體驗(yàn)欠佳的問(wèn)題。但對(duì)交互設(shè)計(jì)師而言，值得關(guān)注的并不是技術(shù)浪潮本身，VR概念早在80年代初就被提出，今年這一技術(shù)卻被炒地火熱的背后，是技術(shù)應(yīng)用能力的提高。好的交互設(shè)計(jì)師會(huì)考慮交互技術(shù)如何應(yīng)用可以提高生活質(zhì)量和提高工作效率。所以在關(guān)注技術(shù)趨勢(shì)中，不可忽視行業(yè)應(yīng)用的研究。行業(yè)不同、用戶不同、交互內(nèi)容與交互技術(shù)研究的結(jié)合，需要借鑒相關(guān)學(xué)科的研究方法，如系統(tǒng)設(shè)計(jì)、服務(wù)設(shè)計(jì)等相關(guān)思維方法。

4 結(jié)語(yǔ)

從點(diǎn)頭之交到點(diǎn)贊之交、遠(yuǎn)程互動(dòng)替代面對(duì)面交流……交互技術(shù)革新改變著我們的交互方式。交互技術(shù)的應(yīng)用也受到行業(yè)、文化和用戶差異等限制。因此漢語(yǔ)言文字的交互方式與技術(shù)實(shí)踐研究是一個(gè)互為補(bǔ)充的研究，從人的行為與計(jì)算機(jī)技術(shù)兩個(gè)角度尋求交集，為創(chuàng)造更好的漢字交互設(shè)計(jì)探索最佳解決方案。首先，明確三點(diǎn)漢字交互原則：漢字文化解碼、對(duì)話自然含蓄、生活態(tài)度外顯。其次，掌握漢字交互方式的繼承與創(chuàng)新融合之術(shù)：信息的編碼和解碼。再次，通過(guò)多項(xiàng)漢字交互技術(shù)實(shí)踐與趨勢(shì)研究總結(jié)教訓(xùn)摸索規(guī)律。最后，筆者將漢字交互設(shè)計(jì)任務(wù)總結(jié)為：創(chuàng)新交流方式、豐富語(yǔ)言形態(tài)，創(chuàng)新地傳承弘揚(yáng)漢語(yǔ)言文字的優(yōu)秀文化。希望以此為目標(biāo)，繼續(xù)完成漢語(yǔ)言文字交互設(shè)計(jì)項(xiàng)目的研究工作。

參考文獻(xiàn)：

[1] 董紹克，閻俊杰，劉中富，孫永選，張樹(shù)錚，等.漢語(yǔ)知識(shí)詞典[M].警官教育出版社，1996.

[2] 代爾夫特理工大學(xué)工業(yè)設(shè)計(jì)工程學(xué)院（荷）.設(shè)計(jì)方法與策略：代爾夫特設(shè)計(jì)指南[M].倪裕偉，譯.華中科技大學(xué)出版社，2014：57.

[3] 杰米·司迪恩（英）.交互設(shè)計(jì)[M].孔祥富，譯.電子工業(yè)出版社，2015：144-166.