李萌,賈云鵬
智能家居場景下的兒童游戲交互設(shè)計研究
李萌1,2,賈云鵬1
(1. 北京郵電大學(xué) 數(shù)字媒體與設(shè)計藝術(shù)學(xué)院,北京 100876;2. 中國傳媒大學(xué) 動畫與數(shù)字藝術(shù)學(xué)院,北京 100024)
智能家居環(huán)境為家庭中的游戲設(shè)計提供了新的可能性。探討在新場景下面向兒童的智能家居游戲交互設(shè)計策略,展示設(shè)計案例和實踐。簡要概述智能家居的含義,說明游戲作為家居活動對家庭成員的重要性。之后引入智能家居場景下和兒童游戲設(shè)計緊密相關(guān)的3種交互技術(shù),分析了該環(huán)境為兒童游戲設(shè)計帶來的改變。最后依據(jù)相關(guān)案例推導(dǎo)出設(shè)計策略,展示了一個設(shè)計實踐。智能家居中可交互的表面和沉浸式空間體驗,為兒童游戲機制和體驗帶來了拓展空間。新場景下的兒童游戲設(shè)計需要考慮并充分利用家居空間中的可交互表面,同時根據(jù)兒童用戶的行動特征選擇交互空間,規(guī)避雜物造成的空間交互障礙,為兒童和家庭成員提供具身性、可協(xié)作、更自然的家居游戲體驗。
智能家居;兒童游戲;游戲設(shè)計;交互設(shè)計;自然人機交互
隨著智能技術(shù)在居家場景中的廣泛應(yīng)用,智能家居為用戶帶來了更具自動化和便利性的生活。2019年新冠疫情席卷全球,兒童在家庭場景中的游戲時間也因為居家生活而不斷增加。游戲是兒童生活中的重要組成部分,也是兒童探索世界、和他人建立聯(lián)系的重要活動。在家居智能化的背景下,兒童的游戲形態(tài)發(fā)生了變化,也因此帶動了這一場景下游戲設(shè)計策略的迭代和更新。
針對用戶在智能家居場景中的游戲設(shè)計,學(xué)術(shù)界近年來已有相當(dāng)數(shù)量的前沿研究案例散落在設(shè)計學(xué)、游戲?qū)W、計算機科學(xué)等領(lǐng)域的國際會議和重要期刊中,但這些案例大多為面向某一具象的智能家居場景,或某一具體游戲機制的案例設(shè)計,鮮有針對新場景下新變化、新策略的梳理。在此背景下,本研究除了梳理面向兒童用戶的智能家居場景下游戲的新形態(tài)和新變化,還歸納相關(guān)案例并提出設(shè)計策略,最后展示了一個原創(chuàng)設(shè)計實踐,為設(shè)計師和相關(guān)研究者提供新思路。
在早期研究中,智能家居是一個相對寬泛的概念集合。這一名詞往往和全家自動化、智慧家庭、可被感知的房屋等名詞混用[1]。此前,智能家居的定義等同于自動化住宅,這一概念忽略了家庭環(huán)境中人與機器之間的交互[2]。Frances Aldrich認(rèn)為智能家居是能夠響應(yīng)并預(yù)測居住者需求的住宅,它能夠通過技術(shù)提升居住的舒適性、安全性、便利性和娛樂性[3]。Kirsten Hanssena[4]的研究將“家”的含義從居住場所拓展到物理和精神層面的活動空間,使居住者感到家庭關(guān)系的連續(xù)性,并提供身份和價值認(rèn)同。這一觀點因為將“家”的含義進行了延伸而頗具啟發(fā)性。在上述研究的啟發(fā)下,本研究提到的智能家居場景既包含與外界連通的家居空間,還涵蓋了居住者在家庭環(huán)境中進行的一系列智能活動。智能家居由燈光和設(shè)備控制、安全報警控制、娛樂系統(tǒng)控制、遠(yuǎn)程醫(yī)療控制等模塊組成[5-6],具有環(huán)境智能化、服務(wù)智能化和溝通智能化的特點[7]。
游戲是3~6歲學(xué)齡前兒童的主要活動類型。研究表明,學(xué)齡前兒童在玩電子游戲上花費了大量的時間,游戲除了為孩子們提供有趣味性的互動體驗,還能促進幼兒的認(rèn)知發(fā)展、社交互動、體育活動和健康行為[6]。在居家生活中,兒童的游戲行為大多需要家庭成員的陪伴,因此游戲還起到了充實家庭活動、提升家庭成員運動或?qū)W習(xí)能力的作用,是增強家庭成員關(guān)系的紐帶。
電子游戲?qū)和挠绊懯且粋€在學(xué)術(shù)界引起諸多爭議的話題?,F(xiàn)在主流的兒童電子游戲以屏幕交互為主,有研究認(rèn)為,這些電子游戲?qū)е聝和B(yǎng)成久坐不動的生活方式,阻礙了孩子們和家庭成員、同伴之間的社交生活[7]。不過,設(shè)計得當(dāng)?shù)碾娮佑螒蚰軌驗閮和瘞砀玫那楦泻蜕缃惑w驗。因此,如何化解電子游戲?qū)е潞⒆泳米粍优c游戲能夠帶來認(rèn)知和情感提升的這對矛盾,近年來成為研究者關(guān)注的焦點。智能家居作為普適計算的應(yīng)用,其中包含的自然交互界面能夠為用戶帶來多模態(tài)、自適應(yīng)的反饋,為以家居中實體物為游戲?qū)ο蠡蚪缑?、全家協(xié)同參與的電子游戲形態(tài)提供了誕生的土壤。遺憾的是,當(dāng)前研究探討智能家居中兒童游戲的文章較少。因此,本研究探討的范圍,主要為學(xué)齡前兒童及其家庭成員共同在智能家居環(huán)境中進行的協(xié)作性親子游戲。
人機交互是電子游戲技術(shù)中的重要部分,面向不同類型的玩家,交互方式直接影響游戲機制和游戲體驗。在降低認(rèn)知負(fù)荷的前提下,更加自然的交互技術(shù)能夠降低兒童用戶的學(xué)習(xí)成本,為他們帶來更真實的游戲體驗。在智能家居環(huán)境中的游戲交互技術(shù)有很多,其中空間增強現(xiàn)實、語音交互、實體交互是其中的代表(見圖1)。本章節(jié)概述了當(dāng)前智能家居環(huán)境下的兒童游戲人機交互技術(shù),為下一章節(jié)中對新場景下兒童游戲新變化的論述作準(zhǔn)備。需要說明的是,本部分內(nèi)容并非遍歷了所有的電子游戲人機交互技術(shù),而是選擇適用于智能家居場景下的相關(guān)技術(shù)進行闡述。
圖1 智能家居中的兒童游戲場景
空間增強現(xiàn)實(Spatial Augmented Reality,SAR)能夠通過投影等各種技術(shù)方式在物理空間內(nèi)顯示出虛擬內(nèi)容。因為融合了物理和數(shù)字空間,并且允許多個用戶觀察融合后的場景,所以空間增強現(xiàn)實適用于具有空間感知、環(huán)境感知的智能家居系統(tǒng)。這一技術(shù)在物理空間中的顯示有基于顯示屏、空間光學(xué)穿透和基于投影的空間顯示這3種[10]?;谕队暗腟AR具有投影光路可能被遮擋、對光照和投影材質(zhì)有一定要求的缺陷,但是這一類型的SAR在智能家居系統(tǒng)中更能滿足整體房間的沉浸式要求。IllumiRoom[11]是一個投影系統(tǒng),它通過擴展、模糊電視屏幕的邊界,將屏幕中的內(nèi)容和房間環(huán)境融為一體,從而給客廳的游戲用戶帶來全沉浸的游戲體驗。當(dāng)游戲開始的時候,房間會變?yōu)橛螒蛑酗L(fēng)格化的樣子,和電子游戲中的效果進行匹配。RoomAlive[12]是一個能夠自動對房間情況進行分析的智能游戲系統(tǒng),它通過分析房間的結(jié)構(gòu)布局、識別墻面和地板,將增強現(xiàn)實的數(shù)字游戲內(nèi)容疊加到特定的房間中。RoomAlive通過投影映射和空間增強現(xiàn)實,可以僅在當(dāng)前房間的地板范圍內(nèi)生成游戲中的敵人。
數(shù)字游戲中的語音交互技術(shù)包括將語音用于計算處理,或是用于玩家對電子游戲的輸入、輸出,但不包括玩家之間的語音交流[13]。這項研究始于20世紀(jì)70年代,最早是為了設(shè)計語言學(xué)習(xí)的游戲練習(xí)[14]。接下來,研究者們開始探索如何讓玩家用語音輸入來控制游戲,例如一些研究探索用音量和音高來控制接機類游戲的角色移動[15]。智能家居中安裝了用于檢測用戶語音行為的傳感器麥克風(fēng),數(shù)字游戲可以使用玩家的語音進行角色的發(fā)言、操作游戲中角色的行為動作(例如喊叫跳躍、射擊等),或是為角色的移動路線進行導(dǎo)航。在Yasuhati游戲中,玩家的音量控制游戲角色向前走:聲音越大,行走的速度越快。聲音超過一定范圍時,角色就開始跳躍[16]。語音輸入的控制方式自然且直接,并且因為容易掌握而適合兒童用戶。雖然玩家在使用語音交互玩游戲時容易胡言亂語,但卻能獲得意想不到的有趣的游戲體驗。
實體交互是將實體物對象與數(shù)字信息耦合,允許用戶通過抓握、移動等自然交互方式對數(shù)字信息進行操作的交互技術(shù)[17]。由于智能家居場景中的地板、墻面等物理表面可進行感知計算,這些可觸摸的實體物表面也成為了兒童數(shù)字游戲的界面。通過實體物表面對游戲進行控制,意味著用戶可以以更加自然、具身的方式進行交互。
智能地板的交互技術(shù)是這一方向中的重要組成部分。地板對用戶行為的感知方式有計算機視覺和壓力感知2種?;谟嬎銠C視覺的方法主要通過在空間內(nèi)布置攝像頭,但會產(chǎn)生依賴光照、有透視影響、以及多用戶交互時的遮擋問題。在臥室、洗手間應(yīng)用時,還會暴露用戶的隱私?;趬毫Ω兄姆椒m然能夠在一定程度上避免上述問題,但是卻無法準(zhǔn)確判斷用戶當(dāng)前的行為狀態(tài)。
GravitySpace[18]是一個8平方米的高分辨率可感知壓力的地板,它的感知方式是將基于攝像頭和壓力地板的解決方案進行結(jié)合,這一方案能夠覆蓋房間內(nèi)墻體之間的地板面積,同時也能夠較好的保護用戶隱私。用戶和物體在地板上直接接觸時,傳感器能夠感知地板的壓力分布;用戶在和地板上的虛擬物體接觸時,研究者通過用戶姿勢、和虛擬物體的碰撞進行上下文判斷,推斷當(dāng)前在地板上發(fā)生的用戶操作和狀態(tài)。用戶在GravitySpace中可以不佩戴任何設(shè)備,坐在地板上用身體直接控制賽車游戲;或是在地板上進行一場虛擬足球游戲。Lumetila[19]是一個虛擬和實體空間相混合的游戲,由帶有觸覺傳感器的交互地板和虛擬現(xiàn)實應(yīng)用同時構(gòu)成。交互地能夠精準(zhǔn)的識別用戶的動作,從而使得用戶通過踩踏交互地板這種更自然的人機交互方式來對游戲進行控制。
IllumiRoom[11]RoomAlive[12]GravitySpace[18]Lumetila[19]
傳統(tǒng)的兒童交互游戲主要發(fā)生在以屏幕、頭戴顯示器為主的虛擬空間等。這些以桌面計算機和虛擬現(xiàn)實頭顯為代表的計算設(shè)備在可計算媒介、兒童和環(huán)境中實施了隔離。智能家居中兒童用戶的游戲行為伴隨著對空間的感知和環(huán)境嵌入。孩子在空間中自如的移動,聚焦在屏幕、電視、桌面等傳統(tǒng)游戲的空間被拓展到了整體家居空間,交互界面從屏幕和手柄拓展到了家居中的可觸表面??臻g的改變對兒童的電子游戲交互界面和交互區(qū)域產(chǎn)生了影響。
1)家居表面作為游戲的交互界面。通過和家居環(huán)境相配合,游戲機制已經(jīng)不僅局限于傳統(tǒng)圖形用戶界面、虛擬現(xiàn)實空間內(nèi)的游戲類型。在此場景下,出現(xiàn)了在家居空間內(nèi)借助智能地板和墻面的虛擬足球、舞蹈,以及利用房間內(nèi)家具和空間、光影聲音相互配合的講故事游戲等新的游戲形態(tài)。SmartTiles是可以單獨進行編程的智能瓷磚[20]。每一塊方形瓷磚上都排布了4×4的燈光陣列數(shù)組,并且內(nèi)嵌了獨立的小型計算機。其中,智能瓷磚上的每一盞燈都可以通過直接按壓來切換“點亮”或“關(guān)閉”狀態(tài)。智能瓷磚允許用戶進行編程,并且可以通過拓展來擴大面積區(qū)域,同時可以通過觸摸來改變瓷磚上的燈光狀態(tài),形成圖案。
2)家居空間適配游戲交互區(qū)域。房間中的墻壁、地板、家具等實體物,以及映射在其上的虛擬物不僅可以感知兒童對象的位置、行為和情緒,還能夠為兒童提供反饋。換言之,當(dāng)孩子們在智能家居空間中用身體進行具身性的協(xié)作游戲時,他們知道房間會做出反應(yīng)。在這種模式下,智能家居被打造成為一個天然的游戲環(huán)境。Hide and Seek是一款智能墻紙[21],這款墻紙允許兒童在墻面上和數(shù)字角色玩“躲貓貓”游戲。父母對家居表面作為游戲界面感到滿意,因為實體界面能為孩子帶來不同的觸摸感受,并且?guī)椭麄儚膇Pad前站起來。
圖3 智能家居場景中兒童游戲的新變化案例
無論是電子游戲機上的跑酷、射擊游戲,還是以Wii為代表的體感游戲,用戶都不可避免地要去學(xué)習(xí)點擊左右按鍵、跳躍、揮動手柄等操控方式。這些操控方式對成年人來說可以迅速習(xí)得,但對兒童而言則需要更高的學(xué)習(xí)成本。自然人機交互技術(shù)下,兒童在場景中用身體來進行操作,配合語音、表情識別等進行更加自然的多模態(tài)交互。
1)多模態(tài)交互的游戲輸入輸出。Magika[22]是一個基于物聯(lián)網(wǎng)的兒童活動空間,它包含了墻面和地板投影的虛擬世界,以及由玩具、燈、其他智能對象構(gòu)成的物理世界。Magika能夠自動收集空間動作、跟蹤面部情緒和聲音并進行特征提取。Kid Space是面向兒童的智能交互空間,它通過投影對兒童在房間內(nèi)的狀態(tài)進行感知[23]。兒童在空間中進行多模態(tài)的輸入輸出,與物理空間中的對象進行動態(tài)交互。在Kid Space中使用了包括文本、聽覺、語言、視覺等多種模態(tài):兒童進行移動、和物理對象交互時使用了視覺模態(tài);兒童和虛擬化身進行對話時使用了語言、聽覺模態(tài);投影顯示圖像和文本時使用了視覺模態(tài)。在Kid Space中,孩子們可以通過觸摸手勢、空中手勢、姿態(tài)動作、面部表情、語音對話等多模態(tài)交互方式來和虛擬角色奧斯卡進行互動,例如假裝給奧斯卡喂早餐、向奧斯卡提問等。
2)基于情感計算的自適應(yīng)游戲處理系統(tǒng)。玩家在電子游戲中的情感需求有3個,即系統(tǒng)輔助玩家以減少挫敗感、根據(jù)玩家狀態(tài)調(diào)整難度、與玩家進行情感連接。在游戲中遇到困難和挫折會導(dǎo)致兒童玩家的游戲興趣降低?;谇楦杏嬎愕淖赃m應(yīng)游戲系統(tǒng)能夠根據(jù)玩家的狀態(tài)、情緒調(diào)整游戲難度。有研究者開發(fā)了基于面部情感計算的打地鼠學(xué)習(xí)游戲系統(tǒng),并得出了情感計算用于自適應(yīng)游戲中能夠提升玩家主動性的結(jié)論[24]。
傳統(tǒng)的兒童電子游戲具有離身屬性。孩子在屏幕前接受數(shù)字化的圖像、聲音和交互指令,然后通過鼠標(biāo)、觸屏或其他控制終端進行操作。雖然兒童處于游戲之外或游戲之中,兒童、游戲和家居空間之間的關(guān)系是具有明確界限的。
智能家居環(huán)境為兒童電子游戲創(chuàng)造了具身的可能。兒童融入環(huán)境中和游戲進行交互,身體的參與能夠提供強沉浸感,從而幫助孩子更好地對游戲進行感知。KidsRoom[25]是麻省理工學(xué)院的媒體實驗室(MIT Media Lab)研發(fā)的一個基于感知互動的兒童智能房間。房間通過計算機視覺算法來對兒童在空間中的行為進行識別。KidsRoom不僅能夠感知運動的位置和方向,還能夠通過上下文來對不同類型的動作進行判斷。孩子們可以在不佩戴傳感器、頭戴式顯示器、麥克風(fēng)等設(shè)備的前提下進入臥室,臥室中的床、柜子、架子均扮演了故事中的角色或道具。例如,可移動的床在森林中是一棵樹,在河流中則是一條船。孩子們靠近家具時會得到諸如“嘿,我是海盜的箱子!”這樣的語音提示。兒童可以根據(jù)提示靠近下一個家具并尋找故事的線索,并按照提示大聲喊出咒語,從而推進故事。在圖像、燈光、音樂等效果的映襯下,KidsRoom將兒童臥室打造成為一個智能敘事空間,孩子們在引導(dǎo)下,完成了一個冒險故事的扮演和敘述過程。
游戲化是指在非游戲場景下引入游戲設(shè)計元素,如積分、等級、任務(wù)等[26]。智能家居的控制呈現(xiàn)出游戲化趨勢,具體表現(xiàn)在日常家居操作的趣味性提升。
AmI@Home是一個智能家居的管理和配置系統(tǒng)[27]。這一系統(tǒng)將游戲機制引入系統(tǒng)規(guī)則之中。每位家庭成員都有一套積分,可以通過規(guī)則向其他家庭成員申請設(shè)備或請求服務(wù)。例如管理烤箱將獲得100積分,在廚房沒有人且烤箱運轉(zhuǎn)過久的情況下,家庭成員會收到“關(guān)閉烤箱”的邀請,他們在收到通知后可以對烤箱進行操作,成功后會獲得積分。
根據(jù)上文對智能家居環(huán)境下兒童游戲人機交互常用技術(shù)的介紹,以及相關(guān)場景中兒童游戲的新變化,推導(dǎo)出智能家居場景中兒童游戲的3點設(shè)計策略。首先,智能家居場景的空間變化導(dǎo)致了兒童游戲空間的改變,這一變化將鼓勵兒童游戲交互和家居空間更好的融合;其次,智能家居中的人機交互從傳統(tǒng)的交互方式向著更加自然的交互方式進行轉(zhuǎn)變,促使這一場景下的游戲設(shè)計為兒童和家庭成員提供多模態(tài)的交互方式;最后,孩子們在智能家居環(huán)境下能夠身處游戲場景的包圍之中,身體的沉浸讓兒童獲得具身體驗的可能性。因此在游戲設(shè)計時應(yīng)充分考慮從離身到具身的游戲體驗改變。
圖4 智能家居場景中兒童游戲的新變化及其應(yīng)對策略
得益于兒童善于幻想的天性,智能家居游戲能夠使他們在房間內(nèi)展開想象。游戲的界面和設(shè)備隱藏在家居環(huán)境中,桌面、地板、墻面等空間組成和智能家具均可以作為交互界面。
智能家居并非意味著無限增大的居住空間,而是針對特定空間具有特定的智能設(shè)計。在不同的房間大小和布局中,兒童游戲系統(tǒng)通過分析房間的外觀來對墻面和地板的尺寸和空間信息進行捕獲。游戲機制雖然大體相同,但根據(jù)空間特點,會表現(xiàn)出不同的場景形態(tài)。
調(diào)用多種感官的交互方式能夠為兒童帶來全方位的感官刺激,可以提升兒童用戶的參與度和積極性。在智能家居環(huán)境中,嘗試將數(shù)字化的虛擬物品和家居物理空間進行疊加,同時減少兒童用戶在游戲時的穿戴設(shè)備。通過實現(xiàn)兒童在空間中的自由移動,帶來更加自然的多模態(tài)交互體驗。然而,多模態(tài)交互方式需要考慮兒童的年齡特征,例如低齡兒童不適于過多的全屋投影或全沉浸式虛擬現(xiàn)實技術(shù)(如VR),這將對兒童的視力發(fā)展造成傷害。
實際上,智能家居中的一些環(huán)境并不適合進行觸摸和交互。因為家居環(huán)境中除了相對固定的家具,還會擺放裝飾品和一些易碎物品,例如桌子上的瓶子或是墻面上的油畫。對于兒童用戶而言,這些很容易帶來行動上的安全隱患。因此,在當(dāng)前智能家居兒童游戲設(shè)計中,多數(shù)游戲交互空間應(yīng)考慮地板、墻面、桌面等更加寬闊的空間。
根據(jù)智能家居場景中游戲的新變化和設(shè)計策略,下面展示一個兒童游戲設(shè)計實踐——智能游戲桌。
兒童智能游戲桌由3個模塊組成,即一個支持協(xié)作的兒童和家庭成員用戶輸入模塊,由實體交互桌面以及能夠被感知位置和速度等信息的棋子組成。實體交互桌面是一個能夠滿足多點觸控的電容觸摸屏;一個邏輯處理模塊,由計算機及其中的交互應(yīng)用程序組成,用于記錄用戶的操作,并將操作的步驟和內(nèi)容存儲進數(shù)據(jù)庫;一個增強現(xiàn)實投影顯示模塊,用于為兒童和家庭成員提供游戲化的閱讀內(nèi)容、增強現(xiàn)實環(huán)境體驗和游戲后的故事生成。
兒童智能閱讀桌面能夠滿足多人同時游戲。父母和孩子來到閱讀桌面前,選擇舒適的位置坐下來準(zhǔn)備開始游戲。首先,在增強現(xiàn)實模塊提示下,父母陪伴孩子開始電子繪本的閱讀。這部分閱讀不帶交互操作,并且父母需要為孩子進行故事朗讀。故事的最后留下一個懸念,如“小男孩能否戰(zhàn)勝機器人?”此時,父母和孩子來到游戲桌前,選擇各自代表的角色。
孩子和父母選擇桌面上的積木角色進行扮演。桌面上小棋子的移動,映射了角色在故事中的運動,見表1。
兒童和家庭成員一邊擺弄棋子,一邊在增強現(xiàn)實投影上觀看實體棋子映射在數(shù)字化世界中的動畫。例如當(dāng)兩個棋子接觸、相撞時,兒童和家庭成員完成打斗后,將在投影中觀看到虛擬角色的一段打斗動畫。除此之外,增強現(xiàn)實投影允許角色在不同場景中切換,讓用戶感受到不同的沉浸式動畫體驗,并且錄下自己編織的故事。
游戲交互完成后,孩子可以和家庭成員共同欣賞剛才的游戲動畫錄像。兒童可以在這個環(huán)境內(nèi)開展各種各樣的表演嘗試,同時扮演不同角色,錄制故事動畫并且欣賞故事。
兒童智能游戲桌擁有一條相對固定的故事主線。在軟件層面,首先通過故事背景的介紹進入場景模式。經(jīng)過場景初始化后,兒童和家庭成員控制的棋子角色出現(xiàn)在屏幕上的初始位置。其次,通過系統(tǒng)的引導(dǎo)和提示,用戶的操作和游戲中的故事控制器進行通信,檢驗棋子的合法性。最后,系統(tǒng)等待用戶進行位移、旋轉(zhuǎn)等操作,將用戶的操作轉(zhuǎn)化為結(jié)構(gòu)化語義服務(wù),并將相關(guān)內(nèi)容存儲到數(shù)據(jù)庫中。存儲成功后,再逐層反饋,進行用戶界面刷新,等待下一輪的用戶操作。和過往的兒童電子游戲不同的是,智能家居為人們提供了一個完全沉浸式的具身化體驗空間。這種游戲形式更利于協(xié)作,并且和兒童身體的感官體驗密不可分。
圖5 智能家居場景中的兒童游戲桌故事版示意
表1 桌面棋子運動和虛擬角色行為之間的映射關(guān)系
Tab.1 Mapping relationship between movements of pieces in table and virtual character behaviors
圖6 智能家居場景中的兒童游戲桌
研究了智能家居中兒童游戲的重要性,歸納了面向兒童用戶進行智能家居游戲設(shè)計的關(guān)鍵技術(shù)。在此基礎(chǔ)上,梳理了在智能家居場景下兒童游戲的新變化,并且以前沿案例為基礎(chǔ)提出了游戲設(shè)計的相關(guān)策略。最后介紹了智能家居環(huán)境下兒童游戲設(shè)計的實踐案例。智能家居場景為面向兒童的游戲設(shè)計提供了多模態(tài)、全沉浸的體驗環(huán)境,同時促使兒童的交互操作向自然交互進行轉(zhuǎn)變。
[1] ALAM M R, REAZ M, ALI M. A Review of Smart Homes—Past, Present, and Future[J]. IEEE Transactions on Systems Man & Cybernetics Part C, 2012, 42(6):1190-1203.
[2] YAMAZAKI T. Beyond the Smart Home[C]. International Conference on Hybrid Information Technology. Cheju: IEEE, 2006.
[3] MANLEY E D, NAHAS H A, DEOGUN J S. Localization and Tracking in Sensor Systems[C]// SUTC '06: Proceedings of the IEEE International Conference on Sensor Networks, Ubiquitous, and Trustworthy Computing. New York: ACM, 2006: 237-242.
[4] GRAM-HANSSEN K, DARBY S J. "Home is Where the Smart is"? Evaluating Smart Home Research and Approaches Against the Concept of Home[J]. Energy Research & Social Science, 2018, 37: 94-101.
[5] 劉嬋嬋, 繆旭紅, 萬愛蘭, 韓曉雪. 手臂監(jiān)測傳感器的設(shè)計與驗證[J]. 絲綢, 2020, 57(2): 108-113.
LIU Chan-chan, MIAO Xu-hong, WAN Ai-lan, et al. Design and Verification of Arm Monitoring Sensor[J]. Journal of Suik, 2020, 57(2): 108-113.
[6] 鄒艷玲, 鄭聰, 江心雨, 胡吉永. 基于RFID技術(shù)的無線無源紡織應(yīng)變傳感器研究進展[J].絲綢, 2021, 58(08): 53-59.
ZOU Ling-ling, ZHENG Cong, ZHENG Xin-yu, et al. The Progress of Research on RFID-based Wireless Passive Textile Strain Sensors[J]. Journal of Suik, 2021, 58(8): 53-59.
[7] 陳卯純, 孫薇, 趙小惠. 物聯(lián)網(wǎng)智能家居中的人機交互[J]. 包裝工程, 2014, 35(2): 64-67.
CHEN Mao-chun, SUN Wei, ZHAO Xiao-hui. Human-Computer Interaction in Internet of Things Smart Home[J]. Packaging Engineering, 2014, 35(2): 64-67.
[8] LIEBERMAN D A, FISK M C, BIELY E. Digital Games for Young Children Ages Three to Six: From Research to Design[J]. Computers in the Schools, 2009, 26(4): 299-313.
[9] FANG Meng-lin, TAPALOVA O, ZHIYENBAYEVA N, et al. Impact of Digital Game-Based Learning on the Social Competence and Behavior of Pre-Schoolers[J]. Education and Information Technologies, 2022, 27(3): 3065-3078.
[10] 袁慶曙, 王若楠, 潘志庚, 等. 空間增強現(xiàn)實中的人機交互技術(shù)綜述[J]. 計算機輔助設(shè)計與圖形學(xué)學(xué)報, 2021, 33(3): 321-332.
YUAN Qing-shu, WANG Ruo-nan, PAN Zhi-geng, et al. A Survey on Human-Computer Interaction in Spatial Augmented Reality[J]. Journal of Computer-Aided Design & Computer Graphics, 2021, 33(3): 321-332.
[11] JONES B R, Benko H, Ofek E, et al. IllumiRoom: peripheral projected illusions for interactive experiences [C]// CHI '13 Extended Abstracts on Human Factors in Computing Systems. New York: ACM, 2013.
[12] JONES B, SHAPIRA L, SODHI R, et al. RoomAlive: magical experiences enabled by scalable, adaptive projector-camera units [C]// the 27th annual ACM symposium. New York: ACM, 2014.
[13] ALLISON F, CARTER M, GIBBS M, et al. Design Patterns for Voice Interaction in Games [C]// Proceedings of the 2018 Annual Symposium on Computer-Human Interaction in Play. Melbourne VIC Australia. New York: ACM, 2018.
[14] JOHNSON W L, VALENTE A. Tactical Language and Culture Training Systems: Using AI to Teach Foreign Languages and Cultures[J]. AI Magazine, 2009, 30(2): 72.
[15] VIEIRA M, FU H, HU C, et al. PowerFall: A Voice- Controlled Collaborative Game [C]// In Proceedings of the first ACM SIGCHI annual symposium on Computer-human interaction in play (CHI PLAY '14). New York: ACM, 2014.
[16] FREEDOM C. Yasuhati[EB/OL]. (2017-02-01)[2022- 02-09]. https://www.mobygames.com/game/yasuhati.
[17] 米海鵬, 王濛, 盧秋宇, 等. 實物用戶界面: 起源、發(fā)展與研究趨勢[J]. 中國科學(xué): 信息科學(xué), 2018, 48(4): 390-405.
MI Hai-peng, WANG Meng, LU Qiu-yu, et al. Tangible User Interface: Origins, Development, and Future Trends[J]. Scientia Sinica (Informationis), 2018, 48(4): 390-405.
[18] ALAN B, CHRISTIAN H, DANIEL H, et al. GravitySpace: tracking users and their poses in a smart room using a pressure-sensing floor[C]// CHI '13 Conference on Human Factors in Computing Systems. New York: ACM, 2013.
[19] LEIKAS J, V??T?NEN A, R?TY V P. Virtual Space Computer Games with a Floor Sensor Control—Human Centred Approach in the Design Process[C]// International Workshop on Haptic Human-Computer Interaction. Berlin: Springer, 2001.
[20] ELUMEZE N, EISENBERG M. Smarttiles: Designing Interactive Room-Sized Artifacts for Educational Computing[J]. Children Youth and Environments,2005,15(1):54-66.
[21] HOARE C, CAMPBELL R, FELTON R, et al. Hide and seek: Exploring interaction with smart wallpaper[C]// Proceedings of the 2015 Annual Symposium on Computer-Human Interaction in Play. London United Kingdom. New York: ACM, 2015.
[22] GELSOMINI M, COSENTINO G, SPITALE M, et al. Magika, a Multisensory Environment for Play, Education and Inclusion[C]// CHI EA '19: Extended Abstracts of the 2019 CHI Conference on Human Factors in Computing Systems. New York: ACM, 2019: 1-6.
[23] ANDERSON G J, PANNEER S, SHI Meng, et al. Kid Space: Interactive Learning in a Smart Environment [C]// GIFT'18: Proceedings of the Group Interaction Frontiers in Technology. New York: ACM, 2018: 1-9.
[24] TSAI T W, LO H Y, CHEN K S. An Affective Computing Approach to Develop the Game-Based Adaptive Learning Material for the Elementary Students[C]// Proceedings of the 2012 Joint International Conference on Human-Centered Computer Environments, New York: ACM, 2012: 8.
[25] BOBICK A. The Kidsroom: A Perceptually-Based Interactive and Immersive Story Environment[J]. Presence, 1999, 8(4):369-393.
[26] DETERDING S, DAN D, KHALED R, et al. From Game Design Elements to Gamefulness: Defining "Gamification"[C]// International Academic Mindtrek Conference: Envisioning Future Media Environments. New York: ACM, 2011.
[27] FOGLI D, LANZILOTTI R, PICCINNO A, et al. AmI@ Home: A Game-Based Collaborative System for Smart Home Configuration.[C]// Proceedings of the International Working Conference on Ad-vanced Visual Interfaces. New York: ACM, 2016.
Interaction Design of Children's Games in Scenarios of Smart Homes
LI Meng1,2, JIA Yun-peng1
(1.School of Digital Media & Design Arts, Beijing University of Posts and Telecommunications, Beijing 100876, China; 2.School of Animation and Digital Art, Communication University of China, Beijing 100024, China)
The smart homes environments provide new possibilities for home game design. This paper is to explore design strategies for smart home game interactions for children in the new scenario. First, present a brief overview of the meaning of smart home and explain the importance of game as a home activity for family members. Then introduce three interactive technologies closely related to children's game design in the smart home scenario, analyze the changes brought by smart homes to children's game design. And finally propose design strategies based on relevant design cases and show a design practice. The interactive surfaces and immersive spatial experiences in smart homes provide room for expansion of children's game mechanisms and game experiences. The design of children's games in the new scenario needs to consider and make full use of the interactive surfaces in the home space, while choosing interactive space according to the action characteristics of children users, avoiding the spatial interaction barriers caused by fragmented furniture, and providing children and family members with an embodied, collaborative, and more natural home game experience.
smart home; children’s game; game design; interaction design; natural human-computer interaction
TB472
A
1001-3563(2022)16-0068-08
10.19554/j.cnki.1001-3563.2022.16.007
2022–03–12
北京市社會科學(xué)基金青年項目(21YTC037)
李萌(1983—),女,中國傳媒大學(xué)動畫與數(shù)字藝術(shù)學(xué)院博士生,北京郵電大學(xué)數(shù)字媒體與設(shè)計藝術(shù)學(xué)院講師,主要研究方向為兒童繪本的交互敘事設(shè)計和信息設(shè)計。
賈云鵬(1976—),男,博士,北京郵電大學(xué)數(shù)字媒體與設(shè)計藝術(shù)學(xué)院教授,主要研究方向為數(shù)字影像設(shè)計和虛擬現(xiàn)實影像設(shè)計。
責(zé)任編輯:陳作