虛擬現(xiàn)實全景流體繪畫系統(tǒng)的可用性研究

朱永寧，葛 婷，杜盛瑀，樓澤如，王建民

虛擬現(xiàn)實全景流體繪畫系統(tǒng)的可用性研究

朱永寧1，葛 婷1，杜盛瑀2，樓澤如1，王建民1

(1. 同濟大學(xué)藝術(shù)與傳媒學(xué)院，上海 201804；2. 騰訊科技天美T2工作室，上海 200233)

虛擬現(xiàn)實環(huán)境給三維空間場景應(yīng)用帶來更強的真實感和身臨其境的體驗。在虛擬現(xiàn)實場景中經(jīng)常需要使用360°全景圖像生成沉浸式環(huán)境背景，其中全景流體動力學(xué)繪畫系統(tǒng)提供了一個新的全景圖繪制方法。在調(diào)研虛擬現(xiàn)實技術(shù)在流體繪畫領(lǐng)域應(yīng)用的適用性測試中，本文綜合運用用戶測試法、操作日志分析法、事后問卷調(diào)查法和訪談法，對基于虛擬現(xiàn)實的全景式流體繪畫創(chuàng)作系統(tǒng)進行可用性評估，并創(chuàng)意性地使用可視化方法輔助日志分析。所有的受試者均認為系統(tǒng)的可用性不低于一般水平，利用該系統(tǒng)完成流體繪畫的創(chuàng)作工作不需要受試者具有專業(yè)繪畫經(jīng)驗。受試者對系統(tǒng)的功能效果持積極肯定的意見，并期待嘗試用其他交互形式代替手柄類交互方式以促進藝術(shù)創(chuàng)作的表達。其研究方法和結(jié)果將為同類系統(tǒng)的開發(fā)和評估提供參考。

可用性；有效性；用戶體驗；虛擬現(xiàn)實；流體藝術(shù)

近年來，虛擬現(xiàn)實(virtual reality，VR)技術(shù)在醫(yī)療、城市仿真、教育和娛樂等廣泛領(lǐng)域，展現(xiàn)出強大的傳播推動力[1]。隨著以用戶為中心的設(shè)計理念(user centered design，UCD)逐漸深入人心，對系統(tǒng)進行可用性評估變得日益重要。不同于移動或桌面應(yīng)用，虛擬環(huán)境中的交互系統(tǒng)的可用性，尤指控制的精確性和交互的自然性；其會影響用戶對系統(tǒng)的使用[2]。因此可用性評估被越來越多地被引入到VR系統(tǒng)開發(fā)中。目前，針對藝術(shù)創(chuàng)作系統(tǒng)可用性評估的研究較為缺乏?？紤]到VR領(lǐng)域獨有的特點，其在評估上與傳統(tǒng)以桌面為平臺的系統(tǒng)有所不同[3]。盡管已有不少學(xué)者針對這個問題做了研究，多數(shù)模型和標(biāo)準仍無法支持所有影響可用性的因素[4-6]。

全景式流體繪畫創(chuàng)作系統(tǒng)是一個代表性的基于VR環(huán)境的藝術(shù)創(chuàng)意系統(tǒng)。本文基于該系統(tǒng)進行可用性分析。該系統(tǒng)的畫面同時受到動力學(xué)模擬和用戶操作的影響，與其他藝術(shù)創(chuàng)作系統(tǒng)有明顯的差異，評估的復(fù)雜度和難度也更大。尤其是研究人員無法了解用戶在虛擬環(huán)境中的使用過程，這成為調(diào)研VR系統(tǒng)的一大挑戰(zhàn)。本文以該系統(tǒng)為平臺，創(chuàng)新性地將操作日志法應(yīng)用于VR系統(tǒng)的評估中，特別是應(yīng)用可視化方法輔助日志分析，為研究人員了解用戶的操作行為提供了直觀的線索和證據(jù)，同時輔之以其他通用的定性和定量研究方法，對系統(tǒng)當(dāng)前可用性狀況進行評估，查找系統(tǒng)中存在的可用性問題，為同類系統(tǒng)的開發(fā)和評估提供參考。

1 相關(guān)工作

客觀評價能夠直接反映用戶對系統(tǒng)的認可程度。KEEFE等[7]從交互行為的角度出發(fā)，基于用戶的主觀評價對CavePainting系統(tǒng)進行了初步的形成性評估。M?KEL?等[8]是基于用戶純主觀反饋評估調(diào)查了三維繪畫工具在技術(shù)上的局限性和創(chuàng)作上的潛力。EROGLU等[9]在對流體草圖系統(tǒng)的評估中，主要針對用戶的主觀評價進行了討論。

通過客觀評價指標(biāo)來度量系統(tǒng)的可用性是另一種重要的方法。KEEFE等[10]提出了一項基于觸覺輔助的三維建模輸入技術(shù)，并對其進行了初步的評估探索。出錯數(shù)和任務(wù)完成時間是衡量任務(wù)績效的2大指標(biāo)。ISRAEL等[11]通過對比用戶在二維和三維條件下的任務(wù)表現(xiàn)，對沉浸式三維草圖系統(tǒng)的功能進行了驗證，主要依據(jù)為任務(wù)完成時間和專家對任務(wù)表現(xiàn)的評分。除了主觀評價和任務(wù)時間、任務(wù)水平滿意度、測試水平滿意度、出錯數(shù)、完成數(shù)[12]等績效指標(biāo)外，主觀的腦力負荷等心理學(xué)方面的測量因素也開始用于績效評估[13]。

上述通用的定量和定性方法均不能反映用戶在虛擬環(huán)境中的使用過程和操作細節(jié)，缺失了VR系統(tǒng)可用性評估的重要證據(jù)。繪畫作品創(chuàng)作過程尤其重要，這也是度量系統(tǒng)可用性的一個途徑[7]。在網(wǎng)頁和移動端的交互設(shè)計中，有研究提出了應(yīng)用操作日志分析法來分析用戶交互行為和評估系統(tǒng)可用性的思路。GRAY等[14]指出操作日志法，可輔助研究人員發(fā)現(xiàn)網(wǎng)站在可用性方面存在的問題。WEI等[15]通過對用戶在eBay電商網(wǎng)站點擊流的分析，研究用戶的交互行為，以此指導(dǎo)和驗證網(wǎng)站的功能設(shè)計。然而，在VR領(lǐng)域，這方面的研究較少。JACKSON和KEEFE[16]將操作日志應(yīng)用于沉浸式三維建模系統(tǒng)Lift-off的可用性評估中，為研究人員了解用戶的動作和行為提供了線索。

綜上所述，主觀評價是獲取用戶對系統(tǒng)態(tài)度的最直觀的方式，本文將通過觀察法、大聲思維法和訪談法了解用戶對研究系統(tǒng)的感受。然而，由于該系統(tǒng)工作流程靈活且創(chuàng)作自主性高，用出錯數(shù)、完成度等的績效指標(biāo)來評定欠缺充分性，并采用問卷調(diào)查法補充衡量系統(tǒng)的可用性。另外，本文的研究參考了文獻[16]操作日志分析法，并創(chuàng)新性地應(yīng)用可視化方法輔助日志分析。本文綜合上述方法針對流體繪畫領(lǐng)域進行探討，為同類系統(tǒng)的評估提供思路。

2 系統(tǒng)架構(gòu)與設(shè)計

基于VR的全景式流體繪畫創(chuàng)作系統(tǒng)(panoramic fluid painting，PFP)是一個數(shù)字媒體藝術(shù)創(chuàng)意工具。二維平面中的水墨動力學(xué)模擬被廣泛應(yīng)用于模擬水墨和水彩繪畫效果[17-19]，但缺少沉浸感，不適合VR應(yīng)用的需求。文獻[9]開發(fā)的流體素描系統(tǒng)可以在CAVE環(huán)境中交互生成模擬流體運動的粒子，但缺乏沉浸感。DU等[20]提出一種沉浸式虛擬環(huán)境中的基于水墨動力學(xué)模擬的交互式繪制方法，其為全景繪畫藝術(shù)家提供了更加直接的解決方案——支持用戶在VR的全景球面上通過虛擬筆刷對球面圖像進行繪制，并基于水墨動力學(xué)方法實時模擬液體顏料和基底的演化。Tilt Brush(https://www.tiltbrush.com)和Quill(https://quill.fb.com/)同為沉浸式環(huán)境中進行繪畫創(chuàng)意的代表性應(yīng)用，其為基于空間的筆畫路徑及圖形生成畫面，而本文研究的系統(tǒng)則是直接處理像素圖像，并對其進行物理模擬，因此在繪畫創(chuàng)意中適用場景和畫面特點有所不同。

2.1 系統(tǒng)框架

該系統(tǒng)基于Unity3D引擎開發(fā)，使用Oculus Rift CV1作為頭戴式顯示設(shè)備，創(chuàng)建交互沉浸感。當(dāng)用戶帶上頭戴式顯示后，即進入一個虛擬場景空間(圖1)。該場景包括一個全景球面、用戶界面和虛擬畫筆。用戶界面用于設(shè)定畫筆屬性，材質(zhì)和物理性質(zhì)等，用戶通過操作筆刷在虛擬球面上進行顏料繪制。顏料繪制在球面上以流體動力學(xué)模擬生成水墨運動的質(zhì)感。

圖1 全景空間作品與參照作品((a)全景空間作品《數(shù)株連碧》；(b)測試用真實流體繪畫參考作品)

2.2 用戶界面

用戶界面的設(shè)計由3部分構(gòu)成(圖2)：色彩區(qū)、筆刷參數(shù)區(qū)和測試畫布。通過用戶界面，用戶可以方便地選擇、調(diào)整和設(shè)置筆刷并進行保存、更新等管理。通過選取調(diào)節(jié)參數(shù)，藝術(shù)家可以設(shè)計并管理顏色、筆刷貼圖、筆刷物理性質(zhì)等屬性。預(yù)設(shè)工具是本系統(tǒng)的一大特色。由文獻[9]和本系統(tǒng)早期的用戶測試均表明，大量的參數(shù)給初次使用系統(tǒng)的用戶帶來困難。這里提供一些預(yù)制參數(shù)組可以幫助用戶理解參數(shù)并快速開始作畫。經(jīng)過藝術(shù)家調(diào)制的預(yù)制筆刷在接下來的繪制流程中方便反復(fù)選取和修改，從而使得藝術(shù)家可以不間斷地完成從效果設(shè)計開發(fā)到創(chuàng)作的整個流程。預(yù)設(shè)筆刷中除了普通靜態(tài)筆刷，還帶有動力學(xué)效果如吸管、吹風(fēng)機、刮刀等工具的特效筆刷。類似地，藝術(shù)家可以方便地設(shè)計并管理預(yù)設(shè)顏色和預(yù)設(shè)紋理。

1.物理參數(shù)；2.預(yù)設(shè)筆刷；3.預(yù)設(shè)顏色；4.測試/紋理畫布；5.顏色選擇器；6.透明度；7.預(yù)設(shè)紋理；8.清空測試/紋理畫布

2.3 交互方式

虛擬畫筆由Oculus Touch 6自由度手柄映射實現(xiàn)。用戶完成一幅作品的流程包括：從顏色選擇器取色、預(yù)制顏色的設(shè)計與管理、筆刷物理參數(shù)調(diào)節(jié)(表1)、預(yù)制筆刷的設(shè)計測試與管理、筆刷紋理設(shè)計繪制與管理、在測試區(qū)域上的筆刷測試和全景球面上的實際繪制等步驟。

表1 參數(shù)詳情

3 可用性實驗設(shè)計

本文綜合考慮流體繪畫的復(fù)雜性、可重復(fù)性和效果，并選擇2個繪畫任務(wù)，招募了16位受試者進行可用性實驗。且對其行為進行了記錄，在實驗前、后進行調(diào)查和深度訪談。

3.1 受試者

16位具有藝術(shù)背景的受試者作為系統(tǒng)的主要受眾和目標(biāo)群體。其精通繪畫以及圖像處理的軟件，但事先未接觸過待測設(shè)備或類似系統(tǒng)。杰柯柏·尼爾森提出了一個學(xué)說，“5人參加的用戶測試，即可發(fā)現(xiàn)大多數(shù)(約85%)的產(chǎn)品可用性問題”[21]。

3.2 測試方法

本文聚焦于沉浸式環(huán)境中的全景式流體繪畫的有效性，以最基本的繪畫工具選用與否、以及使用所選的工具能否實現(xiàn)流體藝術(shù)的效果作為有效性的評價標(biāo)準。使用系統(tǒng)可用性量表(system usability scale，SUS)[22]收集用戶對系統(tǒng)的客觀評價。SUS因具有Alpha=0.91[23]很高的信度，即便在樣本量有限的情況下，也可以快速達到測試效果[24]，所以被廣泛用于測試產(chǎn)品/系統(tǒng)(原型)的可用性。SUS包含了10個題目，奇數(shù)項是正面陳述，偶數(shù)項是反面陳述。每項使用5點量表(1=強烈反對，5=非常同意)進行測量。得到的原始數(shù)據(jù)需將其轉(zhuǎn)化為百分制的分數(shù)。總分大于70表明系統(tǒng)/產(chǎn)品(原型)的可用性處在可接受的水平，而總分低于50則表明系統(tǒng)不可接受。

繼而通過2個開放式問題的訪談了解用戶對系統(tǒng)的主觀體驗：①請您談一談使用感想；②如果對系統(tǒng)進行優(yōu)化，您認為最應(yīng)該改善的是哪個部分？

3.3 測試任務(wù)

受試者參照花和羽毛的流體畫創(chuàng)作的視頻，在內(nèi)測試任務(wù)中分別完成了2個主題內(nèi)容的創(chuàng)作。其過程包括：將顏料倒入畫布上混合，并利用吸管、吹風(fēng)機或刮刀等工具進行調(diào)整。以上案例作為測試樣本有3方面的原因：①這2類主題的創(chuàng)作在流體繪畫中較為常見，具有代表性；②難度適中，適合新手用戶；③在花和羽毛的創(chuàng)作中分別用到了吹風(fēng)機和刮刀2種特殊效果工具。可以達到檢驗系統(tǒng)能否模擬流動效果的目的。

3.4 測試流程

(1) 培訓(xùn)。向受試者介紹測試的目的和作用，并強調(diào)測試的重點是產(chǎn)品的可用性，而不是其個人的能力和表現(xiàn)。之后，介紹系統(tǒng)的總體功能并對用戶界面、Oculus CV1和Oculus Touch手柄等的使用進行講解。為了促進受試者對流體繪畫的理解，要求其分別觀看現(xiàn)實中花和羽毛的創(chuàng)作視頻。

(2) 練習(xí)。受試者帶上頭戴式顯示設(shè)備，進入虛擬空間，自由練習(xí)。在練習(xí)中有任何疑惑均可提問，但不涉及工作流程。每位受試者的培訓(xùn)時間為15～20 min。

(3)執(zhí)行測試。受試者完成2個案例的測試。期間，鼓勵受試者說出正在思考的內(nèi)容。由于藝術(shù)創(chuàng)作具有自主性強的特點，因此測試計時但不限時。在此過程中，用戶操作細節(jié)及結(jié)果均被記錄到日志文件或錄制為視頻。

(4) 繪制完成后填寫SUS問卷并進行訪談。

另外，為了測試系統(tǒng)原型及設(shè)計方案和流程，在正式測試前，對3位藝術(shù)專業(yè)的學(xué)生(2位本科學(xué)生，1位研究生；2位女性，1位男性)進行了預(yù)測試。通過預(yù)測試，確定了數(shù)據(jù)收集狀況以及受試者對問卷的理解程度和測試所需時間。測試環(huán)境及設(shè)備如圖3所示。

圖3 測試環(huán)境及設(shè)備

3.5 測試評價

本文為2個案例設(shè)計了6個筆刷，通過選用筆刷和調(diào)整參數(shù)完成案例是本測試的關(guān)鍵步驟。對于案例1，主要使用普通筆刷1，以及帶有2種不同吹風(fēng)機特效的筆刷2和3；對于案例2，分別使用普通筆刷6，以及帶有2種不同刮刀特效的筆刷7和8。其中預(yù)制筆刷的排列，先右后左，每列自上而下被命為筆刷1～9，其中2，3，7，8為特效筆刷。

4 結(jié) 果

測試為期2周，共有13位藝術(shù)專業(yè)的學(xué)生參與了正式測試，其中男生5人，女生8人；9位本科生，3位碩士生和1位博士生；年齡19～28歲。7位曾有過VR體驗；9位學(xué)過繪畫，其中，7位的繪畫基礎(chǔ)超過1年。就流體繪畫方面的經(jīng)驗而言，有5位聽說過流體繪畫，僅有2位畫過流體繪畫。所有的受試者均為首次使用本文系統(tǒng)。不過，有2位表示，“雖沒用過該系統(tǒng)，但用過類似的”。均無視覺障礙，且均為右利手。

4.1 SUS量表結(jié)果

圖4為13位受試者的SUS總分以及相對應(yīng)的形容詞等級[23]。不難看出，所有的受試者均認為系統(tǒng)可用性不低于一般水平。其中，6/13的受試者認為可用性良好或優(yōu)秀，7/13受試者認為可用性一般。另外，研究還發(fā)現(xiàn)受試者的流體繪畫經(jīng)驗與對系統(tǒng)可用性的評價存在關(guān)系。受試者5和9有過流體繪畫的創(chuàng)作經(jīng)驗，相較其他沒有流體繪畫實踐經(jīng)驗的受試者，對系統(tǒng)有更高的評價。

圖4 13位受試者SUS總分及相應(yīng)形容詞等級

4.2 操作日志分析

在測試過程中，監(jiān)控系統(tǒng)對受試者活動的全過程進行視頻錄制和操作日志記錄。在日志中分別記錄了每一次操作事件的時間、行為、對象、具體操作及其他相關(guān)細節(jié)(如用戶界面中參數(shù)設(shè)定的具體的值，筆刷繪制的具體位置等)。表2分別列出了行為-對象-操作3組日志記錄標(biāo)簽分類及編碼表。

測試中用戶的行為分為3類：①離散事件，如點擊手柄上實體按鈕A/B鍵、通過扳機對用戶界面上按鈕(預(yù)設(shè)顏色、筆刷和紋理等)進行選擇等；②連續(xù)事件，如通過搖桿對物理參數(shù)進行調(diào)節(jié)和繪制。日志記錄事件的“開始”和“結(jié)束”及參數(shù)值變化情況。

統(tǒng)計工具使用頻率發(fā)現(xiàn)，除了案例1中的受試者5和9，其余受試者在2個案例中均選用了正確的筆刷工具。所有的受試者均完成了案例中的流體繪畫。在筆刷工具中，半徑調(diào)節(jié)工具使用頻率最高；在取色工具中，預(yù)設(shè)顏色的選用頻率也較高。藝術(shù)家在現(xiàn)實創(chuàng)作中最常調(diào)整的是畫筆的顏色和筆刷大小[10]。

表2 行為，對象及操作標(biāo)簽代碼含義

10/13的受試者在第1個案例中所用的時間明顯高于第2個，如圖5所示，考慮到2個案例在難度上相近，有可能隨著時間的推進大部分受試者對系統(tǒng)的使用趨于熟練。本文系統(tǒng)可以有效地實現(xiàn)流體繪畫效果，且工作流程靈活，功能的設(shè)計符合用戶的習(xí)慣。

圖5 13位受試者完成2個案例所用時間

4.3 深度訪談

深度訪談主要反映受試者的主觀感受。其內(nèi)容總結(jié)如下：

(1)受試者對系統(tǒng)的評價中(表3)，積極評價多于非積極的評價。部分受試者認為操作簡單易學(xué)、好用，體驗過程富有趣味，創(chuàng)作自由且能夠產(chǎn)生吸引人的效果。然而，一部分受試者認為交互方式、用戶界面等還存在一些問題導(dǎo)致體驗不佳。其中，幾條關(guān)于人體工程學(xué)的評論值得注意。首先，盡管本文采用單個手柄進行操作，繪畫時需持續(xù)保持同一姿勢，讓人感到疲勞。文獻[16]建議，使用更加輕量的輸入設(shè)備并最大程度地減少單個操作所需的精力將有望緩解使用的疲勞感。另外，“(手柄)精細操作容易手抖”的問題可能與以下幾個方面的因素有關(guān)：①繪畫時無物理依靠，控制困難；②長期執(zhí)有手柄感到疲勞；③手柄的精度還無法滿足精細操作的需求；④速度太慢也會引起抖動。這在一定程度上會影響藝術(shù)家的藝術(shù)創(chuàng)作和表達。文獻[8]建議，訓(xùn)練手部動作，或者避免過小的視覺操作動機，可以緩解不準確造成的干擾。尋找藝術(shù)和技術(shù)的平衡點也是后續(xù)迭代設(shè)計中需要考慮的重要問題。

表3 受試者對系統(tǒng)的評價

(2) 當(dāng)問及“你覺得系統(tǒng)的哪些地方需要改進？”時，受試者的意見主要集中于用戶界面的交互問題上。不少人指出，用戶界面一直顯示在全景式畫布上，“容易誤觸”“很礙手礙腳”。相比而言，Tilt Brush將用戶界面從虛擬空間中的畫布上解放出來，連接在用戶的左手上，用戶界面和畫布相互獨立，互不干擾。另外，允許用戶界面隱藏也可以達到相似的效果。

(3) 受試者還提出如下建議：有3位希望增加撤銷功能。有1位希望提供更豐富的畫筆效果。還有的受試者提出，作品以圖片的形式保存下來，失去了沖擊力和表現(xiàn)力。

4.4 對比實驗結(jié)果

為了更加客觀地評估基于VR的全景式流體繪畫創(chuàng)作系統(tǒng)的可用性問題，及其功能特點，本文以Tilt Brush為對照對象，采用同樣的實驗設(shè)計和方法進行對照研究(圖6)。共有5名藝術(shù)專業(yè)的學(xué)生參與了該項用戶測試，并繪制同樣的2幅測試作品。其中男生2人，女生3人，包括4位大學(xué)生和1位研究生。其均有過VR體驗以及3年以上繪畫基礎(chǔ)。

圖6 受試者作品比較

所有的受試者均認為Tilt Brush軟件的可用性為良好及以上水平。3位受試者認為可用性良好，另2位認為可用性優(yōu)秀。應(yīng)用其繪制立體線條非常有表現(xiàn)力且使用方便，但是對于帶有動力學(xué)質(zhì)感的測試畫面較困難。

4位受試者表示Tilt Brush的界面更加完善，而PFP界面的一些常用功能有待更新。1位受試者認為Tilt Brush畫板的三棱柱形界面設(shè)計擴展了畫板的空間。2位受試者認為PFP的筆刷制作流程有助于繪制較復(fù)雜的畫面，但學(xué)習(xí)其設(shè)定有一定困難。

與基于全景式繪畫空間的VR全景式流體繪畫創(chuàng)作系統(tǒng)相比，Tilt Brush的特色在于三維立體作畫空間。從體驗上來說，受試者認為2個軟件均充滿趣味，容易上手，且?guī)硇缕骟w驗。

5 操作日志可視化分析

對于藝術(shù)繪畫應(yīng)用，用戶在5 min左右的繪制過程中，將進行1.0～1.5萬次左右的操作，這些操作具有明顯的規(guī)律性和隨時間變化規(guī)律。本文通過可視化方法，更加直觀完整地表現(xiàn)用戶行為模式，并從中分析用戶行為特點。將行為-對象-操作編碼分別實時可視化(圖7)，從中詳細地觀察到4.2節(jié)中通過量化分析方法總結(jié)出的用戶替換和使用筆刷的頻率和模式。

圖7 實時可視化((a)行為-對象-操作日志可視化；(b)關(guān)鍵事件可視化)

進一步將不同用戶的行為可視化圖像進行比對，并直觀地呈現(xiàn)其用筆模式的異同(圖8)。一些受試者傾向于先用預(yù)設(shè)普通筆刷完成草稿，而后用特效筆刷來實現(xiàn)流動的效果，另一些則交叉使用預(yù)設(shè)普通筆刷和特效筆刷。圖8(a)中的m1段用戶頻繁更換顏色并測試，圖8(b)和(c)中的兩處m2段用戶花更多時間精細選擇顏色并頻繁使用固定顏色。類似的用筆模式區(qū)別在筆刷和參數(shù)的工具使用中也被觀察到。在測試筆刷的過程中，圖8(a)和(c)中的m3段用戶用筆頻率階段性高低變化。圖8(d)中的m4段用戶有繪制與休息思考間歇的行為。這些模式為今后進一步量化分析提供了新的思路。

用戶使用過程中頻率最高的關(guān)鍵事件對應(yīng)于行為-對象-操作等3組參數(shù)的組合，并對這些事件單獨進行編碼(表4)，將4.2節(jié)中離散事件和連續(xù)事件分別呈現(xiàn)在事件可視化畫面中，為直觀分析提供更清晰的輔助工具。進一步觀察到繪制、選筆刷和顏色這3類關(guān)鍵事件在本系統(tǒng)的用戶行為中最具代表性，因此，本文從關(guān)鍵事件可視化中提取上述3個事件的圖像合成，作為主要事件分析的工具(圖9)。通過3個事件的用戶比較可觀察到上述行為規(guī)律。

圖8 用戶比較及舉例((a)行為；(b)對象；(c)操作；(d)關(guān)鍵事件))

表4 行為-對象-操作及其對應(yīng)關(guān)鍵事件和事件編碼

圖9 繪制(黃色)，選筆刷(綠色)和選顏色(粉色)3個代表性事件的用戶行為模式比較

6 討 論

本文以流體畫為例，研究了基于VR的全景式流體繪畫創(chuàng)作系統(tǒng)的可用性問題，得到以下結(jié)論和發(fā)現(xiàn)：首先，該系統(tǒng)能夠有效地支持在VR空間模擬流體繪畫效果。即便是一個毫無經(jīng)驗的新手用戶也可以利用該系統(tǒng)完成流體繪畫的創(chuàng)作。同時，所有的受試者均認為系統(tǒng)的可用性不低于一般水平。具有流體繪畫實踐經(jīng)歷的受試者對系統(tǒng)的可用性有更高的評價。其次，從用戶的主觀評價來看，大部分受試者的體驗感受是積極的，積極評價多于非積極的評價。不過關(guān)于用戶界面的交互，以及幾個人體工程學(xué)方面的問題還有待進一步深入探究?？偠灾?，系統(tǒng)具備較好的可用性。

在進行用戶行為模式分析過程中，本文針對日志結(jié)構(gòu)開發(fā)了可視化的工具，并從中分析到用戶行為模式。在未來，研究將延伸至對操作日志的進一步可視化分析，使研究人員可以及時了解用戶的操作行為、監(jiān)測用戶的創(chuàng)作過程，為基于VR的全景式流體繪畫創(chuàng)作系統(tǒng)的可用性評估提出進一步研究建議，從而豐富VR應(yīng)用的可用性評估方案。

盡管360°全景式球幕為人們提供了環(huán)繞式的全方位繪畫空間，受試者可充分利用全景式空間。除了培訓(xùn)案例的局部性因素，對新手用戶而言，適應(yīng)并開展沉浸式的自主創(chuàng)意需要一個過程。這也是后續(xù)工作需關(guān)注的問題。

[1] 胡小強. 虛擬現(xiàn)實技術(shù)[M]. 北京: 北京郵電大學(xué)出版社, 2005.

HU X Q. Virtual Reality Technology[M]. Beijing: Beijing University of Posts and Telecommunications Press, 2005 (in Chinese).

[2] R?NKK? J, MARKKANEN J, LAUNONEN R, et al. Multimodal astronaut virtual training prototype[J]. International Journal of Human-Computer Studies, 2006, 64(3): 182-191.

[3] BOWMAN D A, GABBARD J L, HIX D. A survey of usability evaluation in virtual environments: classification and comparison of methods[J]. Presence, 2002, 11(4): 404-424.

[4] HALE K S, STANNEY K M. Handbook of virtual environments[EB/OL]. [2021-09-09]. https://xueshu.baidu.com/usercenter/paper/show?paperid=d73b014a1c3a5e829e5477e238433fa5&site=xueshu_se.

[5] HORNB?K K. Current practice in measuring usability: challenges to usability studies and research[J]. International Journal of Human-Computer Studies, 2006, 64(2): 79-102.

[6] STEWART T. Ergonomics user interface standards: are they more trouble than they are worth?[J]. Ergonomics, 2000, 43(7): 1030-1044.

[7] KEEFE D F, FELIZ D A, MOSCOVICH T, et al. CavePainting: a fully immersive 3D artistic medium and interactive experience[C]//2001 Symposium on Interactive 3D Graphics. New York: ACM Press, 2001: 85-93.

[8] M?KEL? W, REUNANEN M, TAKALA T. Possibilities and limitations of immersive freehand expression: a case study with professional artists[C]//The 12th ACM International Conference on Multimedia. New York: ACM Press, 2004: 504-507.

[9] EROGLU S, GEBHARDT S, SCHMITZ P, et al. Fluid Sketching - Immersive sketching based on fluid flow[C]//2018 IEEE Conference on Virtual Reality and 3D User Interfaces (VR). New York: IEEE Press, 2018: 475-482.

[10] KEEFE D, ZELEZNIK R, LAIDLAW D. Drawing on air: input techniques for controlled 3D line illustration[J]. IEEE Transactions on Visualization and Computer Graphics, 2007, 13(5): 1067-1081.

[11] ISRAEL J H, WIESE E, MATEESCU M, et al. Investigating three-dimensional sketching for early conceptual design—results from expert discussions and user studies[J]. Computers & Graphics, 2009, 33(4): 462-473.

[12] SAURO J, LEWIS J R. Correlations among prototypical usability metrics: evidence for the construct of usability[C]// SIGCHI Conference on Human Factors in Computing Systems. New York: ACM Press, 2009: 1609-1618.

[13] WIESE E, ISRAEL J H, MEYER A, et al. Investigating the learnability of immersive free-hand sketching[C]//The 7th Sketch-Based Interfaces and Modeling Symposium. France: Eurographics Association Press, 2010: 135-142.

[14] GRAY M, BADRE A, GUZDIAL M. Visualizing usability log data[C]//IEEE Symposium on Information Visualization ’96. New York: IEEE Press, 1996: 93-98.

[15] WEI J S, SHEN Z Q, SUNDARESAN N, et al. Visual cluster exploration of web clickstream data[C]//2012 IEEE Conference on Visual Analytics Science and Technology (VAST). New York: IEEE Press, 2012: 3-12.

[16] JACKSON B, KEEFE D F. Lift-off: using reference imagery and freehand sketching to create 3D models in VR[J]. IEEE Transactions on Visualization and Computer Graphics, 2016, 22(4): 1442-1451.

[17] CHU NELSONS H, TAI C L. MoXi: real-time ink dispersion in absorbent paper[J]. ACM Transactions on Graphics, 2005, 24(3): 504-511.

[18] CURTIS C J, ANDERSON S E, SEIMS J E, et al. Computer-generated watercolor[C]//The 24th Annual Conference on Computer Graphics and Interactive Techniques. New York: ACM Press, 1997: 421-430.

[19] LUFT T, DEUSSEN O. Real-time watercolor for animation[J]. Journal of Computer Science and Technology, 2006, 21(2): 159-165.

[20] DU S Y, GE T, PEI J Y, et al. Panoramic fluid painting[C]//2019 IEEE Conference on Virtual Reality and 3D User Interfaces (VR). New York: IEEE Press, 2019: 904-905.

[21] 樽本徹也. 用戶體驗與可用性測試[M]. 北京: 人民郵電出版社, 2015: 126.

ZUNBEN C Y. User experience and usability testing [M]. Beijing: Posts & Telecom Press, 2015: 126.

[22] BROOKE J. SUS: a quick and dirty usability scale[J]. Usability Evaluation in Industry, 1996, 189: 4-7.

[23] BANGOR A, KORTUM P, MILLER J. Determining what individual sus scores mean: adding an adjective rating scale[J]. Journal of Usability Studies, 2009, 4(3): 114-123.

[24] TULLIS T S, STETSON J N. A comparison of questionnaires for assessing website usability[EB/OL]. [2021-06-09]. http:// home.comcast.net/～tomtullis/publications/UPA2004TullisStetson.pdf.

A usability study of panoramic fluid painting system in immersive virtual environments

ZHU Yong-ning1, GE Ting1, DU Sheng-yu2, LOU Ze-ru1, WANG Jian-min1

(1. College of Arts and Media, Tongji University, Shanghai 201804, China; 2. Tencent TiMi T2 Studio, Shanghai 200233, China)

Immersive Virtual Environments (IVEs) bring more realistic immersion and in-person experience to 3D scenes. Besides, 360-degree panoramic images are imperative for the effective creation of immersive environment backgrounds. Panoramic Fluid Painting (PFP) introduces a novel creative tool for panoramic painting with fluid dynamics. In this paper, the applicability of virtual reality technologies was investigated in the field of fluid painting. Specifically, the user testing method, operation log analysis, post-hoc questionnaire, and interview were employed to study the usability of the PFP system in virtual reality environments. Then, the operation log was investigated to facilitate procedural analysis. All testers believe that the usability of the system was no lower than the average level, and even a novice user can use the system to complete the creation of fluid painting pieces.The users primarily held positive opinions on the function and effects of the system, insisting thatsuch interaction methods of the handle would enhance the expression of artistic creation. The methods and results of the research would provide a reference for the development and evaluation of similar systems.

usability; effectiveness; user experience; virtual reality; fluid art

TP 391；TB 472

10.11996/JG.j.2095-302X.2021050833

A

2095-302X(2021)05-0833-08

2020-11-19；

2021-02-20

19 November，2020；

20 February，2021

國家重點研究發(fā)展計劃項目(2018YFB1004903)；國家青年科學(xué)基金項目(71804126)；同濟大學(xué)精品實驗教學(xué)項目和同濟大學(xué)研究生教育研究與改革項目(2020JC35)

National Key Research and Development Plan of China (2018YFB1004903); National Youth Science Fund of China (71804126); Excellent Experimental Teaching Project of Tongji University and Graduate Education Research and Reform Project of Tongji University (2020JC35)

朱永寧(1981–)，女，北京人，助理教授，博士。主要研究方向為交互媒體藝術(shù)和物理模擬。E-mail：yongningbrg@qq.com

ZHU Yong-ning (1981-), female, assistant professor, Ph.D. Her main research interests cover interactive media art, physical based simulation and animation. E-mail：yongningbrg@qq.com

王建民(1973–)，男，內(nèi)蒙古包頭人，教授，博士。主要研究方向為交互設(shè)計。E-mail：wangjianmin@#edu.cn

WANG Jian-min (1973–), male, professor, Ph.D. His main research interest covers interactive design. E-mail：wangjianmin@#edu.cn