毛霄萌

摘? 要：隨著沉浸式技術(shù)的不斷發(fā)展，三維交互技術(shù)在沉浸式技術(shù)應(yīng)用中扮演著越來越重要的角色。對于家居設(shè)計系統(tǒng)，在解決了展示平臺的技術(shù)問題之后，對人機(jī)交互的要求也在不斷提高，三維交互技術(shù)的引入對家居設(shè)計系統(tǒng)尤為重要。該文對家居設(shè)計系統(tǒng)應(yīng)用三維交互技術(shù)進(jìn)行了交互模式進(jìn)行設(shè)計。在針對主流虛擬現(xiàn)實平臺中的交互問題采用了虛擬控件（Widgets）的方式進(jìn)行設(shè)計與實現(xiàn)，并應(yīng)用在家居設(shè)計系統(tǒng)中。目的是為家居設(shè)計系統(tǒng)研究更靈活可靠以及可擴(kuò)展的三維交互方式。

關(guān)鍵詞：三維交互技術(shù)? 家居設(shè)計系統(tǒng)? 三維交互模式

Abstract： With the continuous development of immersive technology， 3D interactive technology plays an increasingly important role in immersive technology applications. For the home design system， after solving the technical problems of the display platform， the requirements for human-computer interaction are also constantly improving. The introduction of three-dimensional interactive technology is especially important for the home design system. This paper designs the interactive mode for the application of 3D interactive technology in the home design system. In the mainstream virtual reality platform， the interaction problem is designed and implemented by means of virtual widgets （Widgets）， and is applied in the home design system. The goal is to develop a more flexible， reliable and scalable three-dimensional interaction for home design systems.

Key Words： 3D interactive technology; Home design system; 3D interactive mode

1? 三維交互

隨著沉浸式技術(shù)的快速發(fā)展以及應(yīng)用的普及，尤其是三維顯示技術(shù)的日益成熟，傳統(tǒng)的以鼠標(biāo)鍵盤以及二維平面的人機(jī)交互方式已經(jīng)不能夠滿足越來越豐富的三維虛擬環(huán)境的交互需要。傳統(tǒng)的人機(jī)交互模式來源于當(dāng)前主流的二維顯示系統(tǒng)，人們只需要通過鼠標(biāo)、鍵盤以及觸摸屏對平面顯示器中的各種圖形控件進(jìn)行交互。在三維技術(shù)高速發(fā)展之前，以鼠標(biāo)鍵盤點擊的方式是可以滿足絕大多數(shù)計算機(jī)軟件的人機(jī)交互的。但是在三維技術(shù)快速發(fā)展之后，這種傳統(tǒng)的方式越來越不能夠滿足人們對計算機(jī)虛擬環(huán)境中的三維物體的交互需求。

在傳統(tǒng)的二維顯示系統(tǒng)中，對于三維的虛擬場景最大的障礙就是無法很好地表示三維場景的深度，對深度信息不能夠很好地進(jìn)行交互，造成用戶需要不斷地將對象進(jìn)行翻轉(zhuǎn)，移動來校正用戶對虛擬場景或物體的判斷。這樣的過程無疑是浪費了大量用戶的時間。對于學(xué)習(xí)三維設(shè)計和三維交互的初學(xué)者來說，這個部分的操控學(xué)習(xí)占用了他們大量時間，而這僅僅是集中在操作上的，并不能將他們的精力解放到三維設(shè)計和創(chuàng)意中去。

人機(jī)交互設(shè)計的目標(biāo)就是實現(xiàn)自然、本能的人機(jī)交互。當(dāng)傳統(tǒng)的交互方式和交互設(shè)備不能夠滿足人們的需要的時候，人們不斷嘗試用新的設(shè)備和交互方式來彌補(bǔ)和解決這些問題。三維交互技術(shù)就是為了改善和彌補(bǔ)傳統(tǒng)交互方式，并基于三維的顯示設(shè)備最終希望達(dá)到人機(jī)自然、本能地交互。

2? 家居設(shè)計系統(tǒng)中的三維交互模式

當(dāng)前，家居設(shè)計行業(yè)已經(jīng)正在經(jīng)歷大的變革。多種前沿的信息技術(shù)已經(jīng)被應(yīng)用在家居設(shè)計行業(yè)中，包括利用數(shù)據(jù)庫技術(shù)進(jìn)行家居設(shè)計相關(guān)的數(shù)據(jù)存儲及調(diào)用，還有當(dāng)前最火的沉浸式技術(shù)。

在沉浸式技術(shù)中，視覺方面的技術(shù)已經(jīng)從各個層面發(fā)展了很多相關(guān)技術(shù)，比如頭戴式虛擬現(xiàn)實顯示技術(shù)、CAVE技術(shù)、真三維顯示技術(shù)等。

三維交互技術(shù)作為沉浸式技術(shù)中人與虛擬世界連接的重要技術(shù)，也被慢慢重視起來。對于家居設(shè)計系統(tǒng)的交互模式，傳統(tǒng)的基本是基于平面的。不論是在觸摸屏上還是傳統(tǒng)的鼠標(biāo)鍵盤式的操作界面，基于平面顯示器的交互操作仍然只是鼠標(biāo)點擊，視角的控制等基本模式。這樣的交互模式有其先天的劣勢，就是缺乏在空間的深度中獲得交互，即用戶很難對深度的距離和相關(guān)物體進(jìn)行交互操作。所以三維交互技術(shù)的應(yīng)用以及三維交互模式的開發(fā)變得尤為迫切。

在家居設(shè)計系統(tǒng)中，對于用戶和家居設(shè)計師最主要的功能是完成在虛擬環(huán)境中的漫游和相關(guān)家具物品，室內(nèi)裝飾材料的選擇。所以對于家居設(shè)計系統(tǒng)中的交互操作，用戶的主要任務(wù)是完成對場景的瀏覽、漫游;對場景內(nèi)的相關(guān)控件的交互，以及家居物品的擺放變更位置，所以對家居設(shè)計系統(tǒng)的三維交互模式如圖1所示，交互模式分為以下5個大類，分別為選擇、操作、視角控制、間接控制、復(fù)合模式。這5個大類又可以細(xì)分為16個小類。每個小類還可以再具體細(xì)分。這個分類是通過用戶進(jìn)行沉浸式家居設(shè)計系統(tǒng)的體驗角度得來的。

3? 家居設(shè)計系統(tǒng)中的三維交互實現(xiàn)

在家居設(shè)計系統(tǒng)中，需要考慮的最主要問題就是用戶與系統(tǒng)之間的交互。由于當(dāng)前可以預(yù)見的演示或展示平臺主要集中在兩個方面，即頭戴式虛擬現(xiàn)實環(huán)境以及以平面顯示器為主的終端（臺式計算機(jī)顯示或智能手機(jī)）。因此，可用性較高的家居設(shè)計系統(tǒng)應(yīng)是能夠勝任兩套主流顯示技術(shù)的（見圖2）。

3.1 家居設(shè)計系統(tǒng)中應(yīng)用的三維交互技術(shù)

當(dāng)前有以下幾種主要的三維交互技術(shù)可用在家居設(shè)計系統(tǒng)中。

3.1.1 點擊/指向交互

指向和點擊交互是當(dāng)前在現(xiàn)實環(huán)境和虛擬世界中最簡單直接的一種交互方式。對于人機(jī)交互來說，傳統(tǒng)的計算機(jī)圖形人機(jī)交互方式就是基于對圖形的指向和點擊來實現(xiàn)的。比如，每個用戶都會使用的移動鼠標(biāo)指針指向需要交互的圖形，并點擊來完成整個交互的輸入過程。在虛擬世界中，現(xiàn)在也通常用人眼的注視方向和虛擬控制手柄形成選擇方向。在這兩套完全不同的系統(tǒng)中，最基礎(chǔ)的實現(xiàn)方式都能夠較好地完成基礎(chǔ)人機(jī)交互任務(wù)。

3.1.2 直接操控

虛擬現(xiàn)實頭戴顯示設(shè)備是一整套集成了交互功能的顯示設(shè)備，人們戴著頭戴顯示設(shè)備通過轉(zhuǎn)動頭部就可以看到不同的場景內(nèi)容，這種交互是直接操控。用戶在戴上頭盔顯示設(shè)備之后，就可以像在現(xiàn)實生活中一樣進(jìn)行四周的查看以及互動，整個過程中，用戶完全是以本能在虛擬的環(huán)境中交互。而頭盔顯示設(shè)備則是通過六自由度的傳感器進(jìn)行沉浸式交互。在這個層面上，人機(jī)三維交互是完全自然的交互。

3.1.3 混合交互技術(shù)

在實際的項目設(shè)計制作中，完全單一的直接操控和點擊指向交互都不能夠很好地完成所有交互任務(wù)。綜合使用這些交互技術(shù)才是對三維虛擬環(huán)境中多層次復(fù)雜場景和物體交互方式最理想的解決方案。根據(jù)不同交互任務(wù)的特點，融合使用不同的交互技術(shù)方法，能夠最大限度地發(fā)揮人們在交互中的自由性和方便性。

以當(dāng)前最廣泛應(yīng)用的三維顯示系統(tǒng)來說，三維的交互可以簡化為兩個方面的交互方式。

第一，是使用當(dāng)前比較主流的以頭戴顯示為主的沉浸式系統(tǒng)中的三維交互設(shè)備進(jìn)行輸入輸出模擬三維交互。比如HTC VIVE的雙手手柄、數(shù)據(jù)手套等。它們的特點是可以完全模擬三維場景中的物體進(jìn)行交互，但問題在于在三維場景中沒有和現(xiàn)實生活中一樣的觸感和碰撞反饋，用戶很難判斷是否交互成功。

第二，是在三維場景中建立與傳統(tǒng)二維交互的控件進(jìn)行三維交互的模擬。但這樣使用的問題是容易給全三維的環(huán)境帶來不和諧的視覺感受。

所以，在該文中，家居設(shè)計系統(tǒng)的三維交互方式需要將兩者有機(jī)融合并完成三維交互的模擬和設(shè)定。

3.2 家居設(shè)計系統(tǒng)中的三維交互框架及原則

3.2.1 虛擬場景三維交互應(yīng)該遵循的原則

（1）根據(jù)交互應(yīng)用的場景，限制人機(jī)交互的自由度。對相關(guān)控件的外觀進(jìn)行設(shè)計研究，完成限制用戶誤操作的目標(biāo)。

對于場景內(nèi)的相關(guān)控件和相關(guān)交互元素，以及它們的行為方式盡可能地做出限定。因為在完全虛擬的環(huán)境中，用戶可以交互的使用范圍太廣，比傳統(tǒng)的平面圖形操作交互界面多了一個維度，如果不增加限制，用戶很可能將無法知曉他們可以交互的范圍，以及交互的方式，從而產(chǎn)生較多的誤操作，大大降低他們的。

（2）場景內(nèi)的交互元素能明確表示出它的相應(yīng)的交互功能和操作行為。

由于場景擴(kuò)展到了三維的環(huán)境，而且不僅僅是桌面系統(tǒng)的三維環(huán)境，而是模擬現(xiàn)實環(huán)境的整個三維環(huán)境。用戶是不太可能馬上知曉哪些元素是可以進(jìn)行交互的，哪些元素是場景元素。在現(xiàn)實環(huán)境中況且有可能有一些遮擋，如果在虛擬環(huán)境中不加以標(biāo)識，或者可視化的引導(dǎo)，用戶很可能完全無法發(fā)現(xiàn)一些交互元素。

其中，由于需要適應(yīng)兩套界面的操控，就必須使用控件的設(shè)計?？丶暮锰幨撬譃閹撞綄τ脩暨M(jìn)行提示并操作。在傳統(tǒng)的二維界面中，許多三維軟件采用的方式是首先進(jìn)行醒目的標(biāo)識引導(dǎo)或詢問用戶。用戶可以選擇或直接輸入所需要的三維位置或坐標(biāo)。這樣的方式在使用的過程中可以進(jìn)行精確定位，在傳統(tǒng)的二維圖形界面使用中非常有效。但在全三維的虛擬環(huán)境中，它很可能無效。因為在全三維的虛擬環(huán)境中，人們很難通過視覺的方式進(jìn)行測量和判斷。在這樣的場景環(huán)境中，使用控件的方式，讓用戶直接通過控件的操控和交互的方式進(jìn)行判斷和測量，雖然會讓用戶進(jìn)行多次操作，但用戶在反復(fù)操作的過程中很好地完成了用戶的輸入和反饋的多次循環(huán)，這讓用戶能夠獲得更好的交互體驗，也增加了用戶對虛擬三維環(huán)境的了解和熟悉。從另一個角度來看，用戶可以更快速地找到虛擬環(huán)境中的交互方式。

3.2.2 三維控件為基礎(chǔ)的三維交互框架

三維控件為基礎(chǔ)的交互框架設(shè)定是從二維圖形界面的控件設(shè)計方式發(fā)展而來的。傳統(tǒng)圖形界面由二維或三維場景上的二維界面構(gòu)成，如菜單、進(jìn)度條或得分顯示等。但有時需要用戶在三維虛擬環(huán)境中與界面交互部件進(jìn)行交互，如鍵盤、虛擬菜單或物品欄（尤其是以虛擬現(xiàn)實為展示的項目）。通過控件交互組件，可創(chuàng)建如滑塊、組合框、復(fù)選框等任意類型的交互控件，然后在三維虛擬環(huán)境中進(jìn)行交互。使用控件組件顯示以三維形式存在于虛擬世界中的交互界面，還需要用戶與此控件進(jìn)行交互，在該項目中可通過控件交互組件來實現(xiàn)交互。

三維控件為基礎(chǔ)的交互框架設(shè)計是以交互任務(wù)對象為核心展開的。為了支持交互任務(wù)對象，需要設(shè)定交互任務(wù)的用戶類型。

以家居設(shè)計系統(tǒng)為例，用戶類型主要分為設(shè)計師和家居客戶，這兩種不同的用戶在使用該系統(tǒng)的過程中需要涉及不同的交互任務(wù)。設(shè)計師需要對場景內(nèi)的相關(guān)設(shè)置進(jìn)行改變，需要比較大的自由度。同時，設(shè)計師作為專業(yè)用戶，比較熟悉在三維虛擬環(huán)境中的交互操作。所以，對于設(shè)計師用戶類型，在家居設(shè)計系統(tǒng)中給定的控件就相對復(fù)雜一些，控件可控的范圍也會大一些，而家居客戶則相對設(shè)置會簡單許多，以漫游瀏覽為主。模型的設(shè)計上，數(shù)據(jù)模型的操控設(shè)置將會比控件模型要少，數(shù)據(jù)連接也會少，因為在數(shù)據(jù)模型主要是以視覺的方式給用戶反饋。整個三維交互框架以“三維控件”為核心，但要完成以三維控件為核心的整個交互過程，其他模塊的支持是必不可少的。具體見圖3。

首先，是三維控件所控制的對象“虛擬模型”，沒有它，控件就沒有存在的必要。具體來說，控件模型和數(shù)據(jù)模型 之間存在一種依賴關(guān)系，一般情況下一個控件模型總是與唯一的一個數(shù)據(jù)模型相關(guān)聯(lián)，這由其數(shù)據(jù)模型成員源數(shù)據(jù)模型指出，而一個數(shù)據(jù)模型可以同時與一組控件模型產(chǎn)生關(guān)系，這由數(shù)據(jù)模型中的一個控件模型數(shù)組成員控件模型維護(hù)。當(dāng)然，這些關(guān)系并非是必然存在的，比如一個 控件模型完全可以不與任何一個數(shù)據(jù)模型關(guān)聯(lián)。

其次，需要由工具來驅(qū)動控件模型實現(xiàn)對數(shù)據(jù)模型的操控，工具的任務(wù)設(shè)定就是操作控件模型，在此可以繼續(xù)沿用二維交互界面中相應(yīng)的接口方式來實現(xiàn)操作。包括點擊、按住、移動等接口命令。

最后，所有相應(yīng)的控件和模型都由視圖進(jìn)行呈現(xiàn)。在傳統(tǒng)二維顯示平臺上，仍然以傳統(tǒng)方式呈現(xiàn)，與三維軟件視圖類似。在三維虛擬環(huán)境中，除了結(jié)合系統(tǒng)中的操作控件外，還需要將一些常用的控件固定在視圖中（在不影響正常三維視圖觀看的基礎(chǔ)上）。所以三維的視圖中目前分為兩套控件：一套是傳統(tǒng)的平面固定控件，另一套是全三維的控件，這套控件還必須加上頭戴顯示系統(tǒng)控制手柄的反饋（包括視覺反饋和手柄內(nèi)置的觸覺反饋）。在操作上，設(shè)定三維控件交互組件執(zhí)行光線投射，確定它是否命中世界場景中的控件組件。如命中，可設(shè)置規(guī)則確定與其交互的方式。交互通過模擬定義的按鍵來執(zhí)行。例如一個按鈕可通過鼠標(biāo)左鍵點擊，即可告知其他形式的輸入模擬一次鼠標(biāo)左鍵點擊（控制器按鈕按下、運動控制器扳機(jī)鍵按下等）。

4? 結(jié)語

該文針對家居設(shè)計系統(tǒng)中三維交互的需求與特點，設(shè)計面向兩個主流展示平臺的三維人機(jī)交互模式，并結(jié)合當(dāng)前相關(guān)三維交互技術(shù)實現(xiàn)了在虛擬場景為平臺的三維交互功能。集中討論了以當(dāng)前主流顯示平臺中三維交互方式的設(shè)計思路及具體實現(xiàn)。整個三維交互的框架根據(jù)不同的交互層次，將不同的功能融入不同的虛擬環(huán)境中，盡力實現(xiàn)人機(jī)自然直接交互。同時，在框架的設(shè)置上使用模塊化的構(gòu)造方式，使得整個框架的具有很強(qiáng)的擴(kuò)展性以及再開發(fā)的潛力。

參考文獻(xiàn)

[1] 林遠(yuǎn)芳，劉向東，劉旭.基于二維旋轉(zhuǎn)屏的體三維顯示系統(tǒng)像素屬性分析[J].光子學(xué)報，2004，33（4）：476-479.

[2] 潘文平，沈春林，蔡亮，等.交互式動態(tài)體三維顯示關(guān)鍵技術(shù)[J].科技導(dǎo)報，2011（1）：44-51.

[3] 鄧紅.三維交互技術(shù)的研究與應(yīng)用[D].大慶石油學(xué)院，2007.