林倩倩 譚坤 劉佳文

摘要：多媒體系統(tǒng)目前在國內(nèi)已經(jīng)普及，不論是學(xué)校教學(xué)還是公司會議，都離不開多媒體技術(shù)。多媒體語言的運(yùn)用為信息傳遞過程構(gòu)架了一個(gè)全新的文化系統(tǒng)和意義系統(tǒng)，也是一個(gè)具有特定結(jié)構(gòu)形態(tài)的符號系統(tǒng)。多媒體技術(shù)在傳播信息過程中所構(gòu)建的交互系統(tǒng)即為視聽意義上的動態(tài)情景。本文試圖以符號學(xué)為視角，將多媒體技術(shù)的信息載體延伸到符號層面，具體分析了蘊(yùn)含其中的三種六類符號。旨在探討如何運(yùn)用符號學(xué)觀念更好地設(shè)計(jì)多媒體文件，并為更好地達(dá)到信息傳遞效果提供依據(jù)。

關(guān)鍵詞：多媒體文件；動態(tài)情境；交互設(shè)計(jì)；符號

中圖分類號：G642.41 文獻(xiàn)標(biāo)志碼：A 文章編號：1674-9324（2016）23-0222-02

一、引言

科學(xué)技術(shù)的發(fā)展，帶來了社會的變革，同時(shí)，也迎來了系列產(chǎn)品的生成。譬如媒體，媒體不可否認(rèn)是技術(shù)的產(chǎn)物，正是有了技術(shù)，才能將聲音、圖像等元素綜合在一起。傳統(tǒng)印刷媒體就是印刷技術(shù)的結(jié)果，多媒體更是如此。多媒體涵蓋的技術(shù)較傳統(tǒng)的行業(yè)而言，范圍更廣，內(nèi)容更綜合。其信息載體的樣數(shù)多、交互性強(qiáng)、集成度綜合的特點(diǎn)決定了與技術(shù)之間的密切關(guān)系。由此也可得知多媒體的信息載體與技術(shù)兩者相輔相成缺一不可的關(guān)系，多媒體如若脫離了技術(shù)，則會處于孤立的局面，無法使用。

雖然多媒體在展示和運(yùn)行的時(shí)候需要技術(shù)的支持，但歸根結(jié)底，技術(shù)也只是保持其能正常運(yùn)行的手段和工具，多媒體使用的目的是能夠?qū)⑿畔⒏玫膫鞑?，使聆聽者能更好地接受匯報(bào)者的信息。因此，多媒體文件設(shè)計(jì)的核心還在于視聽的交互，而不是以技術(shù)為中心，這是使用多媒體進(jìn)行交互的主要目的。

關(guān)于多媒體文件的設(shè)計(jì)，如何在視聽交互方面做到更好，我們聯(lián)想到了符號學(xué)的相關(guān)知識。在符號學(xué)的范疇內(nèi)，多媒體文件的主要內(nèi)容可劃分為文本符號、圖像符號和視頻符號。以上符號結(jié)合多媒體交互的情境，又可劃分為靜態(tài)情境符號和動態(tài)情境符號，而我們之前討論過的文本、圖像和視頻，同樣也存在兩種符號情境。接下來，我們將對此內(nèi)容進(jìn)行詳細(xì)論述。

二、多媒體動態(tài)語境的信息符號

在多媒體視聽交互系統(tǒng)內(nèi)，語言是非常重要的信息載體，也是我們要花重點(diǎn)去研究的信息符號，語言在我們的生活中起到交流和傳達(dá)信息的作用，在視聽交互中更是如此。在我們之前討論的兩個(gè)語境中，文本由文字符號構(gòu)建，人的聲音作為傳播信息的重要載體，也可作為一種聲音符號，多媒體中的音樂、音響又可作為聲響符號，而最重要的展示圖像，可作為圖像符號。

1.聲音符號。由于聲音符號的范疇較大，不同人對聲音符號的認(rèn)識存在不同看法，因此，聲音符號在本文中特指人的聲音。關(guān)于聲音在多媒體視聽交互過程中的作用，有的認(rèn)為聲音的功能就是傳遞信息，把多媒體系統(tǒng)中的圖像、文字以一種輔助性解釋的功能傳遞，其實(shí)就是文字或圖片符號，然而，我們認(rèn)為這是對語言符號認(rèn)識的偏差，人是復(fù)雜的、有感情的動物，同樣，聲音的發(fā)出也會帶出不同的情感，而不僅僅是傳遞話語、文字、圖像的意義，而且，聲音的音色、節(jié)奏、聲調(diào)對多媒體系統(tǒng)的視聽交互效果有不可忽視的影響。

音色與參與活動者的性別、特征密切相關(guān)，男女性及不同年齡者的聲音形象是有差別的。女性的聲音形象是“文雅輕柔、亮麗清純”。男性“渾厚、粗放、醇和、有磁性，具有一定的氣勢和力量感”，而老年人則是“穩(wěn)重、厚實(shí)、醇和、老成”。假設(shè)在一個(gè)目標(biāo)人群為兒童的多媒體情境里，為達(dá)到更好的視聽效果，制作者就要考慮插入兒童的聲音和較為輕快、活潑向上的兒童語言，或選擇一些年輕男性或女性的聲音，在選擇時(shí)要注意男性的聲音不要過于有氣勢和力量感。

因此，在其構(gòu)建多媒體文件時(shí)，音色的選擇不能隨意。同樣的道理，聲音的其他方面對其表義也有重要的影響。

2.聲響符號。聲響符號與聲音符號不同，聲響符號主要是指多媒體系統(tǒng)中的音樂和音響。音響是除去人的聲音和音樂之外的一切聲音，音樂大家都比較熟悉，不同音樂會給人帶來情緒上的不同感受。而音響，在多媒體系統(tǒng)中更有其舉足輕重的地位，甚至具備特別的語用功能，尤其是音樂。音樂在導(dǎo)入情境時(shí)，會將聆聽者帶入不同的環(huán)境，多達(dá)到的交互效果的好壞與帶入音樂有很大的關(guān)系。同時(shí)，音樂和音響可對視聽內(nèi)容進(jìn)行渲染，達(dá)到電影中的煽情效果，另外，我們都還知道音樂所具備的時(shí)代感，音樂能塑造交互環(huán)境的場景和氣氛，影響視聽交互的效果。

3.圖像符號。多媒體情境里的圖像符號主要涉及到色彩、動作與場景等。圖像符號是多媒體信息交互中極為重要的符號，聆聽者在多媒體環(huán)境中，視覺是與之最直接的交互。通過視覺的刺激，可以帶動視聽者的情緒。同時(shí)，在陳述一些較為抽象且不易被人理解的內(nèi)容時(shí)，圖像總是能起到輔助信息理解的作用。如目前被津津樂道的大數(shù)據(jù)，數(shù)字作為文本符號，如若沒有聲音、聲響、圖像符號，是很難被人接受的信息，在交互系統(tǒng)中肯定會影響交互的效果。倘若能借助圖像符號，便會產(chǎn)生很大改觀，如大數(shù)據(jù)可視化。技術(shù)高超的設(shè)計(jì)師可以將繁縟龐雜的數(shù)據(jù)信息以各種各樣的圖像展示出來，有助于觀察者對信息的理解。同樣，色彩也是圖像符號中較為重要的因素，以兒童的多媒體情境為例，兒童的視覺系統(tǒng)發(fā)育還不完善，鮮艷的色彩更容易吸引兒童的注意力，因此，在多媒體文件設(shè)計(jì)的過程中，要注意選擇適當(dāng)?shù)念伾?，以達(dá)到較好的交互效果。

三、多媒體視聽交互系統(tǒng)設(shè)計(jì)的兩個(gè)原則

1.文本符號與視聽符號的合理分配。文本符號在多媒體系統(tǒng)中是較為常見的符號，文本符號作為視聽符號的輔助元素，在多媒體系統(tǒng)中所起到的作用不可忽視。但如若想達(dá)到較好的交互效果，應(yīng)盡量減少文本符號，能達(dá)到輔助作用即可。但文本符號和視聽符號在多媒體系統(tǒng)中是相輔相成的，缺一不可，他們同時(shí)作用于交互的整個(gè)過程，因此，必須將兩者所能起到的作用詳細(xì)劃分，根據(jù)其產(chǎn)生的效果來合理劃分兩者在整個(gè)系統(tǒng)中所占的比例，才能實(shí)現(xiàn)較好的交互，達(dá)到信息傳遞的目的。還是以兒童的多媒體系統(tǒng)為例，由于兒童識字?jǐn)?shù)量有限，因此，在設(shè)計(jì)多媒體系統(tǒng)時(shí)，文本符號所占的比例當(dāng)少之又少，文本符號可能只是給兒童的家長看，起到輔助性的作用，因此，在設(shè)計(jì)過程中，還是要以受眾和內(nèi)容為導(dǎo)向，合理的分配兩者的比例。

2.合理分配視聽元素。在上一段我們已經(jīng)討論了文本符合和視聽符號，在這段我們將視聽符號的分配再進(jìn)一步細(xì)分。視聽元素反應(yīng)在符號學(xué)里即為圖像符號、聲音符號和聲響符號，以上都會通過受眾者的視覺和聽覺感知。視覺工作記憶區(qū)與聽覺工作記憶區(qū)是相對獨(dú)立的，因此，當(dāng)其中的一個(gè)元素產(chǎn)生效果時(shí)，如果另一個(gè)沒有任何反應(yīng)，肯定會對交互效果產(chǎn)生影響。盡管視覺和聽覺的工作記憶區(qū)雖然是相對獨(dú)立的，但視覺和聽覺在整個(gè)交互過程中，也是相輔相成、不可分割的。我們也可以通過例子來論述視覺和聽覺的關(guān)系，假設(shè)我們看到的是一個(gè)喜慶的畫面，但我們聽到的卻是一個(gè)低沉的音樂，這在我們的印象區(qū)便會產(chǎn)生差別，只有看到的和聽到的一樣，才會加大感知度。因此，視覺和聽覺的分配一定要合理，不能隨意搭配，要能產(chǎn)生渲染和加深印象的效果。

四、結(jié)語

多媒體視聽交互具有信息載體與技術(shù)的二重性。多媒體視聽交互系統(tǒng)的研究，需要從根本出發(fā)，從符號學(xué)的角度理清多媒體文件制作過程中各信息符號的特點(diǎn)、優(yōu)勢、接受過程，并進(jìn)行合理搭配，不斷完善和改良這一符號體系，以達(dá)到信息傳遞效果的目的。

參考文獻(xiàn)：

[1]常櫻.多媒體畫面語言的符號學(xué)分析[J].學(xué)術(shù)論壇，2007，01.

[2]張先亮.非語言符號特征論[J].浙江師范大學(xué)學(xué)報(bào)，2002，（6）.

[3]胡飛.楊瑞，設(shè)計(jì)符號與產(chǎn)品語意：理論、方法與應(yīng)用[M].中國建筑工業(yè)出版社，2003.

[4]項(xiàng)國雄，王佑美.交互媒體與交互模式[J].計(jì)算機(jī)世界，2001.

[5]馬穎峰，楊棟.何探究式教育游戲的學(xué)習(xí)交互設(shè)計(jì)[J].現(xiàn)代教育技術(shù)，2010，（05）.

[6]張憲榮.設(shè)計(jì)符號學(xué)[M].北京：化學(xué)工業(yè)出版社，2004：80-88.

[7]曾方本.外語多媒體設(shè)計(jì)的符號學(xué)思考[J].外語教學(xué)，2006，（11）.

[8]楊勤.外語多媒體設(shè)計(jì)的動態(tài)語境符號思考[J].軟件導(dǎo)刊，2008，（1）.