黃央語(yǔ) 陳思 呂菲
辦學(xué)特色
我校數(shù)字媒體與設(shè)計(jì)藝術(shù)學(xué)院將設(shè)計(jì)創(chuàng)意、人工智能和計(jì)算機(jī)技術(shù)有機(jī)融合,學(xué)生既要學(xué)習(xí)掌握設(shè)計(jì)理論和設(shè)計(jì)創(chuàng)意技能,也要掌握虛擬/增強(qiáng)現(xiàn)實(shí)、語(yǔ)音、手勢(shì)等多模態(tài)智能交互技術(shù),專業(yè)課程分為三大模塊:智能模塊(大數(shù)據(jù)分析、機(jī)器學(xué)習(xí)等)+交互模塊(AR/ VR開(kāi)發(fā)、人機(jī)交互等)+設(shè)計(jì)模塊(設(shè)計(jì)思維、藝術(shù)美學(xué)等)。畢業(yè)生將在互聯(lián)網(wǎng)行業(yè)、娛樂(lè)游戲業(yè)以及新興智能產(chǎn)業(yè)(智能汽車、機(jī)器人等)從事交互設(shè)計(jì)、體驗(yàn)設(shè)計(jì)、用戶研究、產(chǎn)品經(jīng)理、大數(shù)據(jù)可視分析,以及AR/ VR、語(yǔ)音交互等多模態(tài)自然交互技術(shù)開(kāi)發(fā)等工作。
提升孤獨(dú)癥兒童社交能力的智能交互空間設(shè)計(jì)
設(shè)計(jì)者:黃央語(yǔ)
指導(dǎo)老師:陳思 呂菲
院校:北京郵電大學(xué)
作者闡述:針對(duì)3?6歲兒童的沉浸式交互投影空間(TUI),旨在為患有孤獨(dú)癥的兒童提供一個(gè)特殊的社交環(huán)境。通過(guò)拍打、掃動(dòng)等動(dòng)作與空間中的互動(dòng)產(chǎn)品進(jìn)行交互,激活他們的多感官體驗(yàn)(包括聽(tīng)覺(jué)、觸覺(jué)和視覺(jué)),并創(chuàng)造一個(gè)促進(jìn)社會(huì)交流的氛圍,鼓勵(lì)他們主動(dòng)參與社交互動(dòng)。在這個(gè)沉浸式交互投影空間中,通過(guò)豐富多彩、生動(dòng)的圖像、動(dòng)畫(huà)和聲音效果吸引兒童的注意力。空間中的視覺(jué)和聽(tīng)覺(jué)刺激有助于提高兒童的注意力和專注力,并激發(fā)他們的好奇心,引導(dǎo)他們與裝置進(jìn)行觸碰交互。當(dāng)兒童觸碰燈球時(shí),立即會(huì)有投影動(dòng)畫(huà)角色出現(xiàn)并給予反饋,隨后動(dòng)畫(huà)角色會(huì)在空間中移動(dòng),引導(dǎo)兒童觸碰下一個(gè)燈球。這樣的設(shè)計(jì)能夠讓兒童在物理空間中自由移動(dòng),增加他們進(jìn)行社交啟動(dòng)的機(jī)會(huì)。
指導(dǎo)老師 陳思/呂菲
陳思,北京郵電大學(xué)數(shù)字媒體與設(shè)計(jì)藝術(shù)學(xué)院講師,青年作曲家,音樂(lè)制作人,九三學(xué)社社員。畢業(yè)于中國(guó)戲曲學(xué)院作曲與作曲技術(shù)理論音樂(lè)制作專業(yè),意大利佛羅倫薩音樂(lè)學(xué)院電子音樂(lè)作曲碩士。教授影視配樂(lè)及聲音設(shè)計(jì)等相關(guān)課程。
呂菲,博士,北京郵電大學(xué)數(shù)字媒體與設(shè)計(jì)藝術(shù)學(xué)院副院長(zhǎng),副教授,碩士生導(dǎo)師。中國(guó)計(jì)算機(jī)學(xué)會(huì)高級(jí)會(huì)員,中國(guó)工業(yè)設(shè)計(jì)協(xié)會(huì)信息與交互設(shè)計(jì)專委會(huì)個(gè)人高級(jí)會(huì)員,中國(guó)計(jì)算機(jī)學(xué)會(huì)人機(jī)交互專業(yè)委員會(huì)委員,ACM SIGCHI中國(guó)執(zhí)行委員會(huì)委員。
導(dǎo)師點(diǎn)評(píng):在本項(xiàng)目中,我們專注于年齡在3至6歲的孤獨(dú)癥兒童群體,這些孩子大多數(shù)屬于低功能孤獨(dú)癥兒童,面臨著社交障礙和語(yǔ)言表達(dá)的困難。我們的目標(biāo)是通過(guò)智能交互空間的設(shè)計(jì),結(jié)合孤獨(dú)癥兒童群體的認(rèn)知特點(diǎn)以及有形用戶界面、沉浸式交互投影空間的設(shè)計(jì)原則,為這些孩子提供更好的社交機(jī)會(huì),促進(jìn)他們的融入和全面發(fā)展。
經(jīng)過(guò)詳盡的調(diào)研,發(fā)現(xiàn)孤獨(dú)癥兒童的行為特點(diǎn)導(dǎo)致他們存在一些社交障礙,主要表現(xiàn)為缺乏社交動(dòng)機(jī)和社交回應(yīng)能力,這也是他們無(wú)法融入群體的主要問(wèn)題。同時(shí),由于通常情況下是孤獨(dú)癥療愈師和家長(zhǎng)對(duì)孤獨(dú)癥兒童的社交場(chǎng)景進(jìn)行控制,他們?nèi)狈εc同齡兒童進(jìn)行自主社交的機(jī)會(huì)。
因此,在本次畢業(yè)設(shè)計(jì)中,主要關(guān)注點(diǎn)集中在以下幾個(gè)問(wèn)題上:(1)如何有效地幫助孤獨(dú)癥兒童進(jìn)行社交互動(dòng)?(2)如何巧妙引導(dǎo)孤獨(dú)癥兒童與其他兒童進(jìn)行社交?(3)如何設(shè)計(jì)一個(gè)有利于促進(jìn)孤獨(dú)癥兒童之間社交的場(chǎng)景?
在項(xiàng)目的設(shè)計(jì)階段,特別注重孤獨(dú)癥兒童的特殊需求和認(rèn)知方式。通過(guò)低保真和高保真界面的設(shè)計(jì),以及程序開(kāi)發(fā)和場(chǎng)景動(dòng)畫(huà)建模,努力營(yíng)造一個(gè)溫暖而輕松的海洋動(dòng)畫(huà)主題,旨在為孤獨(dú)癥兒童創(chuàng)造一個(gè)有趣而愉悅的交互環(huán)境。
在角色設(shè)計(jì)方面,選擇明亮飽和的色彩和3D人物風(fēng)格,以吸引孤獨(dú)癥兒童的注意。投影動(dòng)畫(huà)中的海洋小怪物能夠激發(fā)孩子們的興趣,并在用戶觸碰燈球時(shí),觸發(fā)海洋動(dòng)物出現(xiàn)并向用戶打招呼的動(dòng)畫(huà)效果,進(jìn)一步增強(qiáng)他們的參與度和積極性。
場(chǎng)景設(shè)計(jì)方面,采用飽和明亮的色彩搭配和自發(fā)光的設(shè)計(jì),打造一個(gè)奇幻而趣味的海底世界。這樣的設(shè)計(jì)意在激發(fā)孤獨(dú)癥兒童的好奇心,讓他們?cè)敢庾灾魈剿骱突?dòng),從而增強(qiáng)他們的社交動(dòng)機(jī)和社交回應(yīng)能力。
在技術(shù)和材料運(yùn)用方面,選擇運(yùn)用Makey Makey虛擬鍵盤(pán)硬件和Arduino UNO電路開(kāi)發(fā)板,以實(shí)現(xiàn)互動(dòng)投影和音效功能,并結(jié)合MadMapper實(shí)時(shí)合成軟件,將投影場(chǎng)景的變化與特定按鍵綁定,為孤獨(dú)癥兒童提供更為便捷的交互方式。此外,采用當(dāng)貝NEW3DX投影儀,運(yùn)用先進(jìn)的紅外線激光掃描技術(shù)和深度學(xué)習(xí)算法,呈現(xiàn)逼真的3D效果,為孩子們帶來(lái)更加身臨其境的體驗(yàn)。
總體來(lái)說(shuō),本研究旨在為孤獨(dú)癥兒童創(chuàng)造一個(gè)有益的智能交互空間,幫助他們克服社交障礙,促進(jìn)社交互動(dòng),并在愉悅的環(huán)境中促進(jìn)他們的全面發(fā)展。通過(guò)綜合運(yùn)用相關(guān)理論和設(shè)計(jì)方法,我們期待為這一特殊群體融入社交生活做出實(shí)質(zhì)性的貢獻(xiàn)。