基于通感體驗(yàn)的浸沒式交互裝置藝術(shù)探究

摘要：藝術(shù)家將自己的觀念與當(dāng)代技術(shù)相結(jié)合的互動(dòng)設(shè)計(jì)稱為交互裝置藝術(shù)。文章以米蘭設(shè)計(jì)周展出的燈光互動(dòng)裝置藝術(shù)“Breath of Light（呼吸之光）”和創(chuàng)作的直播交互裝置C-Social（《古典社交》）作品為例，對(duì)交互裝置藝術(shù)進(jìn)行分析，說(shuō)明基于通感的浸沒式體驗(yàn)將是未來(lái)交互裝置藝術(shù)發(fā)展的重要方向。

關(guān)鍵詞：交互裝置藝術(shù);浸沒式體驗(yàn);通感體驗(yàn)直播裝置

中圖分類號(hào)：J5 文獻(xiàn)標(biāo)識(shí)碼：A 文章編號(hào)：1004-9436（2021）23-0-03

0 緒論

交互裝置藝術(shù)注重人與作品的互動(dòng)，觀眾通過聲音、觸覺、氣味等感官與作品產(chǎn)生互動(dòng)，作品以視覺或聽覺發(fā)生變化的形式給觀眾帶來(lái)反饋?；\統(tǒng)地說(shuō)，燈光裝置藝術(shù)以場(chǎng)景與燈光藝術(shù)的組合變換給觀眾帶來(lái)極大沖擊，使觀眾眼前一亮，心理上產(chǎn)生高興或是惆悵的情緒，反思其背后隱藏的文化意義。

1 浸沒式體驗(yàn)

1.1 理念的提出與解釋

沉浸式相關(guān)理論最先出現(xiàn)于20世紀(jì)70年代，主要描述人們?nèi)硇耐度肴粘；顒?dòng)的某一特定情境之中[1]。與沉浸感相近的說(shuō)法有齊克森米哈伊于1977年提出的“流”的觀點(diǎn)。

心理學(xué)家齊克森米哈伊對(duì)“流”作出了這樣的解釋：“當(dāng)人們把注意力和精神力完全投入某種活動(dòng)時(shí)所收獲的整體感。”觀眾在與作品交流互動(dòng)時(shí)，注意力會(huì)高度集中，自覺將干擾的感受過濾掉，不被無(wú)關(guān)思想影響，不受不相干信號(hào)的干擾，有明確的目標(biāo)，并對(duì)其產(chǎn)生清楚的反應(yīng)及回饋，觀眾處于控制環(huán)境的狀態(tài)，并且可以操作它。

人們進(jìn)行日常活動(dòng)時(shí)，會(huì)將自己完全投入情境當(dāng)中，并過濾掉不相干的知覺進(jìn)入一種沉浸狀態(tài)。只有出現(xiàn)高挑戰(zhàn)兼高技能時(shí)，這種沉浸狀態(tài)才能長(zhǎng)久維持，也就是所謂的浸沒式體驗(yàn)。在人機(jī)交互過程中，觀眾的想象力沒有被激發(fā)或者維持時(shí)間過短，則不能稱為浸沒式體驗(yàn)。如果參觀者只為擁有視覺的絢麗效果，由最開始的代入感帶來(lái)的興奮感很快就會(huì)消退，激情感減退了，注意力開始分散，感受不一的知覺隨之而來(lái)，因而無(wú)法達(dá)到浸沒式體驗(yàn)效果。

1.2 從觀眾的角度作心理解釋

浸沒式體驗(yàn)體現(xiàn)為觀眾可以全身心投入而不是遠(yuǎn)距離觀看。觀眾通過極強(qiáng)的參與性與藝術(shù)作品自由交流、互動(dòng)，藝術(shù)不再局限于二維平面。如今的藝術(shù)能夠通過科技手段，創(chuàng)造一種意境，給觀眾帶來(lái)一種感受真切的代入感。這種體驗(yàn)是觀眾、環(huán)境和技術(shù)三大因素配合的交互動(dòng)作，觀眾可能產(chǎn)生視覺、聽覺或觸覺上的任何一種感覺，從而觸發(fā)藝術(shù)空間中觀眾對(duì)其的想象和注意力。

世界知名的水晶產(chǎn)品制造商寶仕奧莎在米蘭設(shè)計(jì)周上展出的燈光互動(dòng)裝置藝術(shù)“呼吸之光”，給觀眾帶來(lái)了強(qiáng)烈的浸沒式體驗(yàn)。該裝置藝術(shù)由漫天的玻璃吹制的水晶燈構(gòu)成，每一顆燈都匯聚了吹制工匠的用心以及對(duì)精致產(chǎn)品的追求。在裝置中，觀眾向玻璃燈吹氣，玻璃燈接收觀眾的氣息，發(fā)送亮燈的信號(hào)，燈接收信號(hào)然后變亮的過程便是傳播的過程，由此可以聯(lián)想到麥克盧漢的“媒介即人的延伸”的傳播理論。在此過程中，觀眾是主角，觀眾定義作品的存在，每個(gè)觀眾對(duì)作品的理解都不同，這些都是體驗(yàn)發(fā)揮的作用。動(dòng)作“吹”被設(shè)計(jì)師重新設(shè)計(jì)在觀眾參與環(huán)節(jié)，喚起觀眾的孩童記憶。這讓人聯(lián)想到《小豬佩奇》動(dòng)畫中的“跳泥坑”，因其背后隱藏的文化內(nèi)涵引起了觀眾的強(qiáng)烈共鳴，而使該片頗受歡迎。

1.3 營(yíng)造的氛圍

在“呼吸之光”裝置中，燈與光的結(jié)合相映成趣，觀眾只需向小的接收器傳輸氣息，力度可輕可重，接收器接收到氣體進(jìn)入的信號(hào)后，水晶燈便逐個(gè)變亮，亮燈的數(shù)量隨接收器接收的氣體力度而改變。觀眾的氣息被接收器收集擴(kuò)散，發(fā)光體燈芯感受到氣體的力量后就會(huì)自覺地把燈體點(diǎn)亮，傳播到玻璃燈內(nèi)的燈光會(huì)擴(kuò)大，往空間的各個(gè)方向擴(kuò)散到消失為止。玻璃燈逐漸變亮，仿佛被施加了魔法，若無(wú)觀眾參與此流程，則裝置就會(huì)失去創(chuàng)作意義。黑荔枝的著作《呼吸的意義》是一本尋找“呼吸”的意義的書：“呼吸”是存在的表現(xiàn)，是生命延續(xù)的重要評(píng)判標(biāo)準(zhǔn)。該書作者將呼吸當(dāng)作一種關(guān)于成長(zhǎng)的隱喻童話，以此將自己的思想傳達(dá)給讀者：畫畫的意義如呼吸，為創(chuàng)作者提供了生存的保障，生活因此繼續(xù)下去?？臻g氛圍感需要觀眾發(fā)揮想象力，從而確保最終呈現(xiàn)的作品是由每一個(gè)觀眾共同參與完成的。猶如看一場(chǎng)戲劇，所有的場(chǎng)景變換和故事發(fā)展都在觀眾身邊，打造真實(shí)的體驗(yàn)感，觀眾則是故事的主角。“呼吸之光”散發(fā)出朦朧美，引人入勝，為觀眾帶來(lái)了一次身臨其境的體驗(yàn)。

2 裝置的通感體驗(yàn)

假如把交互裝置藝術(shù)看作一條無(wú)形的繩子，可以將空間、人、設(shè)備三者串聯(lián)起來(lái)，那么，其中的交互關(guān)系則是使三者產(chǎn)生聯(lián)系的橋梁，交互裝置藝術(shù)一邊連著藝術(shù)家和工程師，另一邊連著參與者。因此，基于“人—機(jī)器—人”循環(huán)而產(chǎn)生的空間互動(dòng)關(guān)系發(fā)生了一定的邏輯變化，這樣的邏輯是將人和機(jī)器之間的相互反映作為基礎(chǔ)平臺(tái)，通過人的外部感覺等多感官參與方式，并通過多感官引導(dǎo)、多感官轉(zhuǎn)化、多層次感知的感覺紐帶，靈活地將設(shè)計(jì)師與觀眾雙向連接起來(lái)，使觀眾可以全身心投入作品當(dāng)中。在上述燈光交互裝置藝術(shù)中，視覺、聽覺聯(lián)想的觸覺體驗(yàn)?zāi)軌蚋玫貫橛^眾帶來(lái)浸沒式體驗(yàn)，讓觀眾擁有更加豐富的情感體驗(yàn)和通感體驗(yàn)。

2.1 通感原理

用戶形成認(rèn)知、產(chǎn)生體驗(yàn)的前提和基礎(chǔ)是感知通道和理性認(rèn)知[2]。數(shù)據(jù)表明，當(dāng)人在接收外界信息時(shí)，感覺通道接收到的信息比例是不同的，其基本數(shù)據(jù)如下：視覺60%，聽覺20%，觸覺15%，其余5%[3]。在文學(xué)鑒賞中，各種感覺器官是相互作用的，一種器官的感覺會(huì)引發(fā)另一種或多種不同層次器官的感覺。所謂通感，就是指在人的機(jī)體內(nèi)產(chǎn)生的一種系統(tǒng)的、自覺的連帶感覺體驗(yàn)。從藝術(shù)家和工程師的角度來(lái)說(shuō)，通感的創(chuàng)作手法可以使互動(dòng)裝置多元化而富有靈活氣息，從而激發(fā)觀眾腦海中有關(guān)作品的相似影像或隱形記憶，喚醒人們?cè)谌粘Ｉ钪信c動(dòng)態(tài)圖像相關(guān)的元素中體現(xiàn)的生活感覺，調(diào)動(dòng)觀眾的五覺，使其互相融合，彼此影響。

2.2 通感在裝置藝術(shù)中的應(yīng)用

錢鐘書在《通感》一文中指出，人的心理感覺“基于聯(lián)想而生通感”[4]。

聯(lián)想是通感最大的特點(diǎn)，是聽覺、視覺、味覺、嗅覺、觸覺兩者或兩者以上互相交融，通過感覺轉(zhuǎn)移、溝通等心理反應(yīng)產(chǎn)生的聯(lián)想。這為交互裝置藝術(shù)提供多維度多感官體驗(yàn)帶來(lái)更多的可能。

2.3 通感體驗(yàn)與交互的完美結(jié)合

數(shù)字媒體藝術(shù)裝置交互體驗(yàn)可分為感官體驗(yàn)、探索體驗(yàn)和思想體驗(yàn)[5]。

從設(shè)計(jì)者的角度來(lái)說(shuō)，觀眾與裝置藝術(shù)互動(dòng)的過程，一定程度上也是對(duì)裝置的再創(chuàng)造。觀眾可以通過多感官體驗(yàn)將自己的情感作用于裝置中，并進(jìn)行藝術(shù)思考，得到一次奇妙的人機(jī)交互體驗(yàn)。

站在互動(dòng)性角度來(lái)說(shuō)，當(dāng)代互動(dòng)裝置自帶趣味性，由于其參與互動(dòng)的感官更加多樣，也有更加豐富的互動(dòng)方式，如做出手勢(shì)、聲音控制的互動(dòng)方式，觀眾與裝置互動(dòng)時(shí)，視覺、聽覺、嗅覺、觸覺等多感官相互作用，作品背后的深層含義被觀眾感知，被賦予計(jì)算機(jī)語(yǔ)言的機(jī)器通過與觀眾互動(dòng)，為觀眾帶來(lái)更有趣的技術(shù)體驗(yàn)。

3 直播裝置的交互體驗(yàn)

近些年，科學(xué)技術(shù)日新月異，傳統(tǒng)文化不可避免地受到?jīng)_擊，如何正確處理傳統(tǒng)文化和現(xiàn)代科技之間的關(guān)系，如何充分認(rèn)識(shí)和積極借助現(xiàn)代科技的優(yōu)勢(shì)弘揚(yáng)中華優(yōu)秀傳統(tǒng)文化成為新的挑戰(zhàn)和機(jī)遇。新媒體時(shí)代，如何實(shí)現(xiàn)文化與科技的交流融合，給受眾傳遞新的文化價(jià)值，喚醒參與者對(duì)傳統(tǒng)文化的記憶，是創(chuàng)作互動(dòng)裝置藝術(shù)時(shí)應(yīng)深入思考的問題。

筆者以“復(fù)活”古代畫作為畫面內(nèi)容，通過交互裝置的形式，選取古代著名的人物，結(jié)合現(xiàn)代直播的互動(dòng)方式，以觀眾為交互設(shè)計(jì)中心，創(chuàng)作出基于通感理論的直播交互作品。作品選取傳統(tǒng)文化中古代名畫人物，對(duì)其進(jìn)行重新設(shè)計(jì)，利用體感交互技術(shù)，結(jié)合現(xiàn)代直播，呈現(xiàn)出立體的空間感，帶給觀眾不一樣的直播體驗(yàn)。保留古典畫作的人物氣質(zhì)，將現(xiàn)代文明以社交媒體的方式融入其中，這種文化沖突讓觀眾參與直播互動(dòng)進(jìn)而引發(fā)其思考，不僅能讓觀眾體驗(yàn)到直播類互動(dòng)裝置的樂趣，更能使其體會(huì)到傳統(tǒng)文化的魅力，賦予傳統(tǒng)文化新的生命力，為觀眾帶來(lái)身臨其境般的浸沒式交互體驗(yàn)。

筆者希望觀眾在與作品互動(dòng)時(shí)，能夠通過視覺、聽覺及觸覺不同區(qū)塊之間的相互聯(lián)系引發(fā)聯(lián)覺現(xiàn)象，喚醒參與者對(duì)傳統(tǒng)文化的思考，作用于裝置，與畫作近距離接觸，使靜態(tài)的畫作產(chǎn)生化妝、彈琴、跳舞的動(dòng)態(tài)效果，感受古人“直播”的樂趣。

3.1 直播裝置的心理體驗(yàn)及現(xiàn)存問題

基于通感體驗(yàn)的設(shè)計(jì)理念，采用當(dāng)下最火爆的直播技術(shù)，將其與古代名人的畫作相聯(lián)系，為觀眾創(chuàng)造創(chuàng)新交互概念中的交互場(chǎng)地，用特定的體感技術(shù)，創(chuàng)新直播的打開方式，給觀眾帶來(lái)極強(qiáng)的參與感，營(yíng)造沉浸式的直播現(xiàn)場(chǎng)，以達(dá)到C-Social的設(shè)計(jì)目的。目前國(guó)內(nèi)有很多讓古代畫作數(shù)字化的裝置，且設(shè)計(jì)逐漸成熟，特別是技術(shù)與直播結(jié)合的效果，但在裝置設(shè)計(jì)中，由于只關(guān)注動(dòng)畫本身的華麗設(shè)計(jì)，未考慮到參觀者接觸到作品時(shí)的感受，忽視了動(dòng)畫設(shè)計(jì)與參觀者之間的交流和互動(dòng)，容易導(dǎo)致裝置效果空洞。

C-Social裝置讓古人“直播”，并通過裝置藝術(shù)呈現(xiàn)出來(lái)，給觀眾帶來(lái)跨時(shí)空、跨維度的直播體驗(yàn)。C-Social選取著名的古人，分別是楊貴妃和蘇軾。設(shè)定楊貴妃為才藝主播，蘇軾為美食主播。觀眾可以通過送禮物、發(fā)彈幕與主播互動(dòng)，重現(xiàn)當(dāng)下真實(shí)的網(wǎng)絡(luò)直播環(huán)境。站在參與者的角度來(lái)說(shuō)，觀眾通過欣賞和互動(dòng)體驗(yàn)，能讓審美體驗(yàn)和情感共鳴加倍，這正是通過社會(huì)經(jīng)驗(yàn)積累達(dá)到通感體驗(yàn)的魅力。在直播互動(dòng)裝置中，數(shù)字動(dòng)態(tài)畫面能滿足觀眾的視覺享受，語(yǔ)音交互能滿足觀眾的聽覺享受，由蘇軾聯(lián)想到東坡肉的味道等聯(lián)覺現(xiàn)象皆為感官互相作用帶來(lái)的通感體驗(yàn)。裝置識(shí)別觀眾的聲音并播放相應(yīng)的動(dòng)態(tài)畫面，直播內(nèi)容由觀眾決定。觀眾走近裝置感應(yīng)區(qū)，系統(tǒng)在一米之內(nèi)識(shí)別人體并傳遞信號(hào)，感應(yīng)器接收信號(hào)開始直播;若無(wú)觀眾，畫面則處于靜止?fàn)顟B(tài);若觀眾在交互時(shí)走出感應(yīng)區(qū)，則直播暫停。

3.2 人與畫作之間的交互

在直播裝置藝術(shù)中，觀眾可以通過身體移動(dòng)改變裝置，產(chǎn)生互動(dòng)效果，如通過發(fā)出聲音、抬起胳膊、發(fā)送彈幕等，改變通過計(jì)算機(jī)屏幕表現(xiàn)的虛擬空間對(duì)應(yīng)的裝置狀態(tài)，從而獲得人機(jī)互動(dòng)的直播交互體驗(yàn)。交互設(shè)計(jì)師需要對(duì)物理世界和虛擬世界進(jìn)行有效配對(duì)，創(chuàng)造合理的組合形式，更直觀地引導(dǎo)參與者在兩者之間互動(dòng)。在直播環(huán)境中，觀眾觸摸和看到裝置的形狀和顏色，這些都是真實(shí)感知到的。真實(shí)和虛擬環(huán)境有著明確的界限，通過對(duì)古人的聯(lián)想，這層界限被打破，真實(shí)環(huán)境與虛擬環(huán)境產(chǎn)生了聯(lián)系，基于觀眾和直播裝置互動(dòng)的聯(lián)想，改變虛擬空間對(duì)應(yīng)古代畫作的具體形態(tài)。可以通過觀眾眼前真實(shí)的直播環(huán)境再創(chuàng)造無(wú)數(shù)個(gè)被感受的虛擬環(huán)境，虛實(shí)結(jié)合的聯(lián)想能夠?yàn)橛^眾帶來(lái)與古人互動(dòng)的真實(shí)體驗(yàn)。

通過體感技術(shù)和聲音控制可參與整場(chǎng)直播，此直播互動(dòng)裝置將觀眾與直播的互動(dòng)體現(xiàn)得淋漓盡致。該直播互動(dòng)裝置需要正確處理中國(guó)傳統(tǒng)文化和現(xiàn)代科技之間的關(guān)系，充分認(rèn)識(shí)和積極借助現(xiàn)代科技的優(yōu)勢(shì)，弘揚(yáng)中華優(yōu)秀傳統(tǒng)文化。選取古代畫作，結(jié)合網(wǎng)絡(luò)直播的跨界和融合，不僅能使觀眾體驗(yàn)到直播類互動(dòng)裝置的樂趣，更能使其體會(huì)到傳統(tǒng)文化的魅力，賦予傳統(tǒng)文化新的生命力。畫作采用工筆畫法實(shí)現(xiàn)逼真的效果，使古代人物不再局限于書本上，而是轉(zhuǎn)變?yōu)榛钴S在熒幕上的“有趣主播”。觀眾走近裝置，并舉起雙手，可為主播送禮物，如奔馳、寶馬、游艇、鉆石等，在最終的展示效果上選用第二代Kinect（由微軟發(fā)布的一款體感傳感器）體感技術(shù)投影實(shí)現(xiàn)。通過聲音傳感器控制聲音，當(dāng)畫面切到楊貴妃時(shí)，觀眾可以發(fā)出“跳舞”“化妝”“彈琴”等聲音，系統(tǒng)通過聲音識(shí)別內(nèi)容，從輸入端傳送給輸出端的直播畫面產(chǎn)生相應(yīng)的動(dòng)效，音畫交互也是該直播交動(dòng)裝置的創(chuàng)新之處。希望該作品對(duì)古代畫作的數(shù)字化展示，能夠拉近古人與觀眾的距離，通過與古人進(jìn)行交互，喚醒觀眾對(duì)歷史人物的記憶。

4 結(jié)語(yǔ)

浸沒式互動(dòng)裝置體驗(yàn)打破了藝術(shù)空間的限制，在各大藝術(shù)設(shè)計(jì)展覽上更表現(xiàn)出了對(duì)傳統(tǒng)藝術(shù)的突破和創(chuàng)新。當(dāng)前處于互動(dòng)裝置藝術(shù)發(fā)展的探索階段，隨著浸沒式體驗(yàn)的多樣化創(chuàng)新及科學(xué)技術(shù)的日益成熟，交互裝置設(shè)計(jì)師將致力于不斷探索交互裝置藝術(shù)所體現(xiàn)的浸沒式體驗(yàn)與藝術(shù)融合。在不久的將來(lái)，交互裝置藝術(shù)將秉承沉浸式體驗(yàn)的態(tài)度與現(xiàn)代各種數(shù)字技術(shù)手段交流融合，呈現(xiàn)出前所未有的繁榮景象。

參考文獻(xiàn)：

[1] 齊林青.沉浸式交互體驗(yàn)在展陳設(shè)計(jì)中的應(yīng)用[J].西部皮革，2021（23）：148-149.

[2] 鐘鳴，何人可，趙丹華，等.基于通感轉(zhuǎn)化理論的交互裝置體驗(yàn)設(shè)計(jì)[J].包裝工程，2021（4）：109-114.

[3] 陳柯辰.通感在線上購(gòu)物界面設(shè)計(jì)中的應(yīng)用研究[J].設(shè)計(jì)，2019（19）：141-143.

[4] 錢鐘書.七綴集[M].北京：生活·讀書·新知三聯(lián)書店，2002：55-57.

[5] 張凱，林鴻.通感中感覺挪移在產(chǎn)品設(shè)計(jì)中的應(yīng)用[J].包裝工程，2018，39（6）：20-23.

作者簡(jiǎn)介：李宜芳（1998—），女，河南濟(jì)源人，碩士在讀，研究方向：數(shù)字媒體藝術(shù)。