交互沉浸體驗

交互沉浸體驗清華大學(xué)美術(shù)學(xué)院教授徐英青做了精彩的演講。今天我想和大家分享一個案例，大場景下沉浸感知體驗的設(shè)計。大家知道，所謂的沉浸就是說在一個非現(xiàn)實的環(huán)境里能夠體現(xiàn)到現(xiàn)實環(huán)境的感知，這種感知是通過圍繞在用戶周圍的虛擬現(xiàn)實系統(tǒng)中的圖像、聲音或者其他環(huán)境的刺激而創(chuàng)建的。目前大家知道，vr、ar發(fā)展得非常火，特別是以眼鏡、頭盔為代表的虛擬現(xiàn)實的設(shè)備如火如荼。這里面既帶來了巨大的挑戰(zhàn)，也帶來很多的問題。因為大家知道，眼鏡戴的時間長了頭會暈，戴了以后生理上的不適等等，這些問題都有待于解決。也有很多不戴眼鏡的沉浸體驗。10年前，我們看到了一些不戴眼鏡的立體和沉浸體驗的原型，但它們今天仍在實驗室中。最近出現(xiàn)了一些新的設(shè)備和新的可能性。上午，張先生還說，我們的設(shè)計提供了新的可能性。當然也面臨很大的挑戰(zhàn)。另外一方面，其實沉浸體驗有很多的可能性，比如說大家都知道的imax,幾乎所有人都經(jīng)歷過這樣的體驗。imax是很有意思的沉浸體驗，大家回想一下，在一個巨大的屏幕下，你其實已經(jīng)和看一個小的電視是完全不一樣的感覺，哪怕你看100寸的電視，和imax也是完全不一樣。也就是說，你的眼睛、大腦誤導(dǎo)了全身的器官，讓你仿佛置身于電影場景之中。這是一個很有意思的事實。尺寸分辨率當尺寸、分辨率發(fā)生變化的時候，會影響到用戶的這種沉浸的感知。大家知道，我們做了一個75萬平米的異形屏幕的燈光秀，在g20的時候火了一把。我們在杭州新區(qū)所有樓上做了幾百萬jled燈。這個世界上最大的屏幕給游客帶來一個全新的體驗。這個其實是我們好幾個團隊合作，包括清華大學(xué)的燈光研究所，我們的視傳系，我們的環(huán)藝系，以及和一些國外的專家一起合作，完成一個效果。每天晚上會有30分鐘的秀，包括各種各樣的內(nèi)容，這樣的內(nèi)容可以吸引游客過來。不僅僅是動畫表演，還包括很多文化的內(nèi)涵。錢江新城，東臨錢江、西眺西湖，是未來杭州行政和經(jīng)濟文化的中心之一。但它的現(xiàn)狀就是，沒有足夠的自然景觀吸引游客，遠離景區(qū)，游人稀少。如果能夠打造一個人工景觀，和自然的景觀相映成輝；市民和游客能夠來到錢江新城，在江邊漫步，到整點能夠有建筑燈光秀，能夠在這里逛街吃飯，特別是能在這里住一宿，那么對于拉動當?shù)氐慕?jīng)濟是非常重要的。這是燈光秀的初衷。我們希望西湖美景和錢江燈光能夠相融合，特別g20峰會是一個契機，對將來是一個很大的提升，實際上是打了一個大廣告。城市文化內(nèi)涵體現(xiàn)現(xiàn)在很多城市文化都很平庸。嚴格來說，在創(chuàng)意上還不夠努力。我們希望它不僅僅是一種視覺刺激，更是一些文化內(nèi)涵。特別是有一些特征性的意圖，世界各地都有同樣的案例。這是澳大利亞悉尼歌劇院的燈光秀，法國里昂、上海、劍橋都有很多燈光秀。不過這里不像新城燈光秀，新城要播很久。這些燈光秀，比如悉尼的燈光秀，都是短期設(shè)置的，就是做一個燈光節(jié)，畫面非常精細，視覺沖擊力很強，但是長期就會出現(xiàn)問題。另一個是它的視覺形象缺乏特異性。從里昂到上海，這樣的展覽逐漸成為視覺快餐，這不是我們所期待的。還有就是led的這個媒體立面，如果長期設(shè)置，它的分辨率是低的。有些地方，在我們國家有些城市，做了寫實的像拍電影，這是不適合led低分辨率的影像表達的。另外一個就是說，這種寫實性的大型建筑群，很多地方做了照明互動，這樣的視覺外延非常鋒利，而且給受眾給游客的想象空間特別小。包括這個，你走近了看也不那么好看，一定要有一個距離感，另外內(nèi)容上一定要做精心的設(shè)計。其實這種技術(shù)本身已經(jīng)很成熟了，但是怎么樣設(shè)計它的內(nèi)容以及用戶體驗，這是我們面臨的問題。我們做了快一年了，包括如何盡可能把一些傳統(tǒng)元素用它的抽象語言表達出來，如何提高用戶的想象力，適合這種表達的媒介。對于這種重復(fù)的場景，你要有足夠的資料來支撐。我們已經(jīng)提出了幾十個方案。不夠，我們以后繼續(xù)做?；谒恼鎸崍鼍昂鸵?guī)劃，利用杭州的一些地域文化，期望用燈光來展現(xiàn)它的建筑和空間特色。下沉舞臺所在的市民中心前面的地方叫城市陽臺，大概幾百米遠。它拉出了觀眾的視覺效果，增強了觀眾的體驗感，使這場燈光秀的效果看起來不是低分辨率的圖像，而是高分辨率的效果?？沙掷m(xù)運作其實這也是一個特別好的商業(yè)平臺。如果后臺有演出，大概有幾個地方可以有大量的人觀看?？吹臅r候，想想。如果在那里開演唱會或音樂會，背后有世界上最大的屏幕，這種效果就完全不一樣了。當時的主視點定為了城市陽臺，然后在這兩邊有次視點。在下沉舞臺上我們做了一些設(shè)計，從下沉舞臺、市民中心和城市陽臺，這個旁邊就是g20的會場，左邊這個建筑物很像太陽，所以我們就叫它太陽；右邊像一個月亮，我們就管他叫月亮。在月亮的旁邊就是這個下沉的舞臺。這樣的一個日常的建筑燈光表演如何引發(fā)爆點，如何為城市陽臺帶來源源不斷的人氣，這是我們設(shè)計的時候面臨的很大一個挑戰(zhàn)。希望能有一個城市的老百姓的幸福生活的狂歡，就是停不下來，就是讓他不斷的在這里，總想回來看，要吸引他過來看。希望有一些這種全息的效果，另外把一些地方的戲曲、露天的音樂會，把它怎么樣能夠有機的融合到一起。同時這么大的一個世界上最大的互動舞臺，如何能夠讓它可持續(xù)的運作，能夠把市民的生活和你的設(shè)計，和商演和原創(chuàng)，這些東西相融合，而不僅僅是一個表演，這些是在設(shè)計過程中面臨的挑戰(zhàn)。根據(jù)錢江潮的不同形式，如一線潮、跨潮、倒潮等。，我們應(yīng)該給出一些不同的表達形式，而這種形式應(yīng)該用抽象的形象和概念來表達非常相似的內(nèi)容。我們當時收集了一些信息。思考如何把它的真實場景和它的文化聯(lián)系起來，比如運河文化和中國畫的歷史，西湖的風(fēng)景和山水畫，如何把這些元素提出來，這是我們在設(shè)計的時候的一些思考。有一些主題，比如日月同輝的主題，或者日出時河花勝火的主題。有一些題材，有一些好的詩詞，如何呈現(xiàn)一些江南之類的意境，一些古建筑文化。色彩中國美院的宋建明老師曾經(jīng)做過杭州城市景觀色彩規(guī)劃的研究報告，提出了一系列與杭州相關(guān)的色彩主題。這樣的分析對于城市規(guī)劃和燈光色彩的表現(xiàn)是很有幫助的。我們之前做過的一些研究工作，比如基于大數(shù)據(jù)和人工智能的色彩主題增強，相關(guān)算法和工具的研發(fā)等。，對本課題的研究有積極的借鑒作用。比如我們可以從一張照片中提取一系列主題，每張照片可以提取其主題，每個場景也可以提取其主題。通過對這些主題的分析和再設(shè)計，我們可以獲得很多設(shè)計上的靈感。包括我們做的色彩主題增強，這是我們原來的工作。有了一張照片，我們給你一個顏色主題，這張照片就可以變得與眾不同。這對原始素材和設(shè)計素材之間的轉(zhuǎn)換起著重要的作用。另一個是顏色優(yōu)化，對我們后期提取一些想要的主題很有幫助。還有建筑模型和圖像的像素化，這是我以前在微軟做的。這樣的像素化作品也有助于我們設(shè)計燈光動畫。從照片到手繪，得到一張照片，這里可以生成一張手繪圖，左邊是原圖，右邊一進去就可以畫一張手繪圖。我們提到了三大主題，水的精神，城市的靈魂和光的影子。這三個主題相輔相成，每天都在不同的場合播出，所以社會效果對于城市來說不言而喻。以后還能有杭州燈光節(jié)嗎？其實投資人和策劃人一開始就在思考這個問題。同時做了一系列各種各樣的主題，比如致敬城市，致敬傳統(tǒng)，致敬西湖靈隱，致敬浙大等等。，以吸引更多的市民和游客。同時我們還有