索尼公司(下稱:索尼),以前沿的AI(人工智能)、AR(增強(qiáng)現(xiàn)實(shí))、VR(虛擬現(xiàn)實(shí))技術(shù),助力于8月4日-18日在秋葉原(AKIBA SQUARE)舉辦的體驗(yàn)型展覽“刀劍神域?online?ex-chronicle”(主辦方:SAO-A項(xiàng)目組),令參觀者可以親身體驗(yàn)《刀劍神域 online(下稱:SAO)》中所描繪的虛擬現(xiàn)實(shí)世界。
《SAO》是一部以多個虛擬現(xiàn)實(shí)空間為舞臺,主要描寫主人公桐人的長篇科幻小說,包含海外的翻譯版在內(nèi),已累計發(fā)行超過2,200萬本,作為超人氣IP延伸至動畫、動畫電影、游戲等領(lǐng)域,今年恰逢原作小說出版10周年。
索尼音樂集團(tuán)旗下的Aniplex股份有限公司于2017年公映了劇場版動畫電影《刀劍神域劇場版-序列之爭》,達(dá)成了該公司最高票房收入※1。
“刀劍神域?online?ex-chronicle”,是原著中以推廣虛擬世界為目標(biāo)的極密研發(fā)組織“拉斯”所開展的實(shí)驗(yàn)統(tǒng)稱,展覽上采用了索尼的AI、動作捕捉、立體空間顯示等AR、VR技術(shù),設(shè)置了多個可以盡情體驗(yàn)SAO世界的體驗(yàn)型展臺。
※1:截至2019年7月19日
主要展示內(nèi)容:
1、AR聽覺實(shí)驗(yàn)“Sound AR?※2 Guide to EX-CHRONICLE”
通過聽覺AR(采用了索尼研發(fā)中心所開發(fā)的索尼獨(dú)有的音響技術(shù)),采用語音向?qū)?,讓動畫人物宛如就在身邊一樣真?shí)。以在劇中作為總務(wù)省通信網(wǎng)絡(luò)內(nèi)虛擬空間管理課職員登場的菊岡誠二郎為首,各種各樣的人物原音在“SAO”的世界中引導(dǎo)著AR和VR的步伐等。使用索尼移動通信股份有限公司(下稱:索尼移動)的開放式耳機(jī)“STH40D”,可以在環(huán)境音下聽耳機(jī)中播放的聲音,樂享動畫人物仿佛在側(cè)的神奇體驗(yàn)。該開放式耳機(jī)采用了索尼獨(dú)有的音管設(shè)計,無需堵塞耳部。
※2:Sound AR?是索尼公司的商標(biāo)
2、虛擬空間中的全身動作捕捉實(shí)驗(yàn)“刀劍技巧?挑戰(zhàn)” ※3
采用只需安裝6個小型輕量傳感器,就能捕捉全身運(yùn)動的獨(dú)特動作捕捉技術(shù),將現(xiàn)實(shí)動作輕松地反映在虛擬空間中。傳統(tǒng)的動作捕捉技術(shù),需要專用的身體套裝和諸多的照相機(jī)等厚重設(shè)備才能顯示全身動作。此次展覽采用了索尼研發(fā)中心開發(fā)的深度學(xué)習(xí)技術(shù),可從少數(shù)的傳感器的信息推測出全身的關(guān)節(jié)動作。參觀者可以成為原作主人公桐人或其搭檔的尤吉?dú)W,使用自己身體的運(yùn)動實(shí)時發(fā)動「刀技能」,一個接一個地砍向前來侵略的敵人蟑螂。
※3此展示于8月12日-18日在會場前的走廊處開放
3、再現(xiàn)虛擬空間的實(shí)驗(yàn)“MEETING YUI’s Heart(遇見結(jié)衣的心)”
通過索尼獨(dú)有的立體空間再現(xiàn)影像技術(shù),和動畫人物來一次“邂逅”體驗(yàn)。作品中,以桐人和解除封印的結(jié)衣再次相逢這一印象深刻的場景為主題,參觀者通過操作空間中浮現(xiàn)的菜單界面,讓人物宛如存在于眼前,體驗(yàn)與TA面對面,互相看著對方的感覺。
4、在虛擬世界中復(fù)制人格的實(shí)驗(yàn)“比嘉君的創(chuàng)造AI!塑造你的性格!”
作品中,菊岡誠二郎的下屬是天才工程師比嘉健,該展臺再現(xiàn)了復(fù)制參觀者人格后制作AI的實(shí)驗(yàn)室。通過用索尼獨(dú)有的算法解析從參觀者(用戶)提前收集的對話數(shù)據(jù),做成復(fù)刻AI,如此一來,參觀者可以聽到自己的復(fù)刻AI,和作品中的AI角色愛麗絲進(jìn)行對話。該技術(shù)通過學(xué)習(xí)用戶和愛麗絲的對話,可以捕捉到每個人對話的特征,從而制作出復(fù)刻AI,提供流暢而自然的現(xiàn)場對話體驗(yàn)。愛麗絲的對話語音采用了索尼移動開發(fā)的深度學(xué)習(xí)語音合成技術(shù)。
展覽詳情可訪問:https://sao-ex-chronicle.com/