1882年，張園出現(xiàn)上海第一盞電燈，讓上海成為世界上最早使用電能照明的三大城市之一。140多年后，首屆上海國際光影節(jié)于近期拉開帷幕，建筑投影秀、光影秀、光影藝術(shù)裝置展、燈光音樂會等超百場活動，讓上海的夜晚更加流光溢彩。

光影節(jié)期間，“靜安光影奇妙夜”系列活動——《千年之約·入畫屏》數(shù)字光影展，以其獨樹一幟的“AI換臉入畫”體驗，吸引了眾多觀眾前來探索。來自阿根廷的游客吳飛得連連稱贊：“能把AI技術(shù)、中國傳統(tǒng)文化，以及光影這些不同的元素結(jié)合在一起，我覺得是一個非常棒的體驗?！?/p>

《千年之約·入畫屏》由上海廣播電視臺商業(yè)創(chuàng)新中心攜手上海圖書館歷經(jīng)半年打造，深度挖掘宋朝生活風(fēng)貌與民俗特色，并依托SMG生成式人工智能媒體融合創(chuàng)新工作室的尖端技術(shù)，以超高清和AI技術(shù)還原宋畫場景。

“融合現(xiàn)代科技與宋式文化，希望這一沉浸式展覽能以‘場景化’的創(chuàng)新方式，讓典籍中的傳統(tǒng)文化煥發(fā)出新的生命力?！鄙虾V播電視臺商業(yè)創(chuàng)新中心總經(jīng)理潘偉說。

作為全球首個將實時互動視頻生成技術(shù)應(yīng)用于線下展覽的案例，《千年之約·入畫屏》實現(xiàn)了AI即時互動的突破。

據(jù)介紹，由SMG人工智能專家顧問、上海交通大學(xué)教授倪冰冰領(lǐng)銜的技術(shù)團隊，采用AI面部特征編輯、生成與驅(qū)動技術(shù)，通過高精度攝像頭捕捉觀眾靜態(tài)面部特征，并采用人臉編輯和生成技術(shù)，將這些特征融入古畫中隨機選取的人物形象之中，最后借助表情驅(qū)動技術(shù)，模擬出栩栩如生的面部動作，使得科技與藝術(shù)在光影交錯間實現(xiàn)了完美的融合。

“千年之約”項目技術(shù)負責(zé)人、交大文創(chuàng)學(xué)院元宇宙創(chuàng)新中心首席科學(xué)家陳炫宏博士告訴記者，該算法模型是目前業(yè)界最為知名的換臉?biāo)惴ㄖ?，基于simswap++/simswap技術(shù)，以其卓越的實時性、保真效果出眾以及人臉身份一致性高度穩(wěn)定為顯著特點，高度契合消費級市場對于高效時效性的迫切需求，這也是用戶能在短短幾十秒甚至十幾秒實現(xiàn)入畫穿越的核心技術(shù)保障?！拔磥?，系統(tǒng)還將實現(xiàn)多模態(tài)的用戶輸入交互，以聲光電、屏顯等多模態(tài)的輸出方式，為用戶提供更高度的沉浸式中華文化體驗?！?/p>

除了對前沿技術(shù)的革新展示，《千年之約·入畫屏》還有致敬宋朝文化的藝術(shù)實踐，即采用4K超高清視頻技術(shù)，結(jié)合數(shù)字藝術(shù)家的精妙筆觸，對宋徽宗《聽琴圖》等傳世名畫進行深度二次創(chuàng)作。

在這一過程中，創(chuàng)作團隊首先從碑帖、宋畫中提煉出背景元素，按比例復(fù)原宋代妝容、服飾及民俗場景，并通過特效演員的情景實拍和數(shù)字圖像的精準(zhǔn)擬合，借助超高清4K分辨率，將古畫中記錄的一千多年前的真實場景栩栩如生地展現(xiàn)在觀眾面前。

值得一提的是，AI換臉技術(shù)的巧妙運用，讓每位觀眾都能成為畫中人，不少觀眾更身穿應(yīng)季漢服前來，體驗“一秒魂穿回宋朝”。

傳統(tǒng)文化推廣者徐悅爾與20多位外國友人一起參觀了展覽?！癮mazing”“beautiful”……外國友人體驗了穿漢服、看國風(fēng)光影展后，紛紛表示被中國文化和文字吸引。

在徐悅爾看來，“千年之約”促成了古今中外在這里的相交和融合，讓現(xiàn)代人用視聽手段“遇見”宋代，也讓不同國家不同民族不同文化的小伙伴，都能被宋式美學(xué)深深震撼和感動，與那個久遠的年代產(chǎn)生獨屬于自己的連接點，構(gòu)建起個人與傳統(tǒng)文化之間獨特的情感紐帶。

作為聯(lián)合出品方，上海圖書館也為《千年之約·入畫屏》提供了豐富的文化支持與資料保障。由館長陳超領(lǐng)銜，上圖團隊深入挖掘宋朝文人雅士的日常生活與民俗特色，通過引入現(xiàn)場語音導(dǎo)覽系統(tǒng)、復(fù)原宋朝韻味的香氛設(shè)計，以及體驗空間的精心布置，全方位調(diào)動觀眾的感官體驗，使展覽成為一場可觀、可感、可觸的文化盛宴。

“《千年之約·入畫屏》展覽既是SMG從為播出服務(wù)向為傳播服務(wù)的重要實踐，也是SMG在媒體數(shù)字化轉(zhuǎn)型道路上的一次大膽嘗試與創(chuàng)新展示，充分發(fā)揮了媒體在城市美好建設(shè)和流量創(chuàng)造中的獨特價值?！迸藗ハＭ?，未來超高清與AI技術(shù)能應(yīng)用于更多文化場景，搭建起連接過去與未來、藝術(shù)與科技的橋梁，為市民游客提供更多沉浸式的文化體驗。