日前,由浙江省委宣傳部指導、浙江廣電集團謀劃部署、浙江衛(wèi)視與騰訊互娛公共研發(fā)體系下的知幾團隊共同打造的國內(nèi)首位“宋韻文化推廣虛擬人”谷小雨,華麗亮相宋韻文化節(jié)開幕暨南宋德壽宮遺址博物館開館儀式,并擔任主持人。據(jù)了解,谷小雨已作為AI虛擬導覽員“常駐”南宋德壽宮遺址博物館,為來訪游客互動講解暢聊德壽宮歷史文化,傳頌經(jīng)典宋詞,同時也能指引展廳內(nèi)的路線導覽。

　　德壽宮遺址是南宋臨安城內(nèi)一處重要的宮苑遺址,是江南園林的集大成作,而南宋德壽宮遺址博物館依托遺址原址,以遺址本體及出土文物的保護、研究、收藏和展示為主,同時展示南宋歷史文化和文物遺產(chǎn)。

　　上任新崗位的谷小雨換了妝容打扮,珍珠面靨、柳葉細眉凸顯出淡雅風格,印花抹胸加直領(lǐng)對襟褙子和百迭長裙還原傳統(tǒng)宋制,窄袖褙子的下擺結(jié)合了宋代《梨花春燕圖》中的造型特征,整體造型既展現(xiàn)宋人含蓄內(nèi)斂的體態(tài),又盡顯少女婷婷裊裊的靈動,體現(xiàn)了地道的宋韻氣質(zhì)。一顰一笑,韻律自然,在谷小雨出眾“業(yè)務能力”的背后,是騰訊互娛知幾團隊硬核的技術(shù)支持。

　　前沿技術(shù)助力虛擬人“擬活”,谷小雨能說會道展宋韻風采

　　為了使谷小雨能夠與游客進行實時的語音對話,騰訊互娛知幾團隊運用了多模態(tài)AI語音問答技術(shù),通過智能交互技術(shù)和AI賦能虛擬人,令谷小雨實現(xiàn)“聽得懂”、“答得出”、“懂得多”三大目標。

　　具體說來,在“聽得懂”方面,知幾團隊采用了深度學習、自然語言理解等AI技術(shù),疊加由騰訊游戲語音GVoice和微信智聆語音兩大技術(shù)團隊提供的語音識別技術(shù),多管齊下,保證小雨能準確地聽懂游客的意圖,并進行恰當?shù)幕貜汀?/p>

　　同時,區(qū)別于傳統(tǒng)問答需要人工提前撰寫大量預設(shè)的答案,知幾團隊自研的生成式對話算法可基于虛擬人性格背景,智能生成符合人設(shè)的回答。實際上,谷小雨在出任導覽員之前,就已經(jīng)進行了400G開放數(shù)據(jù)和30億參數(shù)量的超大規(guī)模語言模型訓練,再加上海量宋韻文獻和由騰訊PGC問答架構(gòu)團隊提供的百科搜索引擎的加持,小雨成功掌握了宋韻百科知識,堪稱宋韻文化“百曉生”。

　　在保證小雨對答如流“答得出”的前提下,知幾團隊還采用了語音驅(qū)動口型技術(shù),通過適配各種音色、歌唱、語氣詞等不同類型的音頻輸入,學習種類繁多的情感語音數(shù)據(jù),生成韻律自然、情感風格豐富和個性化的高表現(xiàn)力語音,配合靈動準確的面部表情和口型,讓小雨的語音達到可媲美真人合成的效果,使虛擬人小雨真正地“活起來”。

　　從國內(nèi)到海外,數(shù)字科技賦能千年宋韻

　　自今年6月首次亮相以來,“宋韻文化推廣虛擬人”谷小雨秀才藝、做科普,登上央視豐收節(jié)晚會,不斷拓寬著宋韻文化的傳播面。在文化數(shù)字化的賽道上,這個“出生于宋朝”的虛擬人正不斷做出更多積極探索。

　　除了在國內(nèi)宣傳推廣宋韻文化,谷小雨也將宋韻文化輸送到了海外。在今年中秋的2022“月是故鄉(xiāng)明”華僑華人中秋晚會上,谷小雨通過大型冰屏在晚會現(xiàn)場從天而降,給海外僑胞和世界各地的觀眾傳遞宋韻之美,送上中秋祝福;在美國加州洛杉磯舉行的亞洲秋慶節(jié)上,谷小雨也亮相活動現(xiàn)場,吸引了大量當?shù)氐臐h服愛好者參與、打卡互動,并將內(nèi)容上傳至國際社交媒體。谷小雨在用數(shù)字化的創(chuàng)新表達,不斷將宋韻文化的金名片傳播至海外。不僅如此,谷小雨還正在參加第十八屆中國國際動漫節(jié),以年輕國潮之力,助力宋韻文化傳播。

　　在不久的將來,騰訊互娛知幾團隊還將以此為合作契機,聯(lián)合騰訊游戲?qū)W堂、浙江衛(wèi)視以及中國美術(shù)學院,整合各方在AI技術(shù)、虛擬人技術(shù)以及廣電端虛擬制片技術(shù)上的領(lǐng)先優(yōu)勢,深化“藝術(shù)”和“技術(shù)”合作,共同開展課題研究。在為谷小雨日常運營提供技術(shù)支撐的同時,持續(xù)對前沿的數(shù)字虛擬技術(shù)進行深入研發(fā)和產(chǎn)品化落地。

　　從國內(nèi)到海外,從歷史到未來,谷小雨以數(shù)字科技為內(nèi)核,不斷用現(xiàn)代化手段助力中國文化傳播。