對話虛擬人柳夜熙幕后團隊：想文化輸出海外，打造中國版漫威

　　元宇宙“引路人”？虛擬偶像百萬成本困境待解

　　新京報貝殼財經(jīng)記者 羅亦丹 李夢涵

　　“我，叫柳夜熙”。

　　近期，新晉美妝達人柳夜熙出道視頻刷爆網(wǎng)絡(luò)，視頻特效部分高級感拉滿，虛擬人逼真生動，發(fā)絲紋理、手部動作幾乎與真人無異，虛擬人與現(xiàn)實人的交互也異常順滑。這位會捉妖的美妝達人視頻發(fā)布不到30小時，粉絲數(shù)一路猛漲至130萬。截至11月23日，首條視頻點贊量達到336.6萬，粉絲數(shù)也已經(jīng)達到536萬。

　　柳夜熙背后公司創(chuàng)壹科技的創(chuàng)始人謝多盛告訴貝殼財經(jīng)記者，此次兩分鐘的視頻僅是柳夜熙登場預(yù)告，后續(xù)故事將會以單集劇情的形式陸續(xù)在抖音發(fā)布。目前，創(chuàng)壹科技公司服務(wù)于柳夜熙背后的大中臺團隊有150余人，小前臺團隊人數(shù)則在10人以內(nèi)。

　　2007年，當(dāng)“初音未來”用電子合成音第一次唱歌，并被日本秋葉原宅男們稱為“公主殿下”時，不少人以為這只是二次元的狂歡。隨著“洛天依”走進李佳琦直播間帶貨、“柳夜熙”一天吸引百萬粉絲，虛擬人已經(jīng)不知不覺進入普通大眾生活。

　　今年，隨著元宇宙概念躥紅，作為其要素之一的虛擬人同樣被推至臺前。“2018年，當(dāng)我們進入這一賽道時，很多人對什么是虛擬人根本不了解，但到了今年仿佛所有人都明白了，很多投資人也在尋找相關(guān)投資標(biāo)的。”次世文化公司創(chuàng)始人陳燕告訴新京報貝殼財經(jīng)記者。

　　貝殼財經(jīng)記者采訪虛擬人從業(yè)者了解到，目前虛擬人分為超寫實虛擬人、虛擬偶像和虛擬人交互產(chǎn)品三大類，并已在不同領(lǐng)域?qū)崿F(xiàn)商業(yè)價值。不過，每秒上千到幾萬的高昂制作成本、實時渲染技術(shù)難題以及難以逾越人腦的AI技術(shù)也成為虛擬人發(fā)展的瓶頸。

　　●打造

　　有虛擬偶像吸粉超千萬“幾分鐘視頻成本數(shù)萬元”

　　手舉偶像海報，一字排開，口中齊聲大喊“生日快樂”……11月2日前后，中科院大學(xué)、上海交大以及海外劍橋、紐約大學(xué)學(xué)生不約而同在B站上傳慶生視頻。粉絲應(yīng)援陣容強大，至于主人公，并非傳統(tǒng)意義上的真人，而是A-Soul的虛擬偶像“珈樂Carol”。

　　A-Soul是樂華娛樂2020年11月推出的虛擬偶像團體，起初一度遭到原生虛擬主播粉絲的抵制，但開播不久后，其細(xì)膩的建模和“中之人”過硬的業(yè)務(wù)素質(zhì)，讓不少反對者“黑轉(zhuǎn)粉”。

　　一年時間，A-Soul團隊已經(jīng)躋身B站頭部虛擬主播，其中成員“嘉然”B站粉絲數(shù)達到126萬。A-Soul走紅甚至衍生出“我真的好喜歡你啊”、“可愛捏”、“帶我走吧”等不少亞文化“梗”。

　　虛擬偶像團體破圈，有著行業(yè)爆發(fā)的影子。根據(jù)B站董事長陳睿公開的數(shù)字，2019年B站有超過32000名虛擬主播開播。

　　但是，扎堆進場試水，并不意味著都能見到成功的曙光。一組公開數(shù)據(jù)顯示，截至2021年8月18日，B站相對有關(guān)注度的3472個虛擬主播中，1827人當(dāng)月營收0元，也就是說，超過半數(shù)沒有一分錢入賬。

　　“實際上，只要設(shè)計出一套3D模型，再購買一套動作捕捉設(shè)備，就可以成為初級虛擬偶像。”虛擬偶像產(chǎn)業(yè)觀察者劉文（化名）告訴貝殼財經(jīng)記者，普通虛擬游戲主播采用的技術(shù)系基于面部動作捕捉，換句話說，只要套上一個2D或3D的“皮”，就可以成為一名虛擬主播，并且能像真人主播一樣直播。

　　不過，劉文稱，動捕設(shè)備和3D建模都需要成本，效果越好的設(shè)備和模型成本越高，這導(dǎo)致不少虛擬主播入不敷出。

　　火星文化創(chuàng)始人李浩早在2017年就啟動了虛擬偶像業(yè)務(wù)，目前旗下虛擬形象“默默醬”在全網(wǎng)粉絲已經(jīng)超過1800萬。他對貝殼財經(jīng)記者表示，目前虛擬偶像在制作流程上大同小異，“首先使用建模工具制作3D模型并不斷迭代，再通過動作捕捉技術(shù)驅(qū)動人物模型的動作，以及找一個‘中之人’。”

　　李浩告訴記者，目前絕大多數(shù)虛擬主播采用“中之人”和動捕技術(shù)進行直播。“‘初音未來’和‘洛天依’最初發(fā)布時都是采用電子合成音，但從日本第二批虛擬偶像誕生開始，‘中之人’開始大量使用，這是因為必須要讓虛擬偶像在說話的時候更像人。目前在技術(shù)上，電子合成音說話和真人有相對較高的吻合度，但唱歌時就會產(chǎn)生明顯的技術(shù)壁壘，無法有效處理喘息、氣流音等效果，會讓觀眾覺得‘不對勁’，而采用動捕技術(shù)可以有效地降低制作成本。”

　　實際上，虛擬偶像直播比真人直播要難上一個數(shù)量級。據(jù)了解，目前面部動捕與身體動捕屬于不同的技術(shù)，所以在極端情況下，當(dāng)一名虛擬偶像出現(xiàn)在直播間，其面部、身體要由兩個人分別攜帶動捕設(shè)備。此外，還需要技術(shù)人員將兩塊動捕動畫進行合成，再與“中之人”的語音錄制進行音視頻合成，最終才能呈現(xiàn)出觀眾看到的直播間效果。

　　去年4月，“洛天依”與李佳琦同框直播的噱頭引發(fā)一波關(guān)注。直播過程中，一度出現(xiàn)李佳琦能聽到“洛天依”的聲音，觀眾卻聽不見的“翻車事故”。

　　李浩向記者介紹，虛擬偶像背后往往需要一個團隊來支持，“以‘默默醬’為例，內(nèi)容團隊有十個人，包括導(dǎo)演、劇本、動捕人員、聲優(yōu)等。而技術(shù)方面，根據(jù)發(fā)布視頻的不同，動畫師還要對‘默默醬’的模型進行修改。一條普通的短視頻成本可能在6000元左右，幾分鐘的定制類視頻成本則要數(shù)萬元。”

　　如果說虛擬偶像的技術(shù)和動畫團隊可以替代，“中之人”毫無疑問是虛擬偶像的靈魂。樂元素2018年9月推出虛擬偶像企劃《戰(zhàn)斗吧歌姬！》，運營兩年多后，6位歌姬的“中之人”今年2月“畢業(yè)”，并在B站發(fā)布了告別視頻。此后，當(dāng)運營方宣布重新招募“中之人”，不少粉絲在留言中表示：“換‘中之人’還是舊皮的話不能接受。”

　　“我們和‘中之人’深度綁定，如果虛擬偶像沒有了‘中之人’，起碼要停更一個月，因為即便找到新的聲優(yōu)訓(xùn)練聲音，聊天沒問題，但唱歌很容易被看穿。”李浩說。

　　●瓶頸

　　柳夜熙燒錢爆紅背后：高昂成本與技術(shù)高墻

　　早在半年前，創(chuàng)壹科技就嗅到了元宇宙的風(fēng)口，并開始著手打造柳夜熙這一虛擬人IP，從市場定位、人物設(shè)定、人物制作、故事情節(jié)創(chuàng)作、拍攝執(zhí)行、后期制作等各個方面都經(jīng)過了不斷的打磨。柳夜熙的東方面孔、中國風(fēng)的妝容與捉妖師的身份契合了當(dāng)下盛行的國潮風(fēng)尚，同時妝容中熒光元素運用、充滿科幻感的特效與賽博朋克風(fēng)格的后期色調(diào)又迎合了Z時代年輕人的喜好。

　　對于柳夜熙的走紅，創(chuàng)壹科技創(chuàng)始人謝多盛表示并不意外。團隊復(fù)盤時也曾對此展開過討論：柳夜熙的爆紅50%是因為元宇宙的概念熱度，30%是因為其2.5次元的設(shè)定和技術(shù)水平，20%是視頻創(chuàng)意和世界觀的搭建。目前市面上的虛擬人大多是以虛擬偶像的模式運營為主，可大致分為養(yǎng)成類、人格化類、二次元女團等類型，虛擬人所處時空也多是二次元或者三次元。而創(chuàng)壹科技對于柳夜熙的定位則是2.5次元——二次元是純CG，三次元是現(xiàn)實世界，2.5次元則是游離于二者之間的存在。

　　就當(dāng)前來看，柳夜熙等后續(xù)虛擬人IP的變現(xiàn)方式短期內(nèi)難以實現(xiàn)，僅靠燒錢能否維持其長時間的運轉(zhuǎn)仍要打上一個問號。但在創(chuàng)壹的戰(zhàn)略布局中，柳夜熙等后續(xù)虛擬人的變現(xiàn)方式主要有兩種——傳統(tǒng)IP經(jīng)濟和元宇宙未來的商業(yè)可能。

　　貝殼財經(jīng)記者注意到，目前進行直播的虛擬偶像大多以二次元畫風(fēng)為主，而“柳夜熙”、“翎”等與真人觀感類似的虛擬偶像，更大程度上被稱為“超寫實虛擬人”，這類虛擬人往往并不直播，而是出現(xiàn)在微博、抖音、小紅書等社交平臺，像網(wǎng)紅一樣通過自己的照片和視頻吸引粉絲，接商業(yè)代言。

　　“我們不做傳統(tǒng)的二次元，也不碰虛擬主播的領(lǐng)域。”“翎”的制作方、次世文化公司創(chuàng)始人陳燕告訴貝殼財經(jīng)記者，“我們推出的虛擬人主要應(yīng)用在泛娛樂領(lǐng)域、品牌領(lǐng)域，粉絲也大多是比較關(guān)注時尚生活的群體，如果說二次元虛擬偶像的粉絲可以類比B站粉絲，那么超寫實虛擬人的粉絲與小紅書的粉絲構(gòu)成更相似。”

　　貝殼財經(jīng)記者梳理看到，以“翎”這種中國風(fēng)超寫實虛擬人為例，所接商業(yè)廣告大多與時尚明星近似，包括奢侈品和美妝品牌等。

　　相比二次元虛擬偶像，超寫實虛擬人的視頻制作成本也上了一個臺階。“柳夜熙”團隊接受貝殼財經(jīng)記者采訪時表示，推出“柳夜熙”之前的半年多時間，研發(fā)成本、人員成本、技術(shù)成本等投入“遠超百萬”。

　　陳燕向貝殼財經(jīng)記者透露，為了覆蓋成本，公司內(nèi)部做了非常嚴(yán)格的產(chǎn)品規(guī)劃，在下場每一個產(chǎn)品之前，會做五六個步驟的內(nèi)部評估，包含每一個IP在什么場景使用它，企圖打造的一個IP是什么級別。“以‘翎’為例，我們會細(xì)化到將視頻拆解成15秒、1分到2分鐘，一個季度策劃一次大事件等，否則如果周更或者日更的話，根本就無法覆蓋成本。”

　　事實上，國內(nèi)較早亮相的寫實類虛擬人可以追溯至2018年5月，NExT Studios與Epic聯(lián)合推出的高保真數(shù)字虛擬人塞壬（Siren）。該項目研發(fā)過程中，可以看到虛擬人行業(yè)技術(shù)昂貴的一面。

　　騰訊互娛工程師David 曾在《虛擬數(shù)字人Siren的誕生》一文中用“艱難”一詞來形容塞壬項目，“電影畫面一幀動輒幾小時的渲染時間，相比于電影行業(yè)，我們所有的計算都必須在當(dāng)時發(fā)生。虛擬人的程序以60幀每秒運行，所有的計算都必須在16毫秒的時間段內(nèi)做完。”最終，來自四個國家的頂級團隊克服軟硬件等各方面帶來的技術(shù)瓶頸后，完成了這一項目。

　　目前大部分超寫實虛擬人項目仍然難以做到實時直播。“現(xiàn)在市面上能做到實時的（虛擬人）基本上都是風(fēng)格化的角色，寫實風(fēng)格的通常都是用離線CG流程做的視頻，有的只是拿虛幻引擎作為渲染器用，我們一直堅守在實時+寫實這條線上，因為我們的目標(biāo)就是將寫實數(shù)字人做到實時，落地在實時交互的場景。”NExT Studios新技術(shù)研發(fā)中心副總監(jiān)葛誠說。

　　隨著技術(shù)迭代，超寫實虛擬人的應(yīng)用場景將越來越廣泛。6月20日，新華社和騰訊聯(lián)合推出數(shù)字航天員、數(shù)字記者“小諍”，這名超寫實虛擬人將承擔(dān)起普通記者難以實現(xiàn)的載人航天工程、行星探測工程“現(xiàn)場報道”任務(wù)。葛誠告訴貝殼財經(jīng)記者，NExT數(shù)字人團隊一直維持在20個人以內(nèi)。

　　●變革

　　虛擬人+AI會成為元宇宙“引路人”嗎？

　　隨著技術(shù)發(fā)展，超寫實虛擬人、虛擬偶像甚至智能交互產(chǎn)品的界限已經(jīng)逐漸模糊，未來虛擬人領(lǐng)域能否實現(xiàn)技術(shù)上的“統(tǒng)一”，帶給市場很大想象空間。

　　騰訊互娛方面表示，在疫情這類“黑天鵝”事件下，人和人之間被隔離開，會越發(fā)地需要進行互動、連接，虛擬人和虛擬世界就不只是作為娛樂的場景，需要考慮人類之間的社會性、依賴性，數(shù)字人能夠發(fā)揮更大的社會價值。“小諍”除了數(shù)字航天員和數(shù)字記者身份外，未來也將會進行更多面向用戶、年輕人的互動。“小諍”被越來越多朋友所認(rèn)識、喜愛后，也可以成為代表主流價值觀的當(dāng)代年輕人“虛擬偶像”之一。

　　“實際上，相比虛擬人漂亮的外表，能夠跟用戶產(chǎn)生持續(xù)的交流更重要。”陳燕說，他的愿景是在守好已有業(yè)務(wù)線的情況下，追求與用戶交互以及虛擬IP的智能化和場景化，發(fā)展為一家“虛擬人生態(tài)”公司。

　　“目前，次世文化正在跟‘小冰’等頂尖AI公司合作，力圖拓展更多智能化的虛擬產(chǎn)品，也就是說虛擬人既是IP，但也會加入很多AI智能功能，來滿足各種細(xì)分場景的需求。”他說。

　　人物建模、實時渲染和語音識別、動作識別等技術(shù)發(fā)展，讓不少從業(yè)者看到了虛擬人未來的應(yīng)用前景。2021世界人工智能大會開幕式上，接連出現(xiàn)四個虛擬人與真人主持同臺出場——B站虛擬偶像“泠鳶”，百度的“小度”，小米的“小愛同學(xué)”和微軟的“小冰”。其中，后三位虛擬人均已有自己的應(yīng)用場景，比如用戶可以通過喊“小愛同學(xué)”在小愛音箱上實現(xiàn)點歌。

　　貝殼財經(jīng)記者看到，當(dāng)前不少虛擬人產(chǎn)品已經(jīng)在市面上進行推廣，如科大訊飛、相芯科技等公司相繼推出TO B的虛擬人產(chǎn)品。

　　有虛擬人產(chǎn)品銷售業(yè)務(wù)人員告訴貝殼財經(jīng)記者，使用其提供的成品虛擬新聞主播，費用一年為100萬元左右，虛擬主播可以根據(jù)輸入的文字內(nèi)容自動生成適配的語音和表情，從而把文字報道轉(zhuǎn)換為視頻播報。“如果定制自己形象的虛擬主播則需要幾百萬，因為我們需要對你們提供的模特進行動捕和算法分析。”

　　“很多人看虛擬人，只看到了表象的東西，但我一直覺得虛擬人只是一個載體，最終推動虛擬人發(fā)展的是人的需求。現(xiàn)實世界中，當(dāng)一個人身體存在缺陷，通過構(gòu)建自身的虛擬形象，可以在虛擬世界里重新選擇（自身形象）。通過AI技術(shù)，一個虛擬人IP也應(yīng)該跟人類建立起更穩(wěn)固的關(guān)系。”陳燕說。

　　京東集團副總裁梅濤接受貝殼財經(jīng)記者采訪時稱，虛擬數(shù)字人的AI技術(shù)可能會在未來產(chǎn)生顛覆性效果。“以京東自己的數(shù)字人為例，既有2D和3D卡通數(shù)字人，也有真人數(shù)字人。數(shù)字人涉及的技術(shù)非常廣，既包括視覺和語音識別，還有語音合成和對話、圖形學(xué)。未來我們希望數(shù)字人能夠真正完成一些任務(wù)，比如跟小孩聊天、陪伴老人、市民熱線、智能客服等，為此我們基于京東電商場景中智能客服的豐富實踐，來打造富有自己特色的數(shù)字人，希望未來一到兩年形成比較成熟的標(biāo)準(zhǔn)化服務(wù)。大家也可以看到，現(xiàn)在也有很多初創(chuàng)公司在做數(shù)字人，經(jīng)過幾年發(fā)展，可以說數(shù)字人技術(shù)和產(chǎn)品快要到一個爆發(fā)期。”

　　據(jù)了解，2018年SIGGRAPH Asia展臺上，“塞壬”曾經(jīng)展示過以AI驅(qū)動的樣片，但當(dāng)時AI只能做一輪對話。

　　“現(xiàn)在AI已經(jīng)可以實現(xiàn)多輪對話了，更加智能，AI驅(qū)動數(shù)字人，未來可期。虛實融合是未來大趨勢，數(shù)字人逐漸能和真實世界發(fā)生情感上的共鳴，就可以作為社會的一分子存在，想想我們小時候看的變形金剛、圣斗士、機器貓、葫蘆娃都是虛擬角色，也成為了影響我們那一代人的IP。隨著數(shù)字人蓬勃發(fā)展，可以預(yù)見未來會有更多和這個真實社會產(chǎn)生紐帶的虛擬角色。‘中之人’是目前數(shù)字人逃脫不開的話題，但是相信未來，AI在某些特定領(lǐng)域能更好地驅(qū)動數(shù)字人。”葛誠表示。

　　“虛擬偶像能直播，必須要有‘中之人’。超寫實虛擬人像人，不能直播‘沒有靈魂’。手機里的智能語音可以交互，但交互水平還太低。”劉文對貝殼財經(jīng)記者表示，如果把虛擬偶像、超寫實虛擬人和市場上已有的虛擬助手融合在一起，這可能就是虛擬人通向元宇宙的未來。

關(guān)鍵詞 : 元宇宙虛擬偶像