中國(guó)智能影像生產(chǎn)技術(shù):文娛全產(chǎn)業(yè)鏈基礎(chǔ)建設(shè)

隨著5G技術(shù)的大規(guī)模商用，高分辨率的視頻流量將呈指數(shù)級(jí)增長(zhǎng)。移動(dòng)視頻行業(yè)委員會(huì)預(yù)測(cè)顯示，至2028年5G流量的90%將來(lái)自視頻，增強(qiáng)型視頻（VR、AR、AGC）將是5G的第二大用例類型。

隨后，英特爾發(fā)布《5G娛樂經(jīng)濟(jì)報(bào)告》進(jìn)一步顯示，5G視頻內(nèi)容消費(fèi)加速，用戶月均流量使用量將從當(dāng)前的11.7GB增長(zhǎng)至84.8GB，2021-2028年傳媒和娛樂企業(yè)由此將受益新增營(yíng)收1400億美元，增強(qiáng)型視頻（VR、AR、AGC）服務(wù)的營(yíng)收潛力可達(dá)960億美元。

報(bào)告分析師指出，“5G+AI技術(shù)紅利”將驅(qū)動(dòng)視頻產(chǎn)業(yè)迎來(lái)增強(qiáng)型視頻（VR、AR、AGC）內(nèi)容快速發(fā)展，如何搭載5G順風(fēng)車，中國(guó)、日本、韓國(guó)等亞太地區(qū)的部分文娛企業(yè)已經(jīng)率先開始使用人工智能技術(shù)輔助視頻內(nèi)容生產(chǎn)，開始大規(guī)模用AI生產(chǎn)技術(shù)解決5G時(shí)代的內(nèi)容及圖像質(zhì)量。

中國(guó)智能影像生產(chǎn)技術(shù)：文娛全產(chǎn)業(yè)鏈基礎(chǔ)建設(shè)

較其他國(guó)家及地區(qū)，中國(guó)媒體及娛樂企業(yè)對(duì)全面智能視頻化保持熱情。大部分企業(yè)認(rèn)為，智能影像生產(chǎn)技術(shù)能切實(shí)可行的提高制作及分發(fā)效率，借助AI技術(shù)能夠?yàn)橛脩籼峁┝可矶ㄖ坪椭悄芡扑]的內(nèi)容，它改變的是內(nèi)容創(chuàng)作和分發(fā)的方式。包括《南方日?qǐng)?bào)》、騰訊、澎湃、芒果TV、愛奇藝、華視傳媒等在內(nèi)的傳媒和娛樂企業(yè)積極借助人工智能技術(shù)構(gòu)建自主可控平臺(tái)或提供優(yōu)質(zhì)視頻內(nèi)容產(chǎn)品。

目前，AI技術(shù)的應(yīng)用已經(jīng)貫穿整個(gè)文創(chuàng)產(chǎn)業(yè)鏈，包含劇本創(chuàng)作、選角、流量預(yù)測(cè)、審核、編碼、剪輯、運(yùn)營(yíng)、搜索、推薦、宣發(fā)、熱點(diǎn)預(yù)測(cè)、熱點(diǎn)提取、追星、廣告投放、在線交互等諸多環(huán)節(jié)，實(shí)現(xiàn)智能創(chuàng)作、智能生產(chǎn)、智能標(biāo)注、智能分發(fā)、智能播放、智能變現(xiàn)、智能客服等七大方面的充分應(yīng)用。

據(jù)Forrester發(fā)布的《2019-2020 Video AI技術(shù)預(yù)測(cè)》報(bào)告顯示，90%的中國(guó)視頻平臺(tái)正在借助專業(yè)的視頻識(shí)別技術(shù)以對(duì)視頻進(jìn)行數(shù)據(jù)結(jié)構(gòu)化，在視頻內(nèi)容原創(chuàng)、視頻營(yíng)銷、視頻結(jié)構(gòu)化商用、視頻大數(shù)據(jù)領(lǐng)域、機(jī)器人流程化等領(lǐng)域產(chǎn)生財(cái)務(wù)績(jī)效，通過(guò)自動(dòng)化影像加工輔助技術(shù)、生產(chǎn)技術(shù)為產(chǎn)業(yè)升級(jí)提供動(dòng)力。

在智能影像生產(chǎn)環(huán)節(jié)，國(guó)內(nèi)人工智能公司影譜科技的視頻內(nèi)容自動(dòng)化生產(chǎn)引擎—MAPE (Moviebook Auto-Production Engine)是一個(gè)人工智能平臺(tái)，利用視頻識(shí)別及視頻生產(chǎn)技術(shù)為文娛企業(yè)提供內(nèi)容生產(chǎn)平臺(tái)。

在商業(yè)化環(huán)節(jié)，國(guó)內(nèi)多個(gè)熱門作品都采用了基于人工智能的內(nèi)容生產(chǎn)技術(shù)，包括熱播的《我的師傅》、《巔峰之夜》、《我最愛的女人們》、《女兒們的熱愛》、《妻子的浪漫旅行》、《戀愛先生》、《楚喬傳》等，這些熱門節(jié)目的商業(yè)化技術(shù)實(shí)現(xiàn)與傳統(tǒng)方式不盡相同，通過(guò)采納影譜科技智能影像生產(chǎn)技術(shù)，讓品牌主的廣告畫面成為原視頻內(nèi)容的一個(gè)部分，更有甚者是把原本不存在的品牌主物品以“虛擬廣告道具”方式無(wú)違和感的植入視頻播放/用戶觀影過(guò)程中。

不僅如此，除視頻以外，圖、文、音、影等不同信息載體之間無(wú)縫轉(zhuǎn)換正成為智能傳媒的重要基礎(chǔ)設(shè)施。傳統(tǒng)的圖像、文字、音頻、視頻相互轉(zhuǎn)化，通常人工需要一周時(shí)間，平均花費(fèi)263美元，內(nèi)容失真率卻高達(dá)52%。而AI技術(shù)的加入，可以使信息介質(zhì)融合互換更快速、更低價(jià)、更有效，如前端內(nèi)容采寫可通過(guò)AI技術(shù)一鍵生成與之匹配的視頻、音頻等，改變內(nèi)容開發(fā)整個(gè)過(guò)程，從內(nèi)容創(chuàng)造、生成機(jī)制、影響力提前預(yù)測(cè)、觀察數(shù)據(jù)等方面。

雖然一些媒體和娛樂公司對(duì)AI的投入保持謹(jǐn)慎，但大多數(shù)專家預(yù)測(cè)中國(guó)的5G+人工智能發(fā)展速度較全球市場(chǎng)將更快一步。

日本智能影像生產(chǎn)技術(shù)：如何提升動(dòng)畫制作效率

顯然，日本動(dòng)畫產(chǎn)業(yè)是這次AI+5G視頻消費(fèi)升級(jí)的核心。動(dòng)畫產(chǎn)業(yè)市場(chǎng)規(guī)模超過(guò)2兆日元的日本，在人工智能技術(shù)與效能方面也進(jìn)行了具有個(gè)性化的探索，在動(dòng)畫預(yù)處理、動(dòng)畫動(dòng)態(tài)、動(dòng)畫合成等全產(chǎn)業(yè)上已形成深度應(yīng)用場(chǎng)景。

首先，AI生成工具提高繪畫產(chǎn)業(yè)鏈生產(chǎn)效率。

自動(dòng)上色AI 工具的成功商用，讓畫師的制作進(jìn)一步簡(jiǎn)化。近期，白泉社（發(fā)行漫畫期刊、漫畫等為主的會(huì)社）和博報(bào)堂（日本知名的廣告與傳播集團(tuán)）DY Digital 宣布開始使用 AI 技術(shù)來(lái)交付和銷售自動(dòng)著色的彩色漫畫。第一部彩色漫畫將在電子書店網(wǎng)站（如白泉社 e-net）發(fā)送。未來(lái)還將通過(guò)自動(dòng)對(duì)其他作品進(jìn)行著色來(lái)制作和分發(fā)彩色版本。

這是由日本科技企業(yè)Preferred Networks 研發(fā)的一款自動(dòng)上色工具“PaintsChainer”，利用深度學(xué)習(xí)的 AI（人工智能），代替人工進(jìn)行大量簡(jiǎn)單的上色線稿工作，用戶只需上傳一張黑白線稿，PaintsChainer 會(huì)通過(guò)神經(jīng)網(wǎng)絡(luò)算法自動(dòng)上色，生成一張彩色漫畫。

有了AI 的輔助之后，畫師只需要完成部分輪廓和剪影的設(shè)計(jì)，計(jì)算機(jī)就可以自動(dòng)生成細(xì)化的畫面，之后輸入黑白的線稿就可以涂畫大體的顏色，最后畫師只需要做一些細(xì)微的調(diào)整。這一生產(chǎn)方式的投入，成倍提高了新人的工作效率、每天作畫張數(shù)的增加便可帶來(lái)收入的提高。

除 Paintschainer 之外，另一項(xiàng)簡(jiǎn)化畫師工作流程的項(xiàng)目也在日本引起了較大的關(guān)注。Edgar Simo-Serra 團(tuán)隊(duì)開發(fā)出一種將鉛筆畫的粗略草圖轉(zhuǎn)化成線稿的 AI 工具。該模型框架基于完全卷積神經(jīng)網(wǎng)絡(luò)，當(dāng)輸入一個(gè)粗略的草圖圖像模型后，即可獲得一個(gè)干凈的簡(jiǎn)化線稿。

不僅是漫畫彩色化，并且能有助于解決目前日本動(dòng)畫制作現(xiàn)場(chǎng)的困境。最近上映的劇場(chǎng)版動(dòng)畫《FLCL Progressive》（《フリクリ プログレ》）采用Dwango公司旗下機(jī)械學(xué)技術(shù)研發(fā)部門“Dwango Media Village”開發(fā)的最新動(dòng)畫制作支持技術(shù)。

（Dwango Media Village研發(fā)AI技術(shù)擬人形象。圖左：時(shí)季ヶ原 埋，擔(dān)當(dāng)工程:中割り。圖右：時(shí)季ヶ原 寫，擔(dān)當(dāng)工程:原畫トレス）

該技術(shù)主要應(yīng)對(duì)動(dòng)畫制作過(guò)程中的“中割”（中割り）和“原畫臨描”（原畫トレス）兩大環(huán)節(jié)?！爸懈睢迸c“原畫臨描”在動(dòng)畫制作過(guò)程中屬于讓畫面“動(dòng)”起來(lái)的工作，往往需要大量的動(dòng)畫師花費(fèi)不少時(shí)間去一張一張完成，但技術(shù)含量相對(duì)于原畫等其他環(huán)節(jié)較低。事實(shí)上，“Dwango Media Village”即是通過(guò)計(jì)算機(jī)視覺識(shí)別及自動(dòng)生成技術(shù)將這一部分的勞動(dòng)量節(jié)省下來(lái)。

“電影制作過(guò)程中，雖然經(jīng)過(guò)AI生成的畫面，還需要作畫監(jiān)督進(jìn)行修正”，擔(dān)任《FLCL Progressive》第五話監(jiān)督的末澤慧就表示，“但AI給工作帶來(lái)的便利超過(guò)麻煩，隨著AI學(xué)會(huì)的越多，需要人工修繕的地方就會(huì)越來(lái)越少”。

其次，顯著減少動(dòng)畫制作企業(yè)成本，第二視頻產(chǎn)業(yè)在日本覺醒。

對(duì)于動(dòng)畫制作公司來(lái)說(shuō)，AI 的帶來(lái)的好處是顯而易見的，首先就是制作成本的降低。

近日，I.G port發(fā)布的最新財(cái)報(bào)顯示，在動(dòng)畫制作事業(yè)上，公司本期（2017.6.1-2018.2.28）損失為3.99億日元（去年同期為2.34億日元的損失）。主要是為了制作出讓觀眾滿意的高質(zhì)量動(dòng)畫，制作費(fèi)用持續(xù)增加。與之相似的還有龍之子動(dòng)畫工作室（NTV 旗下），2017財(cái)年虧損了5000萬(wàn)日元。目前一部動(dòng)畫的參與制作人員平均百余人，較日漸增加的人工費(fèi)用，將最底層工作交由計(jì)算機(jī)完成，是動(dòng)畫制作公司的最佳選擇。

其次，AI 也能緩解日本動(dòng)畫公司人手不足的情況。在這種局面下，早稻田大學(xué)科森島繁生研究室研發(fā)出了通過(guò)現(xiàn)實(shí)場(chǎng)景的照片自動(dòng)生成背景的CG技術(shù)。該技術(shù)旨在讓創(chuàng)作者能夠更加便利、輕松地使用和工作。生成一張背景僅需10秒。進(jìn)一步，除了靜止的畫面，讓運(yùn)動(dòng)的影像也自動(dòng)生成，效率大大提升。

自動(dòng)內(nèi)容生產(chǎn)技術(shù)（AGC）的引入將釋放大量輕創(chuàng)作勞動(dòng)，借助計(jì)算機(jī)視覺等AI技術(shù)減少動(dòng)畫制作時(shí)所需的人物力高消耗。

如前不久入圍威尼斯電影節(jié)、由Production I.G制作的《攻殼機(jī)動(dòng)隊(duì) 新劇場(chǎng)版Virtual Reality Diver》，通過(guò)AI視頻生成+VR技術(shù)帶來(lái)更新的動(dòng)畫觀賞體驗(yàn)。

早前，Pixiv推出過(guò)利用AI上色的功能。今年7月，P站又推一款“黑科技” VRoid Studio，讓不懂三維建模技術(shù)的普通人也能輕松創(chuàng)作出自己的3D角色。

另外，日本虛擬偶像和動(dòng)畫的關(guān)系也越走越近，已有日本公司開始籌劃使用VR+VTuber進(jìn)行自動(dòng)化動(dòng)畫生產(chǎn)（AGC）的制作方式。今年9月，日本VR技術(shù)公司XVI（株式會(huì)社エクシヴィ）和影像音樂集團(tuán)愛貝克斯（Avex）共同成立的AniCast Lab.正是希望通過(guò)VTuber+VR的應(yīng)用，將動(dòng)畫制作的周期縮短，減少人力勞動(dòng)，以及節(jié)約成本。AniCast Lab.創(chuàng)造一種全新的動(dòng)畫制作方式，采用智能影像生產(chǎn)技術(shù)令普通人也能制作自己的動(dòng)畫并發(fā)布分享。

隨著5G到來(lái)，智能影像技術(shù)正讓日本動(dòng)漫產(chǎn)業(yè)走向全數(shù)字化的可能，日本動(dòng)畫公司的抉擇，也將影響到海外同行能否借機(jī)實(shí)現(xiàn)“變道超車”。

5G+AI視頻娛樂已經(jīng)不僅僅是一種技術(shù)想象，而是真實(shí)走進(jìn)了一個(gè)產(chǎn)業(yè)周期中的快速上行通道。對(duì)于必須兼顧視頻圖像和內(nèi)容質(zhì)量的文娛創(chuàng)作企業(yè)而言，展開對(duì)全自動(dòng)化視頻生產(chǎn)技術(shù)的應(yīng)用研究成為一種微妙的供給平衡手段。事實(shí)上，一些先行企業(yè)將取得“技術(shù)先發(fā)優(yōu)勢(shì)”作為最大的戰(zhàn)略目標(biāo)。