朱元璋到底長(zhǎng)什么樣？其實(shí)這個(gè)問(wèn)題一直都有爭(zhēng)議。很多人認(rèn)為，故宮收藏的官方畫(huà)像似乎更有說(shuō)服力，因?yàn)檫@兩幅畫(huà)的相貌相似程度和隨年齡的演變不容易造假。 雖然畫(huà)像可以大體還原古人的長(zhǎng)相，但總不及照片來(lái)得寫(xiě)實(shí)、清晰。最近，國(guó)內(nèi)外似乎掀起了一場(chǎng)用 AI 還原古人的潮流，先是有 設(shè)計(jì)師用 GAN 和 PS 復(fù)原了他眼中的古羅馬皇帝群像，后有 B 站 up 主「大谷」用 AI 還原中國(guó)皇帝朱元璋，還是能動(dòng)的那種：
評(píng)論區(qū)有人說(shuō)：「想看秦始皇，以后轉(zhuǎn)賬的時(shí)候好對(duì)比一下?！?/section> 前面說(shuō)到課本，還記得你當(dāng)年涂過(guò)的杜甫嗎？作為課本涂鴉界最受歡迎的人物，杜甫也在新一期的視頻中出鏡了，而且還唱上了奧特曼主題曲《奇跡再現(xiàn)》，有望成為 B 站新一輪鬼畜素材。
大谷在視頻中簡(jiǎn)單介紹了這些成果和他所用的方法（友情提示：不關(guān)彈幕可能看不到作品）。或許，我們離哈利波特的魔法世界真的不遠(yuǎn)了。修復(fù)技術(shù)細(xì)節(jié) 大谷在視頻中介紹稱，影片的 AI 工作流來(lái)自海外博主 Denis Shiryaev 的教程，Denis 曾在 AI Stuff 系列中修復(fù)了很多西方經(jīng)典油畫(huà)人物，我們可以將其稱為「神經(jīng)網(wǎng)絡(luò)的藝術(shù)」。 比如神秘的蒙娜麗莎：
Denis Shiryaev 的 youtube 主頁(yè)：https://www./user/shirman88 Denis 在這一視頻中所使用的修復(fù)技術(shù)有五種，分別是 Face-Image-Motion-Model、StyleGAN2-Face-Modificator、DAIN、ESRGAN 和 Artbreeder。 Face-Image-Motion-Model 項(xiàng)目地址：https://github.com/tg-bomze/Face-Image-Motion-Model 該模型基于「First Order Motion」這一核心模型，方法來(lái)源于 NeurIPS 2019 論文《First Order Motion Model for Image Animation》。機(jī)器之心此前介紹過(guò)的視頻會(huì)議換臉軟件「Avatarify」，也是基于這一技術(shù)實(shí)現(xiàn)人臉處理的。
論文鏈接：https://papers./paper/8935-first-order-motion-model-for-image-animation.pdf 「First Order Motion」框架由兩個(gè)主要模塊組成：「運(yùn)動(dòng)估計(jì)模塊」和「圖像生成模塊」。運(yùn)動(dòng)估計(jì)模塊的目的在于預(yù)測(cè)密集的運(yùn)動(dòng)場(chǎng)，此處假設(shè)存在一個(gè)抽象的參考坐標(biāo)，并預(yù)估存在「from reference to source」和「from reference to driving」兩種轉(zhuǎn)換。因此可以獨(dú)立處理源幀和驅(qū)動(dòng)幀。做這樣的處理是因?yàn)槟Ｐ驮跍y(cè)試時(shí)會(huì)接收從不同視頻中采樣的源圖像幀和驅(qū)動(dòng)幀的組，從視覺(jué)上來(lái)說(shuō)可能會(huì)很不同。
「First Order Motion」方法概述圖。 StyleGAN2-Face-Modificator
