宋徽宗畫像還原前后對(duì)比
人工智能修復(fù)后的富察皇后形象
近日,“人工智能還原的宋代皇帝”喜提熱搜,博主@大谷Spitzer借助人工智能技術(shù)修復(fù)出一段3分多鐘的宋代皇帝視頻,使得宋代皇帝的紙質(zhì)版畫像動(dòng)態(tài)還原,皇帝們甚至還有些調(diào)皮,時(shí)而眨眼睛,甚至想開口說話。
隨后他又發(fā)布了8位明清皇帝的還原視頻,引來各位皇帝的現(xiàn)代粉絲團(tuán)打卡感嘆,“皇帝們的真實(shí)顏值一代比一代高”“看到古畫變成了動(dòng)畫,恍惚有一種穿越感”。而更多網(wǎng)友留言求還原古代四大美女和各代皇后等人,在美國做游戲開發(fā)工作的大谷接受揚(yáng)子晚報(bào)/紫牛新聞?dòng)浾卟稍L時(shí)表示,后續(xù)有這方面計(jì)劃。
網(wǎng)友評(píng)
“看著皇帝們‘動(dòng)’起來,恍惚有一種穿越感”
大谷發(fā)布的人工智能還原的宋代皇帝和明清皇帝的視頻,除了呈現(xiàn)出神奇的動(dòng)態(tài)皇帝外,還科普了不少文史知識(shí)點(diǎn)。
比如“宋代皇帝”這個(gè)視頻里有宋太祖、宋太宗、宋哲宗和宋徽宗。關(guān)于宋太祖,其關(guān)鍵詞是“杯酒釋兵權(quán)”,從古代肖像中還原出來的宋太祖的鼻子、眼睛和嘴唇都會(huì)動(dòng),還會(huì)點(diǎn)頭。
視頻還列舉了宋太祖的多位影視扮演者,而AI在匹配尋找中發(fā)現(xiàn),最相似的四位演員分別是陳建斌(40.42%)、林明哲(21.43%)、林佑星(17.94%)、陳希光(15.86%)。視頻還配了一段陳建斌飾演宋太祖時(shí)電視劇里的臺(tái)詞:“果然,不假”。網(wǎng)友笑說,真是相當(dāng)應(yīng)景。
宋哲宗在經(jīng)過人工智能還原后,被認(rèn)為是“最帥的宋朝皇帝”。他10歲即位,但英年早逝,是北宋壽命最短的皇帝。與他相關(guān)的影視資料幾乎沒有,但是AI在匹配多位明星資料后認(rèn)為,孫亦沫、陳漢典、謝霆鋒和張涵予等四位演員與他的相似度最高。
另外,大谷還用人工智能還原了宋徽宗,一位被龍椅耽誤的藝術(shù)家,北宋知名畫家、書法家、詩人和收藏家,擅長古琴、蹴鞠等,自創(chuàng)“瘦金書”字體。
網(wǎng)友們紛紛表示,視頻根據(jù)博物館里的古畫還原出動(dòng)畫的效果,看著一位位皇帝“鮮活”地動(dòng)起來,恍惚有一種穿越感。還有網(wǎng)友發(fā)現(xiàn),宋朝皇帝的顏值是一代比一代高,可惜大方臉和大勾鼻子還是遺傳了下來。
博主說
宋朝皇帝畫像圖很有特點(diǎn),最適合修復(fù)
就在大量網(wǎng)友留言要看老朱家的皇帝后,大谷第二天發(fā)出他早就做好的“人工智能還原的明清皇帝”視頻,包括了朱棣(永樂帝)、朱高熾、朱祁鎮(zhèn)、朱由檢(崇禎帝)、康熙、雍正、乾隆、光緒以及富察氏孝賢純皇后。
不少網(wǎng)友表示,老朱家這幾位果然很富態(tài),簡直是憨厚,視頻里為朱高熾配的關(guān)鍵詞是:“心寬體胖,是個(gè)走路都需要兩個(gè)太監(jiān)攙扶的大胖子,熱愛南京,還想遷都回南京,當(dāng)了29年太子,在位僅十個(gè)月?!绷硗?,有網(wǎng)友說,朱祁鎮(zhèn)一看就是一個(gè)很“佛”的人。
大家也發(fā)現(xiàn),清朝皇帝一般都很高瘦,臉頰也都小小的。乾隆皇帝一生摯愛的富察皇后不愧是“白月光”,修復(fù)出來的長相不僅美麗而且溫柔。大谷告訴記者,此前用人工智能修復(fù)100年前的影片以及兵馬俑時(shí)就有很多網(wǎng)友粉絲留言說,他們想看古代皇帝的樣子,甚至“大禹治水”“夸父逐日”“盤古開天”等神話人物的樣子,“我想到了先通過人工智能臉部生成技術(shù)加以還原,再加上動(dòng)態(tài)效果,相結(jié)合后就有了這兩期的視頻。”
因?yàn)榛实蹅兊默F(xiàn)存資料會(huì)相對(duì)多一些,大都有當(dāng)時(shí)的宮廷繪畫作品,所以大谷先從這個(gè)題材著手。他告訴記者,前期的準(zhǔn)備工作就是去找比較清晰的皇帝畫像和藝術(shù)作品,在尋找中他發(fā)現(xiàn),宋朝皇帝的人工智能復(fù)原最可行。
“我從一些館藏品里看到,宋朝皇帝的畫像圖很有特點(diǎn),有固定格式。不僅有全身的,還配有一個(gè)局部放大的頭像,然后旁邊有文字批注。”大谷發(fā)現(xiàn),頭部大特寫非常符合人工智能修復(fù)的要求,用AI從這些作品中提取人臉,再進(jìn)行人工智能還原。
“另外,因?yàn)閷m廷劇是重要的影視題材,所以我也想到了修復(fù)好各位‘皇帝’后,再找出曾經(jīng)影視劇里的扮演者,智能比對(duì)他們的相似度,會(huì)相當(dāng)有趣?!庇谑谴蠊鹊牡诙€(gè)準(zhǔn)備工作,就是查每一位皇帝在影視資料中都由哪些演員扮演過。這個(gè)工作量挺大,影視作品的時(shí)間跨度也長,所以很費(fèi)時(shí)間。
費(fèi)工夫
胡須等需手動(dòng)補(bǔ)上,動(dòng)態(tài)生成凝重感是很難的
聽大谷介紹整個(gè)過程,似乎不怎么難,只是比較費(fèi)工夫,但大谷表示,其實(shí)還原過程里他用到了很多工具,甚至用了不少繪畫技法。
大谷告訴記者,從古畫里人工智能還原后生成出來的結(jié)果,如果直接放到視頻里,效果并不好,“我需要用手繪的技能來做一些融合,這時(shí)候就用上了我的繪畫技法,我把人工智能生成的人物臉部,貼到原版的皇帝畫像當(dāng)中,再給畫的邊緣做些許模糊,這樣寫實(shí)的部分和手繪的部分能夠比較完整地融合,看起來就有了整體感?!?/span>
另外,人工智能生成臉部后,有些地方也需要補(bǔ)色、補(bǔ)形狀,比如有些明代皇帝是有胡須的,就一小撮,在嘴的下邊,這種在人工智能生成當(dāng)中,是很容易被漏掉的,就需要手工繪制上去。
“你們也看到了,這些皇帝們的面部是有表情的,是動(dòng)態(tài)的,嘴巴和眼睛都會(huì)動(dòng),這個(gè)底版其實(shí)來自動(dòng)態(tài)的我本人?!贝蠊刃φf,這是一大難點(diǎn),叫動(dòng)態(tài)生成。
他用攝像頭錄了自己的動(dòng)態(tài)影像,然后把動(dòng)態(tài)影像轉(zhuǎn)到生成的寫實(shí)人臉上,“這一步的失敗率其實(shí)很高,我在其中一個(gè)視頻的結(jié)尾放了多個(gè)NG鏡頭,對(duì)比一下就會(huì)發(fā)現(xiàn),如果尺度把握不好,會(huì)失真和夸張,會(huì)變成不嚴(yán)肅和搞笑影片的效果,這不是我需要的效果,我希望盡量還原,有那種歷史的凝重感。”動(dòng)態(tài)生成這一步,大谷經(jīng)過了反反復(fù)復(fù)的測試。
值得一提的是,各位皇帝與扮演明星的匹配,對(duì)網(wǎng)友來說,很有親切感。大谷在這方面使用到了中科院研發(fā)的AI面部識(shí)別開源項(xiàng)目seetaface,并參照了知乎上一位大佬的教程。大谷先制作出一個(gè)本地小軟件,然后把演員和生成皇帝的人臉數(shù)據(jù)等導(dǎo)進(jìn)去,比對(duì)后輸出反映相似度的百分比數(shù)據(jù)。
很欣慰
對(duì)科普挺有作用,大家在交流中愛上了歷史
皇帝們的人工智能還原視頻,得到了網(wǎng)友們非常熱烈的反響,也讓大谷收獲了非常多的感動(dòng),“很多網(wǎng)友都愛看書,他們對(duì)這些皇帝的歷史資料,甚至性格特征都很熟。甚至有網(wǎng)友說,如果宋哲宗沒有英年早逝,可能西夏會(huì)被他滅掉,中國歷史有可能發(fā)生改變?!?/span>
而且最令大谷吃驚的是,這些皇帝在今天都仍有粉絲團(tuán),比如宋徽宗就有一個(gè)“藝術(shù)粉絲團(tuán)”,因?yàn)樗旧硭闶且粋€(gè)大藝術(shù)家,很多粉絲喜歡他的作品,留言里面很多人在聊他的作品。而他發(fā)布的明清皇帝視頻,因?yàn)橛袕垏?、唐國?qiáng)等演員,而且明清皇帝本來就很有知名度,所以大家的共鳴和互動(dòng)就更多。
“我發(fā)現(xiàn),這樣的修復(fù)對(duì)科普還挺有作用?!绷畲蠊刃牢康氖?,很多網(wǎng)友在這種娛樂性很強(qiáng)的交流中學(xué)到了歷史知識(shí)?!跋喈?dāng)于給大家打開了一扇窗戶,可能100個(gè)網(wǎng)友中會(huì)有1個(gè)人借此對(duì)歷史產(chǎn)生了興趣,會(huì)去特地查看了解人物背后的故事,這是一個(gè)好的開端,我也起到了拋磚引玉的作用?!?/span>
面對(duì)網(wǎng)友們?cè)谠u(píng)論里點(diǎn)名的其他人物修復(fù),比如古代四大美女、歷代皇后等歷史人物,大谷說,他都會(huì)記錄下來,未來有機(jī)會(huì)將嘗試制作。
揚(yáng)子晚報(bào)/紫牛新聞?dòng)浾?孔小平
(責(zé)任編輯:梁艷)