
宋徽宗畫像還原前后對比

人工智能修復后的富察皇后形象
近日,“人工智能還原的宋代皇帝”喜提熱搜,博主@大谷Spitzer借助人工智能技術修復出一段3分多鐘的宋代皇帝視頻,使得宋代皇帝的紙質版畫像動態還原,皇帝們甚至還有些調皮,時而眨眼睛,甚至想開口說話。
隨后他又發布了8位明清皇帝的還原視頻,引來各位皇帝的現代粉絲團打卡感嘆,“皇帝們的真實顏值一代比一代高”“看到古畫變成了動畫,恍惚有一種穿越感”。而更多網友留言求還原古代四大美女和各代皇后等人,在美國做游戲開發工作的大谷接受揚子晚報/紫牛新聞記者采訪時表示,后續有這方面計劃。
網友評
“看著皇帝們‘動’起來,恍惚有一種穿越感”
大谷發布的人工智能還原的宋代皇帝和明清皇帝的視頻,除了呈現出神奇的動態皇帝外,還科普了不少文史知識點。
比如“宋代皇帝”這個視頻里有宋太祖、宋太宗、宋哲宗和宋徽宗。關于宋太祖,其關鍵詞是“杯酒釋兵權”,從古代肖像中還原出來的宋太祖的鼻子、眼睛和嘴唇都會動,還會點頭。
視頻還列舉了宋太祖的多位影視扮演者,而AI在匹配尋找中發現,最相似的四位演員分別是陳建斌(40.42%)、林明哲(21.43%)、林佑星(17.94%)、陳希光(15.86%)。視頻還配了一段陳建斌飾演宋太祖時電視劇里的臺詞:“果然,不假”。網友笑說,真是相當應景。
宋哲宗在經過人工智能還原后,被認為是“最帥的宋朝皇帝”。他10歲即位,但英年早逝,是北宋壽命最短的皇帝。與他相關的影視資料幾乎沒有,但是AI在匹配多位明星資料后認為,孫亦沫、陳漢典、謝霆鋒和張涵予等四位演員與他的相似度最高。
另外,大谷還用人工智能還原了宋徽宗,一位被龍椅耽誤的藝術家,北宋知名畫家、書法家、詩人和收藏家,擅長古琴、蹴鞠等,自創“瘦金書”字體。
網友們紛紛表示,視頻根據博物館里的古畫還原出動畫的效果,看著一位位皇帝“鮮活”地動起來,恍惚有一種穿越感。還有網友發現,宋朝皇帝的顏值是一代比一代高,可惜大方臉和大勾鼻子還是遺傳了下來。
博主說
宋朝皇帝畫像圖很有特點,最適合修復
就在大量網友留言要看老朱家的皇帝后,大谷第二天發出他早就做好的“人工智能還原的明清皇帝”視頻,包括了朱棣(永樂帝)、朱高熾、朱祁鎮、朱由檢(崇禎帝)、康熙、雍正、乾隆、光緒以及富察氏孝賢純皇后。
不少網友表示,老朱家這幾位果然很富態,簡直是憨厚,視頻里為朱高熾配的關鍵詞是:“心寬體胖,是個走路都需要兩個太監攙扶的大胖子,熱愛南京,還想遷都回南京,當了29年太子,在位僅十個月。”另外,有網友說,朱祁鎮一看就是一個很“佛”的人。
大家也發現,清朝皇帝一般都很高瘦,臉頰也都小小的。乾隆皇帝一生摯愛的富察皇后不愧是“白月光”,修復出來的長相不僅美麗而且溫柔。大谷告訴記者,此前用人工智能修復100年前的影片以及兵馬俑時就有很多網友粉絲留言說,他們想看古代皇帝的樣子,甚至“大禹治水”“夸父逐日”“盤古開天”等神話人物的樣子,“我想到了先通過人工智能臉部生成技術加以還原,再加上動態效果,相結合后就有了這兩期的視頻。”
因為皇帝們的現存資料會相對多一些,大都有當時的宮廷繪畫作品,所以大谷先從這個題材著手。他告訴記者,前期的準備工作就是去找比較清晰的皇帝畫像和藝術作品,在尋找中他發現,宋朝皇帝的人工智能復原最可行。
“我從一些館藏品里看到,宋朝皇帝的畫像圖很有特點,有固定格式。不僅有全身的,還配有一個局部放大的頭像,然后旁邊有文字批注。”大谷發現,頭部大特寫非常符合人工智能修復的要求,用AI從這些作品中提取人臉,再進行人工智能還原。
“另外,因為宮廷劇是重要的影視題材,所以我也想到了修復好各位‘皇帝’后,再找出曾經影視劇里的扮演者,智能比對他們的相似度,會相當有趣。”于是大谷的第二個準備工作,就是查每一位皇帝在影視資料中都由哪些演員扮演過。這個工作量挺大,影視作品的時間跨度也長,所以很費時間。
費工夫
胡須等需手動補上,動態生成凝重感是很難的
聽大谷介紹整個過程,似乎不怎么難,只是比較費工夫,但大谷表示,其實還原過程里他用到了很多工具,甚至用了不少繪畫技法。
大谷告訴記者,從古畫里人工智能還原后生成出來的結果,如果直接放到視頻里,效果并不好,“我需要用手繪的技能來做一些融合,這時候就用上了我的繪畫技法,我把人工智能生成的人物臉部,貼到原版的皇帝畫像當中,再給畫的邊緣做些許模糊,這樣寫實的部分和手繪的部分能夠比較完整地融合,看起來就有了整體感。”
另外,人工智能生成臉部后,有些地方也需要補色、補形狀,比如有些明代皇帝是有胡須的,就一小撮,在嘴的下邊,這種在人工智能生成當中,是很容易被漏掉的,就需要手工繪制上去。
“你們也看到了,這些皇帝們的面部是有表情的,是動態的,嘴巴和眼睛都會動,這個底版其實來自動態的我本人。”大谷笑說,這是一大難點,叫動態生成。
他用攝像頭錄了自己的動態影像,然后把動態影像轉到生成的寫實人臉上,“這一步的失敗率其實很高,我在其中一個視頻的結尾放了多個NG鏡頭,對比一下就會發現,如果尺度把握不好,會失真和夸張,會變成不嚴肅和搞笑影片的效果,這不是我需要的效果,我希望盡量還原,有那種歷史的凝重感。”動態生成這一步,大谷經過了反反復復的測試。
值得一提的是,各位皇帝與扮演明星的匹配,對網友來說,很有親切感。大谷在這方面使用到了中科院研發的AI面部識別開源項目seetaface,并參照了知乎上一位大佬的教程。大谷先制作出一個本地小軟件,然后把演員和生成皇帝的人臉數據等導進去,比對后輸出反映相似度的百分比數據。
很欣慰
對科普挺有作用,大家在交流中愛上了歷史
皇帝們的人工智能還原視頻,得到了網友們非常熱烈的反響,也讓大谷收獲了非常多的感動,“很多網友都愛看書,他們對這些皇帝的歷史資料,甚至性格特征都很熟。甚至有網友說,如果宋哲宗沒有英年早逝,可能西夏會被他滅掉,中國歷史有可能發生改變。”
而且最令大谷吃驚的是,這些皇帝在今天都仍有粉絲團,比如宋徽宗就有一個“藝術粉絲團”,因為他本身算是一個大藝術家,很多粉絲喜歡他的作品,留言里面很多人在聊他的作品。而他發布的明清皇帝視頻,因為有張國立、唐國強等演員,而且明清皇帝本來就很有知名度,所以大家的共鳴和互動就更多。
“我發現,這樣的修復對科普還挺有作用。”令大谷欣慰的是,很多網友在這種娛樂性很強的交流中學到了歷史知識。“相當于給大家打開了一扇窗戶,可能100個網友中會有1個人借此對歷史產生了興趣,會去特地查看了解人物背后的故事,這是一個好的開端,我也起到了拋磚引玉的作用。”
面對網友們在評論里點名的其他人物修復,比如古代四大美女、歷代皇后等歷史人物,大谷說,他都會記錄下來,未來有機會將嘗試制作。
揚子晚報/紫牛新聞記者 孔小平
(責任編輯:梁艷)