他用AI修復(fù)技術(shù)讓李大釗陳延年們露出微笑，怎么做到的？ _他用

6月30日，建黨一百周年紀(jì)念日的前夕，一條消息沖上微博熱搜第一——AI修復(fù)讓李大釗陳延年們露出微笑。在這個視頻片段里，李大釗、陳延年、向警予、董存瑞……這些為黨的事業(yè)犧牲的革命先烈露出笑容，讓網(wǎng)友們感慨不已。

文章插圖

通過AI技術(shù)，讓革命先輩們從史料中走出來，和觀眾進(jìn)行一場穿越時空的微笑示意，這個過程是怎么實現(xiàn)的？這段影像的創(chuàng)作背后有怎樣的故事？除了革命先烈，AI修復(fù)技術(shù)還可以讓我們看到哪些歷史？帶著這些問題，南都采訪人員采訪了這段AI修復(fù)革命先烈影像的創(chuàng)作者胡文谷（B站賬號：大谷的游戲創(chuàng)作小屋）。

胡文谷是一名獨立藝術(shù)家、游戲制作人，他從小學(xué)習(xí)鋼琴，又會畫畫，笑稱自己是“程序員里最會畫畫的作曲家” 。去年5月，胡文谷在社交媒體上發(fā)布了“用人工智能恢復(fù)一百年前的北京影像”的視頻，在技術(shù)的幫助下，模糊的黑白影像有了色彩，變得清晰生動，視頻在微博和B站上大火，南都曾對胡文谷做過專訪《對話“AI復(fù)原百年前北京影像”作者：看到上萬轉(zhuǎn)發(fā)以為電腦中毒》。

此后，胡文谷完成了一系列對珍貴歷史影像的修復(fù)，有1919年北平五四運動的場景、1929年上海女性的時裝秀，也有1924年李大釗在莫斯科劇院里慷慨激昂的演講、1930年梅蘭芳帶著昆曲《刺虎》在海外演出的顧盼生姿，他和央視合作修復(fù)了1958年中國最早的電視節(jié)目影像，此次，在建黨百年之際，他和人民日報合作修復(fù)了這一組革命先輩的照片。

這些修復(fù)得益于來自全世界的人工智能科研團(tuán)隊研發(fā)的開源項目。胡文谷認(rèn)為，每個人都可以通過學(xué)習(xí)人工智能項目，成為一個創(chuàng)作者、藝術(shù)家。他也在網(wǎng)上和網(wǎng)友分享創(chuàng)作的過程，他希望有更多的人可以使用AI修復(fù)技術(shù)來進(jìn)行創(chuàng)作，打撈起龐雜的歷史影像資料，讓人們看見歷史。

以下是南都采訪人員與胡文谷的對話。

與先烈有”穿越時空的1 對話””

南都：#AI修復(fù)讓李大釗陳延年們露出微笑#這個話題昨晚沖上微博熱搜第一，作為創(chuàng)作者，你當(dāng)時是什么感受？

胡文谷：看到熱搜的時候還是非常震撼的，感謝大家的喜歡，我也很高興能夠跟網(wǎng)友們一起分享我做的這段修復(fù) 。

南都：你是怎么想到在建黨100周年紀(jì)念日做這件事情的？

胡文谷：事實上我一直在做中華文化的一些老影片、老記錄的修復(fù)工作，包括上色或者肖像畫像的還原，我希望能夠把過去的這些老舊的黑白影像，通過技術(shù)進(jìn)行修復(fù)和還原，讓大家能更好地感受到那段歷史和故事。

剛好這次人民日報為建黨百年做《百年風(fēng)華》的影片，邀請我參與影片中先烈肖像的修復(fù)工作，也就是大家在熱搜上看到的那個片段，很有幸能參與到這項工作中。

南都：可以簡單介紹一下怎么用AI還原先烈肖像嗎？困難的地方在哪里？

胡文谷：因為很多先烈犧牲時都比較年輕，留存的照片也較為模糊，我會先用AI臉部重建的技術(shù)把肖像畫像來做一些重建，然后根據(jù)史料做一些手繪的精修，最后再用AI做一個增強，這里用到專門增強臉部細(xì)節(jié)的技術(shù)，可以讓皮膚質(zhì)感更加真實。

整個過程中對史料的考據(jù)是比較難的，由于年代久遠(yuǎn)，一些人物的資料比較難找。我參考了一些革命先烈其他角度的老照片，以及他們后人的照片，來做一些精修，盡可能地還原他們真實的樣子。

文章插圖

南都：這次在影片中對革命先烈的肖像做了一個微笑的設(shè)計，你當(dāng)時是怎么想的？

胡文谷：因為我想要肖像在影片中有動態(tài)呈現(xiàn)，在做動態(tài)的過程中要考慮怎么把他們的表情做好，這是比較難的。我就想到了微笑，但是又不能特別夸張，要調(diào)整到一個合適的角度。

另外，其實觀眾在看這段影像的時候，會感到這些先烈好像在跟你對視，這個也是特別設(shè)計過的。我希望觀眾在影片中和先烈有“穿越時空的對話”，代入感更強，有更深的感受。

“每一次修復(fù)都是重新了解歷史的過程”

南都：除了這次的肖像修復(fù)外，你之前在社交媒體上發(fā)過很多AI修復(fù)影片的內(nèi)容，比如一百年前的北京城、李大釗的演講、梅蘭芳的演出等。把模糊的黑白影像變成很自然的彩色影像，是怎么做到的？

胡文谷：AI影像修復(fù)主要有三個部分：補幀、上色和提升分辨率，都是用一系列不同的人工智能來完成的，現(xiàn)在有很多開源項目可以實現(xiàn)這些功能。

首先是補幀，以前的黑白老電影的幀數(shù)都比較低，里面人物走路就和快放一樣，連貫性不好，看著會有點滑稽。我們想把這些影像拉到正常的時間流速當(dāng)中，就要補充一些幀數(shù)，這些新加的幀的畫面通過人工智能來補足。這樣影像看起來就自然很多。

第二步是上色。我一般會用到兩三個不同的人工智能技術(shù)來做上色工作，一種是AI自動上色，比如植物是綠色的，天空是藍(lán)色的，這些AI可以自己完成。但這是遠(yuǎn)遠(yuǎn)不夠的，像歷史影像中衣服、建筑的顏色，AI無法判斷，這時候就需要考據(jù)史料，根據(jù)史料，我自己繪制一些參考導(dǎo)入，再讓AI去生成，盡可能準(zhǔn)確地還原歷史影像的顏色。

最后再通過一個提升分辨率的AI技術(shù)，讓畫面更加清晰。

文章插圖

1924年李大釗演講影像修復(fù)前后對比

南都：所以做AI修復(fù)，歷史方面的研究是非常重要的？

胡文谷：對。每一次修復(fù)都是重新了解歷史的過程，我會在修復(fù)之前去找各種資料，查資料往往比技術(shù)修復(fù)需要更大的精力。比如梅蘭芳的影像修復(fù)，大約一周就制作完成，但前期查資料耗時一個月。我要去找各種相關(guān)的資料，包括去問戲曲演員，顏色、花紋應(yīng)該是什么樣子的，只有這些工作做得足夠扎實，才能盡可能地還原歷史。

這個過程中也會了解很多人物背后的故事，對一段歷史影像的社會背景和其中涉及到的人物都有更深的認(rèn)識。而且經(jīng)常有意外收獲，比如梅蘭芳的影像中，我們就發(fā)現(xiàn)開場的主持人是當(dāng)時好萊塢的一個華裔女演員，很驚訝。

包括這次革命先烈們的修復(fù)，我在了解他們的故事時候也感到非常震撼。在當(dāng)時中國那樣一個積貧積弱、百廢待興的狀態(tài)下，帶領(lǐng)中國走到現(xiàn)在是非常不容易的。

文章插圖

梅蘭芳1930年演出影像（修復(fù)前）

文章插圖

梅蘭芳1930年演出影像（修復(fù)后）

南都：最近你做的梅蘭芳的修復(fù)效果非常驚艷，這個和之前的修復(fù)有什么不同？

胡文谷：我很久之前就想修復(fù)梅蘭芳的影像了，但之前一直找不到合適的技術(shù) 。之前的人工智能項目以自動上色為主，在給城市影像上色時效果還不錯。但是它不太適合昆曲、京劇的上色，因為戲劇服裝有很多固定的花紋、樣式，妝容也很特別，大多數(shù)人工智能上色項目在訓(xùn)練時并沒有相關(guān)的數(shù)據(jù)庫，所以效果不好。

后來我發(fā)現(xiàn)，我們國內(nèi)阿里的團(tuán)隊出了一個開源項目GPEN，它可以專門提升臉部細(xì)節(jié)，而且對亞洲人臉還原更好。這次就是用到這個國人自己研發(fā)的項目，讓我們看到梅先生年輕時的樣子，效果非常好。

“五分鐘的彼岸”

南都：你最開始是怎么想到用AI做歷史影像的修復(fù)呢？

胡文谷：我本來是用AI做游戲開發(fā)，后來發(fā)現(xiàn)AI也可以運用到藝術(shù)創(chuàng)作和社會公益中。我就在B站和微博上做了一些分享，向網(wǎng)友介紹一些AI給影片上色的開源項目的進(jìn)展。因為當(dāng)時在國外已經(jīng)有很多網(wǎng)友在做歐美影片的修復(fù)，國內(nèi)這方面比較空白，我就試著開始做了。

網(wǎng)友的反饋都非常好，他們會給我補充一些我不知道的歷史知識。比如有一次我在加拿大的一個資料館里找到一段關(guān)于中國的黑白影像，做了AI上色修復(fù)，后來網(wǎng)友們通過一些建筑細(xì)節(jié)、士兵的服裝等判斷出這是一百多年前的濟(jì)南城。整個過程就像在線探案考古，非常有趣，也很有意義。

這是我堅持做下來的一個原因。很多網(wǎng)友對歷史影像有熱情，比如他們會告訴我，很想看一些京劇、昆曲名家的影像修復(fù) 。

南都：做歷史影像修復(fù)最大的感受是什么？

胡文谷：我自己會把修復(fù)定義成“五分鐘的彼岸”，希望在紛繁復(fù)雜的現(xiàn)代社會當(dāng)中，我們能花五分鐘去看一看這些修復(fù)，回顧一下歷史。我自己的感受是，在修復(fù)之后會覺得他們不再是一個影片當(dāng)中的歷史資料，而是體會到這些人當(dāng)時在就和我生活在同一片藍(lán)天下、同一片土地上，我也希望能把這個感受分享給大家，以古鑒今的感覺。

仰望星空，腳踏實地，我覺得我們既是遙望著星空的彼岸，也要踏踏實實地往前邁進(jìn)，隨著科技的發(fā)展，會有越來越多的新技術(shù)走進(jìn)千家萬戶，我們這樣的創(chuàng)作者會繼承前輩們的精神，不斷上下求索，用自己所能來做對社會有意義的事情。

【他用AI修復(fù)技術(shù)讓李大釗陳延年們露出微笑，怎么做到的？】采寫：南都見習(xí)采訪人員李婭寧采訪人員馬嘉璐