“你們可以下崗,我們上崗!”25年前,香港回歸祖國懷抱,在中英防務(wù)交接儀式上,中國解放軍指揮官譚善愛喊出這句讓無數(shù)國人熱血沸騰的話。

25年后,這些由央視軍事新媒體策劃的香港回歸高清歷史影像在各大平臺迅速刷屏,引發(fā)人民日報、新華社、央視新聞、光明日報等媒體相繼報道,多個話題登上微博熱搜榜,吸引數(shù)千萬網(wǎng)友回憶與感慨“恍如昨日拍攝”。

與此同時,由深圳衛(wèi)視直新聞策劃,香港回歸當晚,數(shù)十萬深圳市民涌上街頭,揮舞著鮮紅色的國旗,歡送解放軍進駐香港的高清修復(fù)視頻也同樣引發(fā)了廣泛的關(guān)注與討論。

而這些珍貴的高清歷史影像背后,均可以看到騰訊多媒體實驗室智能影像修復(fù)技術(shù)的聲影。他們將這些珍貴的影像以高清4K的畫質(zhì)再次展現(xiàn)在眾人面前,讓人們更為沉浸地感受到當年振奮人心的時刻。

??為了慶祝香港回歸25周年,騰訊光影煥新計劃項目團隊于今年4月開始與央視軍事、深圳衛(wèi)視直新聞溝通,甄選歷史影像進行超清修復(fù),并耗時三個月完成了這場特別的獻禮。為了將歷史影像畫質(zhì)提升至4K高清,騰訊多媒體實驗室自研光影煥新智能修復(fù)平臺,該平臺沉淀了團隊多年的多媒體通信和處理研發(fā)經(jīng)驗,包含多項業(yè)界領(lǐng)先的經(jīng)典影像修復(fù)技術(shù)。

1、多媒體智能技術(shù)如何復(fù)原歷史經(jīng)典時刻?

1997年7月1日的中英交接儀式,吸引了全世界的聚光燈。這場世界矚目的典禮籌備,也傾注了無數(shù)人的心血。但受限于場地、環(huán)境等因素,絕大多數(shù)國人25年前無法親臨現(xiàn)場感受這一歷史時刻。與此同時,這個史無前例的歷史珍貴影像,也受當時技術(shù)限制、視頻壓縮等影響,畫質(zhì)不清、視頻模糊。

智能影像修復(fù),絕非將低分辨率視頻放大、輸出為高分辨率影像那般簡單。

通常,修復(fù)一支常規(guī)的老舊視頻,大概需要用到去模糊、提高分辨率、降噪和色彩增強等技術(shù),從而解決包括但不限于劃痕、豎線、雪花點、噪聲、壓縮失真、抖動等問題。

騰訊多媒體實驗室專家研究員夏珍表示,修復(fù)歷史影像作品甚至殘損影像,對于實驗室來說是比較日常的工作,但本次視頻修復(fù)工作還是存在不小的難點和問題。

一來,作為我國重要的歷史節(jié)點,這些視頻極其珍貴,軍人們的每一個眼神、每一個表情、每一個詞語都經(jīng)過千錘百煉,修復(fù)效果應(yīng)最大程度還原當初的每一景、每一秒;二來,舉行交接儀式時已是深夜,現(xiàn)場燈光微弱、無數(shù)臺攝像機閃光燈交替。另外,深圳市民歡送解放軍進駐香港時還是雨天,街道兩旁有數(shù)十萬市民朋友。

“盡管困難不小,但在實驗室小伙伴們的合力攻堅下,我們在人臉修復(fù)、畫質(zhì)增強及畫質(zhì)修復(fù)方面下了不少功夫,算是比較完美地解決了上述問題?!毕恼涮岬?。

畫質(zhì)增強里的“小”細節(jié):剛毅的眼神與動容的軍人

香港回歸當天,中英防務(wù)交接儀式在室外舉行。與室內(nèi)相比,室外環(huán)境并不“友好”:黑夜、下雨、無盡的閃光燈。換句話說,想要超清還原中英防務(wù)交接儀式現(xiàn)場的視頻清晰度,對算法的魯棒性要求非常之高。

與此同時,關(guān)于這段視頻的修復(fù)工作,夏珍與團隊成員討論之后,給實驗室提出了更高的修復(fù)要求:不放過彼時彼刻的任何一個重要細節(jié)。

譬如視頻中的關(guān)鍵人物之一:與英軍交接的指揮官——譚善愛。夏珍明白,彼時的譚善愛,不單單是他自己,展現(xiàn)的不僅是中國軍人的風采,更代表了整個國家的風貌。

“我在幾個月的訓(xùn)練期間,將交接時的話重復(fù)了上千遍?!弊T善愛受訪時表示,“用什么樣的語氣、用什么樣的狀態(tài),把這段話充分地演繹好,一定要以最高標準展現(xiàn)中國軍人的良好形象?!?/p>

通過視頻影像對比觀察,原先只能看到模糊的人臉,而修復(fù)后可以看清譚善愛清晰的面部輪廓,甚至皮膚紋理、汗?jié)n都清晰可見。同時,也能更為直觀地感受到中國解放軍軍人堅毅、不畏的眼神。

??當國旗升起時,戰(zhàn)士們的眼神又變得柔和,眸中淚光清晰可見。在《義勇軍進行曲》的背景音中,鏡頭緩慢掃過每一個敬禮的中國解放軍軍人,他們黝黑但硬朗的臉龐在炎炎夏夜下汗水流淌,但眼角之上是無盡的柔情與驕傲。

那場景,讓人動容。

如此細節(jié)的修復(fù)處理,夏珍提到,主要用到了多項畫質(zhì)增強技術(shù),包括分辨率增強、細節(jié)增強、色彩增強等。

譚善愛等軍人流暢的臉部細節(jié)特寫,源于騰訊多媒體實驗室采用了自研人臉修復(fù)模型。它融合了人臉檢測、人臉修復(fù)等模塊,將圖像修復(fù)遷移到視頻過程中加入幀間穩(wěn)定性處理,優(yōu)化多角度人臉效果,解決人臉檢測穩(wěn)定性、動態(tài)人臉遇到的復(fù)雜場景問題。

同時,針對視頻失真及細節(jié)生成,實驗室做了最大程度優(yōu)化。在人臉修復(fù)基礎(chǔ)上使用“超分辨率”加成,通過基于GAN超分網(wǎng)絡(luò)的多幀技術(shù),生成的細節(jié)更加豐富細膩及穩(wěn)定。

所以看到,實驗室在放大視頻分辨率同時,也大幅提升了人物的整體感官層次,人物臉部的皮膚紋理、毛孔、頭發(fā)均清晰可見。

細節(jié)還原問題解決完畢,接下來則是色彩優(yōu)化。

??不少老舊視頻除了畫質(zhì)模糊、噪點多,隨著時間流逝畫面也容易變成灰色。夏珍表示,除了想讓畫面清晰度更高、細節(jié)更豐富、飽和度更均衡,也想在改變灰色畫面前提下,保留90年代深圳和香港的原汁原味。

??而深圳市民歡送解放軍駐港部隊時的視頻畫質(zhì)情況與交接時有相似之處:天色晚、燈光弱、光源雜亂、人物多。

實驗室首先通過畫質(zhì)提升算法,在空間上提升視頻的分辨率和幀率。細節(jié)清晰度提升之后,再采用更強的色彩增強模塊增加色彩豐富度,在尊重歷史和原版的基礎(chǔ)上,讓視頻畫面色彩更為強烈。

??駐港部隊上崗第一天,香港市民紛紛圍觀拍照,從修復(fù)視頻來看,場景變?yōu)榘滋欤嬅嫔市Ч粶p。

多維度提升畫質(zhì):冒雨進駐香港和2秒之爭下的五星紅旗

畫質(zhì)修復(fù),解決的是老片中的灰塵、污垢、霉斑、掉色、圖像抖動、劃痕、閃爍、噪聲、變色、模糊等問題。

翻閱視頻不難發(fā)現(xiàn),三軍冒雨進駐香港、市民夾道歡迎時大雨傾盆。原始畫面異常模糊,畫中人物糊作一團。

??“如何既能還原真實場景,又能高效提升畫質(zhì)?”夏珍提到,“有雨的場景對算法來說其實考驗很大,因為雨天畫面不僅更模糊,同時雨滴也會影響噪聲去除?!?/p>

換句話說,他們不僅需提高視頻的畫質(zhì),還要將當時的雨、霧更清晰地呈現(xiàn)出來。

針對上述問題,夏珍和他的同事通過一系列修復(fù)算法組合,包括視頻降噪、去壓縮失真、去劃痕算法、去雪花點斑點算法等,去除噪聲和失真、提升畫面清晰度的同時,盡量保持雨、霧的真實感。

針對整體效果和特殊場景,他們進行了十多次的算法升級和優(yōu)化,為視頻提效提供了穩(wěn)定性和魯棒性更強、效果更好的技術(shù)支撐。

??以上圖為例,原視頻只能看到女軍人模糊的臉部輪廓,修復(fù)后則增加了不少細節(jié),面部頓時清晰許多,同時車窗上還能看出雨后的水滴和霧氣。

同樣的難題也出現(xiàn)在修復(fù)升起的五星紅旗上。

前期協(xié)商階段,英方原本打算在7月1日的0點0分0秒降下英國國旗,但為確保中國國旗在7月1日零時零分零秒準時升起,中方要求英國國旗必須于前一天的23點59分58秒降落。

為了讓香港主權(quán)準時回歸祖國,僅此一項,中英雙方就談判了16次。

看似微不足道的2秒,卻事關(guān)國家的主權(quán)與尊嚴。也就是說,7月1日零點零分準時升起中國國旗很重要。本次視頻修復(fù)工作,那一刻的國旗更重要。

從原視頻來看,旗桿高達十幾米,身處夜間燈光環(huán)境弱,且因為直播分辨率較低,國旗極為模糊。

修復(fù)過程中,實驗室不僅需要提高國旗的分辨率,還需將每個像素點的內(nèi)容填充好。

為了真正達到4K畫質(zhì),讓五星紅旗更清晰醒目,夏珍團隊通過最新的模型優(yōu)化,精確到每個像素點,讓五星紅旗的五角星都清晰可見。

2、「翻新」歷史的智能修復(fù)師

如果你是一個榮迷,可能還記得3個月前微信朋友圈中那場刷屏的張國榮2000年《熱·情》演唱會超清修復(fù)版全球直播。

技術(shù)加持下,不少網(wǎng)友表示好似置身于此,恍如舊景重現(xiàn)。兩小時的歌舞聲中,從“天使寂寞降臨人間”到“天使墜入愛河,陷入情網(wǎng)”,再到“愛人背叛,天使變成魔鬼,在人間放縱嬉戲”,最后以“天使愛的表白與告別”謝幕。似魔似仙之間,觀眾也隨著歌聲經(jīng)歷情感起伏。

而這個刷屏的演繹作品,由騰訊光影煥新計劃項目團隊聯(lián)合寶麗金唱片共同呈現(xiàn),背后的技術(shù)同樣來自騰訊多媒體實驗室。該實驗室是騰訊旗下領(lǐng)先的多媒體通信和處理研發(fā)團隊,他們此前推出光影煥新智能修復(fù)平臺,是面向經(jīng)典影像修復(fù)場景專門推出的技術(shù)解決方案,并通過騰訊云面向客戶提供服務(wù)。該平臺沉淀了多項自研的業(yè)界領(lǐng)先的經(jīng)典影像修復(fù)技術(shù),在智能模式驅(qū)動下自動為經(jīng)典影像匹配最佳的算法組合和參數(shù),發(fā)揮人工智能算法組合的最大效用,實現(xiàn)最佳的修復(fù)效果。

此次香港回歸25周年歷史影像,意義非凡,最終這項修復(fù)任務(wù)由該實驗室執(zhí)行,也能側(cè)面證明這個團隊的不俗實力。

目前,騰訊多媒體實驗室已形成了較為完整的智能影像修復(fù)技術(shù)矩陣。除了《熱·情》演唱會和香港回歸歷史視頻,此前還深度參與了包括《康熙王朝》、《天下人家》等經(jīng)典影視劇和珍貴歷史影像的超清修復(fù)工作。

“通過香港回歸25周年視頻、寶麗金《熱·情》演唱會修復(fù)項目,我們可以看到數(shù)字化技術(shù)對于經(jīng)典影像作品及傳統(tǒng)文化的助力價值。我們團隊也在積極配合一些文化機構(gòu),探討更多經(jīng)典影視作品的修復(fù)工作。”

騰訊杰出科學(xué)家、騰訊多媒體實驗室總經(jīng)理劉杉博士表示,騰訊多媒體實驗室未來將持續(xù)探索數(shù)字技術(shù)的社會價值,推動多媒體技術(shù)在多個產(chǎn)業(yè)領(lǐng)域中落地應(yīng)用的同時,踐行騰訊可持續(xù)社會價值創(chuàng)新,助力經(jīng)典文化的傳承。

3、感恩技術(shù),讓歷史永不逝去

“我們周圍的高技術(shù)越多,就越需要人的感情?!币晃痪W(wǎng)友在看過智能影像技術(shù)修復(fù)老視頻后發(fā)出如此感嘆。

智能影像修復(fù)技術(shù)翻新的那些老電影、老視頻、老照片。讓我們看見父親母親的少年少女模樣;讓我們重溫常看常新的經(jīng)典電影;讓我們回望百年前的北京,看見同一片土地上的國人生活點滴;讓我們看見張國榮的演唱會,重溫那個香港影視文藝的黃金時代。

他們還原每一個真情的、有趣的、歷史的、激動人心的畫面。這些不被概念定義的、不被第三方描述的、不被憑空想象的畫面,在歲月塵埃中,越發(fā)彌足珍貴。如今,這些視頻穿越時光的塵埃,可以真切地呈現(xiàn)在我們面前。

技術(shù)人員以科技的理性,給所有人一份無法量化的柔情,讓我們在或枯燥、或苦悶、或平凡的生活之余,為過去熱淚盈眶,在未來保持熱愛。

從前,科技向善離我們很遠,但此刻,我們對這四個字的感受從未如此貼切。