來源:科普中國
本文專家:秦銘,浙江大學(xué)電子信息專業(yè)博士
正值建黨100周年,《覺醒年代》這一部主旋律的電視劇受到了很多年輕人的熱捧。
他們?yōu)闊o數(shù)革命先輩們拋頭顱灑熱血的革命精神所震撼,其中,陳延年、陳喬年慷慨赴死的情節(jié)尤其讓人印象深刻。
而在6月30日,#AI修復(fù)讓李大釗陳延年們露出微笑#話題登上了熱搜。
網(wǎng)友們一邊感嘆看到了真實的革命先烈,一邊對AI修復(fù)技術(shù)感到好奇,今天我們就來扒一扒這個神奇的技術(shù)吧!
AI修復(fù)采用了什么原理?
這個項目是由人民日報和B站up主大谷合作進行的,大谷主要采用了GPEN等AI技術(shù)。
其中,GPEN的作用是使圖像清晰化,將黑白照片或者因顏料物質(zhì)氧化褪色的照片重新色彩化,其主要使用生成對抗網(wǎng)絡(luò)技術(shù),主要是包括生成器和判別器兩個部分。
大家可以形象化地將這兩部分理解為兩個小孩,就叫小王和小李:
小王有一天對小李展示了一幅很好看的畫,并驕傲地說這是他親筆畫的。小李作為小王的形影不離的好朋友,一眼就看穿了小王的謊話,“別逗了,這肯定是你那學(xué)畫畫的姐姐畫的,你那三腳貓的水平還不如我呢~”后來證明果然是小王姐姐畫的。
而后,小王奮發(fā)圖強,刻苦臨摹姐姐的畫作,并且每天都帶著兩幅新畫,一幅他自己畫的,一幅姐姐畫的,去找小李分辨。
小李一開始每次都很輕松地分辨出來,可是小王并不氣餒,堅持每天苦練。直到有一天,小李再也不能分辨小王和姐姐的畫作了,小王終于成功了!
在這里,生成器就是“小王”,判別器就是“小李”,生成器每次將修復(fù)上色后的圖片交給“小李“判別器,說真實的符合實際的彩色圖片就是這樣子的。
判別器輕蔑一笑“哪有人的眼珠子是綠色的?”便將其判定為不合格。生成器繼續(xù)苦練上色修復(fù),并繼續(xù)拿給判別器檢驗。
被判別器一遍遍地輕易判別,隨著生成器的水平逐漸進步,判別器再也分辨不出,哪些圖片是真正拍出來的彩色圖片,哪些圖片又是生成器自己上色后的黑白圖片。
到此,生成器就是一個“成熟”的生成器了,可以自己去“闖蕩江湖”了。
在這個動態(tài)化革命先烈的任務(wù)里,“小王”生成器學(xué)習(xí)的任務(wù)包括但不限于上色,使圖像清晰化,將圖片轉(zhuǎn)化為數(shù)十幀的動畫。
其中,特別給大家科普一下小王在學(xué)習(xí)由圖片制作視頻時的學(xué)習(xí)對象之一:VoxCeleb數(shù)據(jù)集。
VoxCeleb,是一個大型人聲識別數(shù)據(jù)集,它包含來自YouTube 視頻的1251 位名人的約10 萬段影音。
數(shù)據(jù)基本上是性別平衡的(男性占55%),這些名人有不同的口音、職業(yè)和年齡。
很多有關(guān)于視頻的GAN的訓(xùn)練都用到了這個數(shù)據(jù)集。(這也就是生成器“小王”模仿的部分的“姐姐的畫作”)
AI還對哪些老照片“做了手腳”?
在這之前,up主大谷還利用了相關(guān)技術(shù)修復(fù)了人民日報4年前發(fā)布的1920年北京黑白影像資料,通過修復(fù)幀率、上色等完成了修復(fù)工作,通過了科技的力量使我們與歷史更親密的對話。
但是,科技是一把雙刃劍,不用在正道上就可能會違反道德,乃至觸犯法律。
從一個名叫“DeepFakes”的AI開源技術(shù)開放以來,民眾也是了解到,原來視頻也是可以P的,而且可以P得這么像。
而且,相關(guān)的技術(shù)早就已經(jīng)被封裝好,即使不會寫代碼,只需安裝相關(guān)的軟件就可以使用,也有很多人抱著獵奇的心理嘗試下載使用,并未經(jīng)他人許可就擅自使用他人影像“換臉”。
據(jù)《刑法》第246條:“以暴力或者其他方法公然侮辱他人或者捏造事實誹謗他人,情節(jié)嚴重的,處以三年以下有期徒刑、拘役、管制或者剝奪政治權(quán)利。”
所以,我們還是要正確地看待和利用這項技術(shù)。
AI在生活中的應(yīng)用有哪些?
現(xiàn)如今,AI技術(shù)早就已經(jīng)滲透進了我們生活的方方面面:
從經(jīng)常使用的翻譯軟件,到寄取快遞時自助機器識別身份碼和快遞碼,再到人臉識別付款解鎖手機等等。
可以說,AI已經(jīng)在很多方面便利了我們的生活。
但值得注意的是,只有我們努力將其用到正道上,趨利避害,才能真正造福人們的生活!
“掌”握科技鮮聞 (微信搜索techsina或掃描左側(cè)二維碼關(guān)注)