IT之家6月29日消息 微軟研究院團(tuán)隊(duì) Ziyu Wan、Bo Zhang等人開發(fā)了一種新的基于AI的算法,用于通過(guò)深度學(xué)習(xí)方法恢復(fù)遭受嚴(yán)重毀壞的老舊照片。
與可以通過(guò)監(jiān)督學(xué)習(xí)解決的常規(guī)還原任務(wù)不同,真實(shí)照片的毀壞很復(fù)雜,并且合成圖像和真實(shí)舊照片之間的域間隙使網(wǎng)絡(luò)無(wú)法運(yùn)用。
IT之家獲悉,他們的新技術(shù)通過(guò)利用真實(shí)照片和大量合成圖像配對(duì),提出了一種新穎的三重態(tài)域翻譯網(wǎng)絡(luò)。具體來(lái)說(shuō),他們訓(xùn)練兩個(gè)變體自動(dòng)編碼器(VAE)將舊照片和干凈照片分別轉(zhuǎn)換為兩個(gè)潛在空間。并使用合成配對(duì)數(shù)據(jù)學(xué)習(xí)這兩個(gè)潛在空間之間的轉(zhuǎn)換。
由于域間隙在緊湊的潛伏空間中是封閉的,因此這種轉(zhuǎn)換可以很好地推廣到真實(shí)照片。為了解決一張舊照片中混合的多種退化問(wèn)題,他們?cè)O(shè)計(jì)了一個(gè)全局分支,該分支具有針對(duì)結(jié)構(gòu)化缺陷(例如劃痕和灰塵斑點(diǎn))的非局部塊,以及針對(duì)非結(jié)構(gòu)化缺陷(例如噪聲和模糊度)的局部分支。兩個(gè)分支融合在潛在空間中,從而提高了從多個(gè)缺陷還原舊照片的能力。提出的方法在恢復(fù)舊照片的視覺質(zhì)量方面優(yōu)于最先進(jìn)的方法。
請(qǐng)參見下面的視頻中演示的技術(shù):
遺憾的是,微軟目前尚未提供一個(gè)演示站點(diǎn)來(lái)試用展示該技術(shù)。
廣告聲明:文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時(shí)間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。