IT之家 8 月 23 日消息,近日,國內(nèi)網(wǎng)上有一段谷歌 AI 夜景拍照新技術(shù) RawNeRF 的視頻火了,可以將夜晚照片完美降噪,精準還原,并且能將若干張 2D 照片合成 3D 視覺,并可調(diào)整焦點。
IT之家發(fā)現(xiàn),該技術(shù)的論文于 2021 年 11 月發(fā)表,也在 Github.io 上有主頁,名為《NeRF in the Dark: High Dynamic Range View Synthesis from Noisy Raw Images》。
顧名思義,該技術(shù)可以通過 NeRF (神經(jīng)輻射場)處理高噪點的夜間拍攝圖像,從而將充滿噪點的 Raw 圖像合成高動態(tài)范圍視圖。
NeRF 是一個簡單的全連接神經(jīng)網(wǎng)絡(luò),使用 2D 圖像的信息作為訓(xùn)練數(shù)據(jù),還原擁有體積的 3D 場景。
原版 NeRF 使用色調(diào)映射的低動態(tài)范圍 LDR 圖像作為輸入,而谷歌將 NeRF 修改為直接在線性原始圖像上進行訓(xùn)練,保留場景的完整動態(tài)范圍,可以有效地將 RawNeRF 變成一個多圖像降噪器,能夠組合來自數(shù)十或數(shù)百個輸入圖像的信息。
除了改變相機視角之外,RawNeRF 可以在后期調(diào)整焦點、曝光和色調(diào)映射,也就是像視頻中演示的那樣。
IT之家小伙伴們應(yīng)該都被谷歌相機的強大“夜視”功能驚艷過,如果 RawNeRF 能夠用于谷歌相機,那么或許手機也能拍到清晰的夜間 3D 視覺圖像,當(dāng)然目前還沒有。
論文:https://arxiv.org/abs/2111.13679
RawNeRF 介紹主頁:https://bmild.github.io/rawnerf/
廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。