[討論] Google AI 降噪演算法 RawNeRF

作者: chickengod (雞大俠)   2022-08-24 16:29:41
Google 發表的 AI 降噪演算法 RawNeRF
是 NeRF (Neural Radiance Fields)
針對低光照環境研發的版本
可以從數十或數百張 有噪點 的多視角 RAW 照片
重建場景並降噪 產生相當清晰的照片
降噪效果好的不可思議
夜拍也沒有例外
demo 影片:
https://bmild.github.io/rawnerf/img/grid2x2_crf25.mp4
https://www.youtube.com/watch?v=JtBS4KBcKVc
paper:
https://bmild.github.io/rawnerf/
如果能應用在 pixel 手機上 夜拍應該無敵了吧..
來源:
https://techcrunch.com/2022/08/23/nerf-in-the-dark/
作者: skyangle0607 (skyangle)   2022-08-24 16:34:00
難得會是pixel7的黑科技!?
作者: abc21086999 (呵呵)   2022-08-24 16:36:00
反觀其他廠商,什麼演算法都掏不出來
作者: nekoares   2022-08-24 16:41:00
Pixel現在需要的是善用新的鏡頭,而不是更高級的降噪Pixel6a用舊的鏡頭照出來跟P6P一樣的照片,笑死人50M的新鏡頭形同虛設
作者: weepingkito (哭泣的牙籤)   2022-08-24 16:49:00
夜景模式要定住不動 NERF模式要原地劃圈
作者: skyangle0607 (skyangle)   2022-08-24 16:49:00
樓上講反了吧,現在pixel需要的是新的演算法,就的算法讓新感光元件拍出來跟舊的沒兩樣
作者: nekoares   2022-08-24 16:54:00
不管是新的演算法還是怎樣,但看到RAW檔照得這樣好,結果AI跑出來照片都一樣實在很心酸。P6相機可以更好的尤其現在P6照人像的過度修圖感實在太over
作者: zaa0210 (ZAA)   2022-08-24 16:57:00
再降下去....單眼都快沒行情了...orz
作者: aegis43210 (宇宙)   2022-08-24 17:01:00
P7P的賣點來了
作者: cluster   2022-08-24 17:10:00
pixel gogo!
作者: abc0922001 (中士abc)   2022-08-24 17:16:00
我有看到,超酷的
作者: ufo206062 (金恩)   2022-08-24 17:17:00
看起來這演算法蠻猛的
作者: ymx3xc (U文多多)   2022-08-24 17:32:00
太神啦 谷哥!!!
作者: sx4152 (呵呵)   2022-08-24 17:44:00
看起來有料 調整過後像是遊戲畫面
作者: tnit (碌碌碌碌)   2022-08-24 17:45:00
好神奇 希望會在Pixel 7出現
作者: sakala (Akou)   2022-08-24 17:46:00
所以我說 什麼時候能用?
作者: ayuhb (ayuhb)   2022-08-24 17:50:00
希望這次google能鎖好,不然又被一堆破機偷去用
作者: Gauss (Gaussss_Physics)   2022-08-24 17:54:00
單眼真的要沒落了
作者: wed1979 (舞抖米哲夭)   2022-08-24 17:56:00
代工廠太雷,又熱續航又差,鏡頭跟sony一樣熱斃,再好的算法有用嗎?
作者: opengaydoor (開甲門)   2022-08-24 18:00:00
ALL IN GOOGL囉
作者: kai08130623 (Sadaharu)   2022-08-24 18:08:00
反串還沒沒落
作者: avans (阿緯)   2022-08-24 18:16:00
推 好厲害的演算,雖然畫面感覺太完美,有點像遊戲中畫面w
作者: tommy123310 (tommy)   2022-08-24 18:31:00
google可以把演算法套入街景做成散步模擬器嗎
作者: fiiox3 (飆速宅男)   2022-08-24 18:57:00
鏡頭素質有限,要跟單眼比還早...
作者: tk1211 (THE FRUSTRATED)   2022-08-24 19:06:00
等你AI快門拉到1/125以上也有這種效果再來 zzzzz
作者: riverScorpio (河蠍)   2022-08-24 19:07:00
哇,這運算量很可怕耶
作者: mimic13 (米米客)   2022-08-24 19:09:00
這滿猛的了吧
作者: bcs (= ="frailty..gggg XD)   2022-08-24 19:12:00
還好,GitHub有py code算的能多慢。重點是其它篇的AI DENOISE,現在移植版叫不出ai denoise也沒有tpu ,Google 不乎讓他們玩。
作者: killdidee (Fafafaa)   2022-08-24 19:23:00
厲害
作者: windowsliu (Ptt2me)   2022-08-24 19:29:00
pixel要加強的是系統整合能力。解bug能力
作者: Hakan (夫人,我說不要)   2022-08-24 19:43:00
感覺很像遊戲畫面餒XD
作者: rhox (天生反骨)   2022-08-24 19:44:00
現代黑魔法
作者: fujisawa (Feel the RUSH)   2022-08-24 19:47:00
以後就不是拍照片 是畫照片了吧
作者: xzcb2008 (非常森77牛)   2022-08-24 20:34:00
我還是買個機體用個好鏡頭就好...
作者: rz759 (rz)   2022-08-24 20:38:00
反串還沒沒落xD不過看下來倒是滿可以期待的
作者: AAAWhoAmI   2022-08-24 21:04:00
谷歌好狠
作者: siegfriedlin (齊格飛)   2022-08-24 21:07:00
品質跟全片幅還是不能比啦 但若能用在手機上已經很猛了 靠cpu來補剛剛好
作者: longtimens (阿捲)   2022-08-24 21:09:00
演算法強 手機一堆bug不能用 演算法有跟沒有有什麼區別
作者: nathan2000 (風間仁)   2022-08-24 21:48:00
講的好像每個人都全片幅出門動不動就調色修圖,現在連入門級的可換鏡都快死光了...
作者: louis925 (稚空)   2022-08-24 22:18:00
這要商品化還是滿困難的,主要是 nerf 需要知道每張圖拍攝的位置和角度,然後通常需要拍100張不同角度的照片
作者: fiiox3 (飆速宅男)   2022-08-24 22:19:00
就要求品質的繼續用單眼咯,說單眼死也太早...等婚攝都用手機再說吧
作者: louis925 (稚空)   2022-08-24 22:19:00
最後是計算量現在比傳統的neural network 方法高太多了學術研究時,大多都是用桌機GPU跑幾分鐘才出來的nerf 也還無法處理有物體移動的場景
作者: oneheat (等待)   2022-08-24 22:22:00
數十張,哈哈哈,是打算轉多久
作者: Qlily (lilyQ)   2022-08-24 22:29:00
能解碼馬賽克再說
作者: oldk13 (OldK)   2022-08-24 23:11:00
要認真計較畫質的不會對手機有啥期待,還不用扯入門級相機。廠商主打的傻瓜auto正好被手機打爆,再正常不過
作者: hsyr (北極)   2022-08-24 23:26:00
無反射鏡的微單要沒落了
作者: nathan2000 (風間仁)   2022-08-24 23:56:00
婚攝你拿手機拍拿的到錢???低光錄影跟低光拍動態物體目前就小感光的死穴,怎麼也算不出來,手機再加一堆補光週邊就直接拿單眼了,也更有架勢。
作者: Kayusumi (Left)   2022-08-25 00:05:00
疊圖疊的夠多的確可以讓雜訊降到很低...最近工作剛用到但是時間qq
作者: milkool   2022-08-25 01:41:00
手機演算法算圖與單眼相機的光學發展是不同的技術方向根本沒有所謂的沒落
作者: ksng1092 (ron)   2022-08-25 01:44:00
我很好奇影片裡那些動起來的片段是怎麼拍出來的
作者: Tahuiyuan (mata)   2022-08-25 02:45:00
除了夜視模式,平常能無限接近肉眼所見就好,很不喜歡太濃郁、太冷或太暖的成像風格,目前各家的技術跟人眼的差距還是相當大。
作者: Mchord (Mchord)   2022-08-25 06:42:00
影片結尾那個鏡頭移動是合成的不是拍的這種小角度搖一搖是Nerf常見的demo方式
作者: ww (劉文聽)   2022-08-25 08:23:00
未看先猜根本不是降噪而是抹掉重畫
作者: IM71   2022-08-25 09:49:00
坐等GC超進化
作者: shsh946 (大哥是對的!)   2022-08-25 09:57:00
單眼怎麼會和手機比 笑死
作者: yangwen5301 (大番薯)   2022-08-25 11:20:00
不可能贏單眼啦,細節直接被打趴,不過如果是網路壓縮傳圖應該是看不出來沒錯
作者: Xperia (X霹靂鴨)   2022-08-25 11:50:00
p6a跟p6p還是有差的,自己去看阿哲的影片
作者: zx87202 (mimi)   2022-08-25 11:58:00
大家有發現他測資是用iPhone拍的嗎?XD
作者: payne   2022-08-25 13:01:00
我是old school 覺得拍照和後製還是應該分清楚 不過應該越來越沒人在乎了
作者: wardraw   2022-08-25 14:13:00
以後用爛鏡頭拍影片 回家再用算法回推高解析3D場景就好
作者: h810185 (......)   2022-08-26 20:21:00
夏天戶外拍五十張就熱到五十度,相機去勢變閹狗。單眼有那麼不濟嗎?

Links booklink

Contact Us: admin [ a t ] ucptt.com