谷歌逆天「夜视」拍照突然火了!完美降噪还能合成3D视角


最近,网上一段来自谷歌的AI夜景拍摄视频被刷爆了!

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

视频中的这个技术叫RawNeRF,顾名思义就是NeRF的一个全新变体。

NeRF是一种全连接神经网络,使用2D图像的信息作为训练数据,还原出3D场景。

RawNeRF比起之前的NeRF,有了多处改进。不仅能完美降噪,还能改变相机视角,调整焦点、曝光和色调映射。谷歌的这篇论文于2025年11月发表,并被CVPR 2025收录。

项目地址:https://bmild.github.io/rawnerf/

黑夜中的RawNeRF

在此之前,NeRF是使用色调映射的低动态范围LDR图像作为输入。

而谷歌的RawNeRF改为直接在线性原始图像上进行训练,可以保留场景的完整动态范围。

在合成视图领域,处理黑暗的照片一直是一个难题。

因为在这种情况下,图像中的细节极少。而且这些图像让我们很难把新视图拼接到一起。

还好,我们有一个新的方案——使用原始传感器(RAW sensor data)的数据。

就是像这样的一张图,这样,我们就有了更多的细节。

不过,仍然存在一个问题:噪点也多了。

所以我们必须做个选择:是更少的细节和更少的噪点,还是选择更多的细节和更多的噪点。

好消息是:我们可以使用图像降噪技术。

可以看到,降噪之后的图像效果不错,但要合成视图,这种质量还是不够。

不过图像降噪技术给我们提供了一个思路:既然可以给单个图像去噪,那也可以给一组图像去噪。

让我们来看看RawNeRF的效果。

而且,它还有更多令人惊喜的功能:对基础数据进行色调映射,从深色图像中提取更多细节。

比如改变图像的焦点,营造出很棒的景深效果。

更厉害的是,这个还是实时的。

此外,图像的曝光也会随着焦点的变化而产生相应的变化!

接下来,就让我们看看RawNeRF的五个经典的应用场景吧。

五大经典场景

1. 图像清晰度

看这张图像,你能看到路牌上的信息吗?

可以看到,经过RawNeRF处理后,路牌上的信息就清晰多了。

在下面这个动图里,我们可以清晰地看到原始的NeRF技术和RawNeRF在图像合成上的区别。

其实,所谓的NeRF也并不是多古老的技术,时间才刚刚过了2年而已……

看得出来,RawNeRF在高光的处理上,表现得还是非常出色的,我们甚至能看到右下角车牌周围的高光变化。

2. 镜面高光

镜面高光属于非常难捕捉的对象,因为在移动相机时,它们会发生很大的变化,而且照片之间的相对距离也比较远。这些因素对于学习算法来说,都是巨大的挑战。
在下面这张图中可以看到,RawNeRF所生成的镜面高光可以说是相当还原了。

3. 薄的结构

即使在光线充足的情景中,以前的技术对于栅栏的显示效果也并不好。

而RawNeRF即使处理有一堆栅栏的夜间照片,也妥妥hold得住。

即使在栅栏与车牌重合的地方,效果依然很好。

4. 镜面反光

路面上的反光,是一种更有挑战性的镜面高光。可以看到,RawNeRF也处理得非常自然,非常真实。

5. 改变焦点,调整曝光

在这个场景中,让我们试试改变视角,不断变换焦点,同时调整曝光。

在以前,要完成这些工作,我们需要从25到200张照片的集合。

而现在,我们只需要几秒钟,就可以完成拍摄了。

当然,RawNeRF现在并不完美,我们可以看到,左边的RawNeRF图像和右边的真实照片,还是有一些差异。

不过,从一组充满噪点的原始图像达到现在这样的效果,RAWnerf已经取得相当大的进步了。要知道,两年前的技术还完全做不到这样。

RAW的好处

简单回顾一下,NeRF训练管线所接收的是经过相机处理的LDR图像,之后的场景重建和视图渲染,基于的都是LDR色彩空间。因此,NeRF的输出实际上已经是经过了后期处理的,想要大幅修改和编辑是不可能了。

相比而言,RawNeRF是直接在线性原始HDR输入数据上训练的。由此产生的渲染结果可以像任何原始照片一样进行编辑,如改变焦点和曝光等等。

由此带来的好处主要有两点:HDR视图合成和降噪处理。

在亮度变化极大的场景中,固定的快门速度不足以捕捉到全部动态范围。RawNeRF模型则可以同时对短曝光和长曝光进行优化处理,从而恢复完整的动态范围。

例如(b)中的这种大光比场景,就需要更复杂的局部色调映射算法(例如HDR+后期处理),才能同时保留暗部的细节和室外的高光。

此外,RawNeRF还可以使用线性颜色渲染具有正确饱和的「虚化」亮点的合成失焦效果。

在图像噪点的处理上,作者进一步地将RawNeRF在完全未经处理的HDR线性原始图像上进行了训练,使其变成了一个能处理几十甚至几百张输入图像的「降噪器」。

这种鲁棒性也就意味着,RawNeRF可以出色地完成在黑暗中重建场景的任务。

例如在(a)这个只有一根蜡烛照明的夜景中,RawNeRF可以从嘈杂的原始数据中提取出本来会被后期处理破坏的细节(b,c)。

作者介绍

论文的第一作者Ben Mildenhall是谷歌研究院的一名研究科学家,从事计算机视觉和图形方面的问题。

他在2015年于斯坦福大学取得计算机科学和数学学士学位,并在2025年于加州大学伯克利分校取得计算机科学博士学位。

刚刚结束的CVPR 2025,可以说是Ben的高光时刻了。

7篇录用论文中有5篇拿下Oral,并且还有一篇获得了最佳学生论文的荣誉提名。

网友评论

视频一出,立马惊艳了众网友。大家一起脑洞大开。

看这技术进步的速度,要不了多久,夜间拍照再也不用愁了~


# 降噪  # 后期处理  # 这张  # 是一种  # 都是  # 的是  # 噪点  # 让我们  # 镜面  # 谷歌  # 可以看到  # 传感器  # https  # 算法  # github  # 对象  #  


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 网络优化91478 】 【 技术知识72672 】 【 云计算0 】 【 GEO优化84317 】 【 优选文章0 】 【 营销推广36048 】 【 网络运营41350 】 【 案例网站102563 】 【 AI智能45237


相关推荐: 探索孟加拉音乐魅力:高尔德普林特莎丽,节日欢歌  Midjourney怎么用一键生成海报_Midjourney海报生成教程【方法】  AI复古风照片编辑教程:Gemini AI轻松打造复古时尚  AI照片编辑:为你的单人照添加逼真女友,告别孤单  AI猫咪视频创作指南:轻松打造百万级YouTube Shorts  佐糖AI抠图如何免费使用_佐糖AI免费额度获取与消耗查看【指南】  Microsoft Math Solver:AI数学解题神器深度评测  AI 时代高效开发:版本控制与 AI 协同工作流  解读Childish Gambino《This Is America》的深层含义与文化影响  百度AI对话助手入口 智能聊天机器人入口  京东旅行AI能否抢返程票_京东AI返程票预约与自动抢购【技巧】  小型邮件列表的终极指南:使用AI最大化营销效果  Django与React构建AI音乐推荐:数据库集成实战指南  Excel AI:5大免费AI功能提升数据分析效率  Postman Flows:构建智能AI驱动型工作流完全指南  留学文书PS怎么写?教你用AI写出招生官眼前一亮的个人陈述  百度输入法全感官ai怎么关 百度输入法全感官皮肤关闭  播客数据深度分析:用户地域分布及增长策略探讨  ChatGPT一键生成PPT怎么加目录_ChatGPTPPT目录添加【步骤】  雷小兔ai智能写作怎么设置写作风格_雷小兔ai智能写作风格选择方法【指南】  利用AI在五分钟内高效生成潜在客户:UpLead深度教程  如何用ChatGPT模拟面试并优化你的求职文书?  如何用AI根据职位描述(JD)定制你的求职信?  AISIA O1皮肤检测仪操作指南:安装、使用、疑难解答  百度ai助手任务栏怎么关 百度ai助手任务栏图标隐藏  AI写作鱼怎么一键生成朋友圈文案_AI写作鱼文案风格切换与字数设置【指南】  ChatGPT官方网页端入口 ChatGPT官网快速登录方法  智行ai抢票怎么选优先车次_智行ai抢票车次优先级设置技巧【指南】  斑马AI怎样设置专注模式_斑马AI专注时段与干扰屏蔽【指南】  网络安全警钟:揭秘“美足”背后隐藏的危机与防范  教你用AI将一段旋律扩展成一首完整的曲子  如何用AI帮你创作节日贺卡文案?让祝福与众不同  tofai登录入口官网 tofai网页版地址链接  定价3499炒到1.2万,豆包AI手机遭“封杀”,变革之路何去何从?  使用Autogen框架进行业务分析和执行报告生成  扣子AI怎样设置多轮对话逻辑_扣子AI逻辑树搭建与分支设计【教程】  唐库AI拆书工具怎么查看拆书进度_唐库AI拆书工具进度查看与异常排查【方法】  一键改变发型:Gemini AI 助你轻松打造时尚造型  使用文心一言进行中文客服话术库的逻辑优化  今日头条AI怎样推荐抢票工具_今日头条AI抢票工具推荐算法与筛选【技巧】  AI电影制作:颠覆传统,引领未来*新纪元  易企秀AI排版如何生成H5页面_易企秀AI排版H5制作入口与组件添加【方法】  文心一言怎么一键生成会议纪要_文心一言纪要生成与重点提取【指南】  GitHub Copilot CLI:终端中的 AI 编码助手  Depseek怎么设置总结汇报重点_Depseek重点突出与关键词标注方法【步骤】  美图秀秀AI抠图如何修复抠图误差_美图秀秀AI误差修复与手动涂抹【指南】  Tamilnad Mercantile Bank TMB:如何在线下载账户报表  Google NotebookLM:AI赋能的智能笔记与思维导图工具  AI聊天机器人:朋友还是谄媚者?深度解析与实用建议  使用文心一言进行高质量的唐诗宋词创意改编 

 2023-04-13

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

南京市珐之弘网络技术有限公司


南京市珐之弘网络技术有限公司

南京市珐之弘网络技术有限公司专注海外推广十年,是谷歌推广.Facebook广告全球合作伙伴,我们精英化的技术团队为企业提供谷歌海外推广+外贸网站建设+网站维护运营+Google SEO优化+社交营销为您提供一站式海外营销服务。

 87067657

 13565296790

 87067657@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.