![]()
当我们在室内用手机拍照时,经常会发现照片上莫名其妙地出现了一道道明暗相间的条纹,就像老电视机信号不好时出现的横纹一样。这种现象被称为"闪烁伪影",它的出现让许多原本精美的照片变得面目全非。最近,来自南开大学国际先进研究院(深圳·福田)、南开大学计算机学院、香港理工大学以及OPPO研究院的联合研究团队,为这个困扰摄影爱好者已久的问题提出了一个创新解决方案。这项研究成果已于2026年3月发表在计算机视觉顶级会议论文集中,论文编号为arXiv:2603.22794v1。
要理解闪烁伪影的成因,我们可以把它比作观察旋转的风扇叶片。当风扇高速旋转时,如果你用极短的曝光时间拍照,可能只会捕捉到叶片在某个特定位置的瞬间状态,而无法呈现完整的旋转过程。室内的交流电照明就像这个旋转的风扇,它的亮度会随着电流的交替变化而周期性地明暗闪烁,频率通常是电源频率的两倍,也就是每秒100次或120次。
现代相机采用的滚动快门技术更是雪上加霜。滚动快门就像是一个从上到下移动的窗帘,它逐行扫描图像传感器,而不是同时曝光整个画面。当这个"扫描窗帘"遇到正在闪烁的灯光时,画面的不同行就会记录到灯光的不同亮度状态,最终形成我们看到的条纹图案。研究团队巧妙地发现,这些看似随机的条纹实际上蕴含着两个关键特征:周期性和方向性。
周期性就像音乐的节拍一样,闪烁条纹会按照一定的间隔重复出现。而方向性则体现在这些条纹总是沿着相机扫描的方向排列,通常是水平或垂直方向。基于这两个发现,研究团队开发了一个名为"Flickerformer"的智能系统,它就像一个经验丰富的修图师,能够识别并消除这些恼人的条纹。
Flickerformer的工作原理可以比作一个三人组合的协同作业。第一个成员叫做"相位融合模块",它专门负责分析多张连续拍摄的照片。研究团队发现了一个有趣的现象:当你交换两张闪烁照片的相位信息时,闪烁模式也会随之交换,这表明相位信息编码了闪烁的空间分布。就像调音师能够识别音乐中的和谐与不和谐一样,相位融合模块能够通过分析不同照片间的相位相关性,找出哪些区域是正常的,哪些受到了闪烁干扰。
第二个成员是"自相关前馈网络",它的作用类似于寻找图案中的重复元素。当你观察一块有规律花纹的壁纸时,你的大脑会自动识别出重复的图案单元。自相关前馈网络就是模拟这个过程,它在频域中寻找图像内部的周期性结构,帮助系统更好地理解闪烁的规律性特征。
第三个成员是"小波方向注意模块",这是整个系统中最具创新性的部分。小波变换就像是一个特殊的放大镜,它能够将图像分解成不同频率和方向的组件。高频组件通常包含了边缘、纹理等细节信息,而在闪烁图像中,这些高频信息往往携带着闪烁条纹的方向特征。这个模块利用Haar小波变换将特征分解为一个低频分量和三个高频分量,其中水平和垂直方向的高频分量能够很好地捕捉到闪烁条纹的边缘变化。
整个Flickerformer系统采用了一种U形的编码器-解码器架构,这种设计就像是一个漏斗,先将图像信息压缩提取精华,再逐步扩展恢复细节。在编码器阶段,系统使用自相关前馈网络来增强对周期性特征的感知能力。在解码器阶段,小波方向注意模块发挥作用,利用高频信息指导低频区域的恢复,实现精确的闪烁定位和去除。
为了验证这个系统的效果,研究团队在真实世界的闪烁数据集上进行了大量实验。结果显示,Flickerformer在各项评估指标上都显著优于现有的最先进方法。在峰值信噪比(PSNR)这个衡量图像质量的重要指标上,Flickerformer达到了31.226分贝,比第二名高出0.580分贝,而且参数量仅为其他方法的不到20%。这就像是用更小更轻的装备实现了更好的效果。
更令人印象深刻的是,在视觉质量比较中,Flickerformer展现出了卓越的闪烁去除能力。研究团队展示的对比图像显示,当其他方法在处理严重闪烁时还会留下明显的条纹痕迹或产生颜色偏差时,Flickerformer能够彻底消除闪烁的同时保持图像的自然外观。特别是在处理屏幕闪烁这种特别顽固的情况时,Flickerformer的优势更加明显。
研究团队还进行了详细的消融研究,验证了每个组件的贡献。当移除相位融合模块时,系统在多帧融合时就无法有效区分正常区域和闪烁区域,导致恢复质量下降。当用传统的前馈网络替换自相关前馈网络时,系统对周期性特征的感知能力明显减弱。而当用普通的注意力机制替换小波方向注意模块时,系统对细微闪烁区域的定位精度也会下降。
从计算效率的角度来看,Flickerformer也表现出色。小波方向注意模块通过只在低频子带上执行注意力计算,将计算复杂度降低了约75%,同时保持了表示能力。这种设计使得该方法不仅效果好,而且运行速度快,更适合实际应用。
当然,这项技术也存在一定的局限性。当连续多帧图像中的清洁区域无法覆盖整个场景时,比如某些区域的灯光完全熄灭,系统就难以恢复这些缺失的信息。这就像拼图游戏中缺少了关键拼块,即使再智能的系统也无法凭空创造出这些内容。
从技术发展的角度来看,这项研究的意义远不止解决拍照时的条纹问题。随着短视频、直播等应用的普及,人们对图像质量的要求越来越高。传统的解决方案要么需要专门的硬件设备,要么效果有限。而Flickerformer这样基于深度学习的软件解决方案,为各种设备提供了一个通用的、高质量的闪烁去除能力。
更重要的是,这项研究展示了一种新的思路:不是简单地将闪烁去除当作一般的图像恢复任务来处理,而是深入分析闪烁现象的物理本质,将这些物理先验知识融入到神经网络的设计中。这种结合物理建模和深度学习的方法,为其他类似的计算摄影问题提供了有价值的参考。
在实际应用场景中,这项技术可能会很快集成到各种相机应用和图像处理软件中。用户在拍摄连续几张照片后,系统就能自动识别并去除闪烁干扰,让每一张照片都呈现出理想的效果。对于专业摄影师来说,这意味着在室内或人工光源环境下拍摄时不再需要额外的设备或复杂的后期处理。对于普通用户来说,这意味着用手机拍照时再也不用担心那些讨厌的条纹会毁掉珍贵的回忆瞬间。
说到底,这项研究解决的虽然看起来是一个技术细节问题,但它触及的是我们日常生活中最基本的需求——记录和分享美好的瞬间。当技术能够让我们更轻松地捕捉生活中的美好,让每一个普通人都能成为更好的摄影师时,这样的进步就具有了超越技术本身的价值。随着这类智能图像处理技术的不断发展和普及,我们有理由期待一个图像质量更高、创作门槛更低的视觉时代的到来。
Q&A
Q1:什么是闪烁伪影?为什么会出现这种现象?
A:闪烁伪影是指在室内用相机拍照时出现的明暗相间条纹。这是因为室内交流电照明会周期性闪烁,加上相机的滚动快门逐行扫描,导致画面不同行记录到不同亮度,最终形成条纹图案。
Q2:Flickerformer如何去除闪烁条纹?
A:Flickerformer通过三个核心模块协同工作:相位融合模块分析多张照片找出正常区域,自相关前馈网络识别闪烁的周期性特征,小波方向注意模块利用高频信息精确定位并恢复闪烁区域,最终实现彻底的条纹去除。
Q3:这项技术什么时候能在手机上使用?
A:虽然论文没有明确的商业化时间表,但考虑到Flickerformer的高效设计和OPPO研究院的参与,这项技术有望在不久的将来集成到相机应用中,让普通用户能够轻松获得无闪烁的高质量照片。
相关文章
2026-04-090阅读
2026-04-090阅读
2026-04-090阅读
2026-04-090阅读
2026-04-090阅读
2026-04-090阅读
2026-04-090阅读
2026-04-090阅读
2026-04-090阅读
2026-04-090阅读