ICLR 2026 | 救命，手机Live Photo重选封面终于不糊了|photo|单帧|手机

作者团队来自 vivo BlueImage Lab（蓝图影像创新实验室），该实验室主要负责移动影像算法创新，持续突破移动影像的技术天花板。工作重点包括图像 / 视频处理、交互、增强、多模态理解大模型等方面的技术前沿探索。他们致力于提升 vivo 移动影像的算法能力，使用户能够拍摄出更加清晰、美观的照片和视频，并为用户提供更加丰富便捷的影像体验。

在手机摄影中，Live Photo 早已成为一种常见而成熟的拍摄形式，它不再只是定格一个画面，而是记录「此时此刻」的状态与情绪，捕捉那些转瞬即逝的精彩瞬间。它由一张高清封面图和一段短视频共同组成，既保留了照片的清晰质感，也记录了拍摄瞬间前后的动态信息。

在日常使用中，用户往往希望从这段视频中重新选择某一帧作为封面，以捕捉更理想的表情、动作或时机。然而，在实际使用中，问题也随之显现：由于视频本身分辨率低、压缩严重，重选的封面帧往往画质不足，难以满足「封面级」的观感要求。

这一看似简单的需求，实际上仍缺乏有效的技术解决方案。现有单帧或参考修复方法难以处理来自同一场景却存在时间偏移的参考图像；而视频级方法又往往围绕整段视频序列设计，难以高效地服务于单帧封面修复。

图 1: 真实 Live Photo 场景下机内重选封面帧与 LiveMoments 的效果对比

近日，vivo 蓝图实验室与南开大学联合发布了一项新的研究工作，首次系统性地定义了「基于原始封面帧参考的 Live Photo 重选封面帧修复」这一任务，并为该任务提供了创新性的解决方案。该工作已正式被国际机器学习顶级会议 ICLR 2026 接收。

通过利用 Live Photo 中自带的高清原始封面帧作为参考，LiveMoments 能够在保持内容一致性的同时，显著提升重选封面帧的画质，使其真正达到可作为封面的视觉质量。

论文标题：LiveMoments: Reselected Key Photo Restoration in Live Photos via Reference-guided Diffusion
论文链接：https://arxiv.org/pdf/2604.12286
论文主页：https://clara7-c.github.io/livemoments/
代码链接：https://github.com/OpenVeraTeam/LiveMoments

全新任务：为 Live Photo 带来更清晰的重选封面帧体验

不同于传统针对单帧图像或整段视频的参考修复任务，研究团队从 Live Photo 的真实使用场景出发，提出了重选封面帧修复（Reselected Key Photo Restoration）这一新问题。即利用原始封面帧作为高质量参考，引导低质量重选帧的修复过程，从而提升其视觉质量。

图 2: 参考超分与 Live Photo 重选封面帧修复的任务对比

这一任务可以看作参考图像超分（RefSR）的一个子问题，但与传统参考图像超分（RefISR）依赖来自外部数据库的高质量参考图不同，该任务使用来自同一 Live Photo 序列的原始封面帧，保证了内容一致性。同时，相比参考视频超分（RefVSR）需要处理整段视频、甚至依赖多摄像头数据的复杂设定，该任务只关注单张重选封面帧的修复，更贴近实际需求，也更加高效。

然而，这一设定也带来了新的挑战：Live Photo 中普遍存在的运动错位，以及原始封面与重选帧之间显著的质量差异，使得现有参考超分与单帧超分方法难以直接适用。

而研究团队所提出的 LiveMoments 通过 Live Photo 中天然存在的高清原始封面帧作为参考引导重选封面帧的修复，能够在显著提升画质的同时，有效避免结构失真与细节不一致等问题。同时，该模型结合了扩散模型所具备的强生成先验，并针对 Live Photo 场景中广泛存在的运动错位设计了对齐模块，在复杂动态场景下依然表现出良好的稳定性与鲁棒性。

技术逻辑：参考引导下的重选封面帧修复

针对 Live Photo 中的重选封面帧修复任务，LiveMoments 的整体设计围绕两个关键问题展开：如何稳定实现细节迁移与修复，以及如何应对 Live Photo 中广泛存在的运动场景。