187、多帧 AI 合成技术：手持超级夜景、光绘模式的 AI 融合与对齐

187、多帧 AI 合成技术：手持超级夜景、光绘模式的 AI 融合与对齐一、从一次“鬼影”调试说起去年Q2，某旗舰机项目进入Tuning阶段，我负责夜景多帧合成模块。某天测试反馈：手持超级夜景模式下，拍摄路灯场景，画面中出现了诡异的“重影”——不是运动模糊，而是像两张不同曝光的照片没对齐，边缘有半透明拖尾。更诡异的是，光绘模式拍车流，灯轨本该是连续光带，结果断成了几截，中间还有像素级的错位。我第一反应是“运动补偿没跑通”。但查了ISP log，光流估计的置信度分数都在0.85以上，按理说对齐质量不差。后来把中间帧dump出来逐帧比对，才发现问题：多帧合成时，参考帧选的是第一帧，但第一帧恰好是手抖最严重的瞬间——用户按下快门时有个下意识的“下压”动作。后续帧虽然对齐了，但参考帧本身的模糊被AI增强放大了，导致合成结果像“糊底上叠清晰层”。这个坑让我意识到：多帧AI合成，核心不在“融合”而在“对齐”，而对齐的起点——参考帧选择——往往被忽视。今天这篇笔记，就围绕手持超级夜景和光绘模式，聊聊多帧AI融合与对齐的工程实践。二、多帧合成的“三座大山”：对齐、融合、参考帧选择1. 对齐：不是所有像素都值得对齐传统多帧对齐用光流或块匹配，但夜景和光绘场景有本质区别：手持超级夜景：场景静止，但手抖引入亚像素级平移+旋转。对齐目标是“让每帧的静态物体严格重合”。