100、语义分割驱动的局部调优：场景感知的影像增强架构
一个让我失眠三天的调试问题
去年夏天，某款旗舰手机项目的夜景模式调试卡在了一个诡异的问题上。全局ISP pipeline跑出来的效果，在实验室的Macbeth色卡和标准低照度场景下表现完美，SNR、色差、纹理保留度全部达标。但到了真实用户场景——尤其是那种路灯下带大面积天空、地面有积水反光的夜景——画面总有一种说不出的“脏”。不是噪点，不是偏色，是那种局部过曝和局部欠曝同时存在、暗部细节被强行提亮后出现的塑料感。
我盯着示波器看了三天，发现问题的本质是：全局调优策略在复杂场景中失效了。同一个增益曲线，对天空区域是过曝，对地面阴影区域是欠曝。传统的3A统计——基于整帧的直方图和亮度均值——根本无法区分“这是天空”还是“这是人脸”。你调亮了暗部，天空就爆了；你压了高光，人脸就黑了。
这就是语义分割进入影像系统的真正驱动力：不是炫技，是不得不做。
场景感知：从全局统计到像素级理解
传统ISP的调优逻辑是“一视同仁”的。AEC（自动曝光控制）看整帧平均亮度，AWB（自动白平衡）看全图色温分布，Gamma曲线对全图施加同样的映射。这种架构在场景单一、光照均匀的环境下没问题，但一旦遇到复杂场景，就像用一把尺子量所有人的脚。
语义分割带来的改变是：让ISP知道“哪里是哪里”。一张图里，天空、人脸、草地、建筑、车辆各自有完全不同的视觉偏好和噪声容忍度。天空需要平滑的渐变和准确的色温，人脸需要自然的肤色和适中的对比度，草地可以接受一定程度的纹理增强但讨厌过饱和的