(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210952212.4 (22)申请日 2022.08.09 (71)申请人 OPPO广东移动通信有限公司 地址 523860 广东省东莞 市长安镇乌沙海 滨路18号 (72)发明人 董建磊　 (74)专利代理 机构 华进联合专利商标代理有限 公司 44224 专利代理师 王程 (51)Int.Cl. G06T 7/90(2017.01) G06V 10/80(2022.01) (54)发明名称 色差计算方法、 装置、 电子设备和存储介质、 产品 (57)摘要 本申请涉及一种色差计算方法、 装置、 电子 设备和存储介质、 产品， 该方法包括： 从至少两帧 待处理图像中分别提取色彩特征； 色彩特征为基 于待处理图像上不同深度的色彩特征所生成的。 对至少两帧待处理图像的色彩特征进行色差融 合， 生成融合后的色差特征， 将融合后的色差特 征输入至色差预测网络中进行色差预测， 生成至 少两帧待处理图像 之间的目标色差值。 由于从待 处理图像上所提取的色彩特征为基于不同深度 的色彩特征所生成的特征， 因此， 对至少两帧待 处理图像的色彩特征进行色差融合， 所生成的融 合后的色差特征也可以兼顾 图像中不同深度的 色差信息。 最后， 将融合后的色差特征输入至色 差预测网络中进行色差预测， 提高了色差预测的 准确性。 权利要求书2页 说明书13页 附图6页 CN 115375780 A 2022.11.22 CN 115375780 A 1.一种色差计算方法， 其特 征在于， 所述方法包括： 从至少两帧待处理图像中分别提取色彩特征； 所述色彩特征为基于所述待处理图像上 不同深度的色彩特 征所生成的； 对所述至少两帧待处 理图像的色彩特 征进行色差融合， 生成融合后的色差特 征； 将所述融合后的色差特征输入至色差预测网络 中进行色差预测， 生成所述至少两帧待 处理图像之间的目标色差值。 2.根据权利要求1所述的方法， 其特征在于， 所述不同深度的色彩特征包括第 一色彩特 征及第二色彩特征， 所述第一色彩特征 的深度小于所述第二色彩特征 的深度； 所述从至少 两帧待处 理图像中分别提取色彩特 征， 包括： 针对所述至少两帧待处理图像中的各待处理图像， 从所述待处理图像中提取所述第 一 色彩特征及所述第二色彩特 征； 对所述第一色彩特征及所述第 二色彩特征进行特征融合， 生成各所述待处理图像的色 彩特征。 3.根据权利要求2所述的方法， 其特征在于， 所述从所述待处理图像中提取所述第 一色 彩特征及所述第二色彩特 征， 包括： 将所述待处理图像输入至第一特征提取网络中进行特征提取， 生成所述第一色彩特 征； 将所述待处理图像输入至第二特征提取网络中进行特征提取， 生成所述第二色彩特 征； 其中， 所述第一特征提取网络的隐含层的层数小于所述第二特征提取网络的隐含层的 层数， 且所述第一特征提取网络中卷积层的卷积核大小大于所述第二特征提取网络中卷积 层的卷积核大小。 4.根据权利要求3所述的方法， 其特征在于， 所述将所述待处理图像输入至第 二特征提 取网络中进行 特征提取， 生成所述第二色彩特 征， 包括： 对所述待处 理图像进行 下采样， 生成下采样图像； 将所述下采样图像输入至所述第二特征提取网络中进行特征提取， 生成中间色彩特 征； 对所述中间色彩特征进行上采样， 生成第二色彩特征； 所述第二色彩特征的特征维度 与所述第一色彩特 征的特征维度相同。 5.根据权利要求2 ‑4中任一项所述的方法， 其特征在于， 所述对所述第 一色彩特征及所 述第二色彩特 征进行特征融合， 生成各 所述待处 理图像的色彩特 征， 包括： 对所述第一色彩特征及所述第 二色彩特征进行特征拼接及矩阵变换， 生成各所述待处 理图像的色彩特 征。 6.根据权利要求1 ‑4中任一项所述的方法， 其特征在于， 所述对所述至少两帧待处理图 像的色彩特 征进行色差融合， 生成融合后的色差特 征， 包括： 采用双线性池化方式对所述至少两帧待处理图像的色彩特征进行色差融合， 生成融合 后的色差特 征。 7.根据权利要求6所述的方法， 其特征在于， 所述采用双线性池化方式对所述至少两帧 待处理图像的色彩特 征进行色差融合， 生成融合后的色差特 征， 包括： 对所述至少两帧待处 理图像的色彩特 征进行初步色差融合， 生成初始色差特 征；权　利　要　求　书 1/2 页 2 CN 115375780 A 2对所述初始色差特征在两个不同的方向上进行池化处理， 生成与所述两个不同的方向 分别对应的池化结果， 基于所述池化结果 生成融合后的色差特 征。 8.根据权利要求7所述的方法， 其特征在于， 所述对所述至少两帧待处理图像的色彩特 征进行初步色差融合， 生成初始色差特 征， 包括： 采用预设色差 融合方式对所述至少两帧待处理图像的色彩特征进行初步色差融合， 生 成初始色差特征； 所述预设色差融合方式包括对所述至少两帧待处理图像的色彩特征进 行 矩阵运算或对所述至少两帧待处 理图像的色彩特 征进行拼接处 理中的任意 一种。 9.根据权利要求1 ‑4中任一项所述的方法， 其特征在于， 所述色差预测网络包括至少两 个全连接层， 各所述全连接层之间通过激活函数连接； 所述将所述融合后的色差特征输入 至色差预测网络中进行色差预测， 生成所述至少两帧待处 理图像之间的目标色差值， 包括： 将所述融合后的色差特征输入至第一个全连接层中进行处理， 生成第一色差预测结 果； 将所述第一色差预测结果输入至所述激活函数中进行处 理， 生成第二色差预测结果； 循环执行将所述第二色差预测结果作为新的所述融合后的色差特征输入至下一个所 述全连接层以及所述激活函数中进行处理的步骤， 直到遍历完所述全连接层， 生成所述至 少两帧待处 理图像之间的目标色差值。 10.一种色差计算装置， 其特 征在于， 所述装置包括： 色彩特征提取模块， 用于从至少两帧待处理图像中分别提取色彩特征； 所述色彩特征 为基于所述待处 理图像上不同深度的色彩特 征所生成的； 色差融合模块， 用于对所述至少两帧待处理图像的色彩特征进行色差融合， 生成融合 后的色差特 征； 色差预测模块， 用于将所述融合后的色差特征输入至色差预测网络中进行色差预测， 生成所述至少两帧待处 理图像之间的目标色差值。 11.一种电子设备， 包括存储器及处理器， 所述存储器中储存有计算机程序， 其特征在 于， 所述计算机程序被所述处理器执行时， 使得所述处理器执行如权利要求1至9中任一项 所述的色差计算方法的步骤。 12.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序 被处理器执行时实现如权利要求1至9中任一项所述的色差计算方法的步骤。 13.一种计算机程序产品， 包括计算机程序， 其特征在于， 该计算机程序被处理器执行 时实现权利要求1至9中任一项所述的色差计算方法的步骤。权　利　要　求　书 2/2 页 3 CN 115375780 A 3