首页> 中国专利> 基于光滑塔克分解与高阶张量汉克化的图像修复方法

基于光滑塔克分解与高阶张量汉克化的图像修复方法

摘要

基于光滑塔克分解与高阶张量汉克化的图像修复方法,包括以下步骤:1)输入待修复图像确定图像待修复区域;2)构建高阶张量汉克化与离散全变分模型;3)结合步骤2)构建光滑塔克分解与高阶张量汉克化的图像修复模型,对彩色图像进行修复,最终重构输出高质量视觉数据图像本发明的优点是:兼顾了图像处理的效率和图像还原的精确性。

著录项

  • 公开/公告号CN112241938A

    专利类型发明专利

  • 公开/公告日2021-01-19

    原文格式PDF

  • 申请/专利权人 浙江工业大学;

    申请/专利号CN202010846940.8

  • 申请日2020-08-21

  • 分类号G06T5/00(20060101);G06T7/11(20170101);

  • 代理机构33201 杭州天正专利事务所有限公司;

  • 代理人王兵

  • 地址 310014 浙江省杭州市下城区潮王路18号

  • 入库时间 2023-06-19 09:36:59

说明书

技术领域

本发明涉及图像处理领域,具体涉及一种图像修复方法。

背景技术

随着现代网络技术、计算机通信以及采样技术的快速发展,待分析的数据大都具有很复杂的结构。通常在图像数据采集的过程中会受到各种外界因素的影响而导致视觉质量较差,例如,硬件设备损坏、光照和电磁波干扰等影响。在此情况下,也可能因为设备或者时间限制,无法直接重新获取相关图像数据。因此,对于目前所存在的各种模糊、低分辨率、部分像素丢失等图像进行修复以获得高质量视觉数据是一个具有实际应用价值的研究内容。

图像修复是典型的图像处理不适定问题,它可以表述为一个缺失值估计问题。缺失值估计的核心问题在于如何建立已知元素和未知元素之间的关系,而添加其他先验信息可以有效的解决图像修复问题,例如,局部平滑先验,非局部自相似先验,稀疏先验,低秩先验和稀疏梯度先验等。近年来,有许多学者提出了不同的图像修复算法,主要分为三类:1)基于变分微分方程的图像修复;2)基于纹理合成的图像修复;3)混合方法。Bertalmia等人首次提出基于微分方程的图像修复方法,其通过对待修复区域的边界进行不同方向的扩散将未破损区域的信息扩散到待修补的区域的内部来对图像进行修复。这种方法仅对图像中仅有较小区域的破损才具有较好的修复效果。Chan等人提出了全变分(Total Variation,TV)算法,其最大优点是有效克服了线性滤波在抑制噪声的同时平滑图像边缘,但是TV算法的最大缺陷是不能满足人类视觉中的“不连续”原则。曲率驱动扩散 (Curvature-DriveDiffusion,CDD)算法,是对TV算法的一种改进算法,其目的是解决在TV算法中视觉不连续问题。Criminisi等人提出了基于样本块的图像修复算法,其利用待修复区域的边界信息计算待修复块的优先级,然后在图像未破损区域寻找与待修复块相似度最大的样本块来进行填充修补。该算法对大面积的破损区域有较好的修复效果,但是修复时间过长降低了算法效率。

随着深度神经网络架构的最新发展,深度学习方法在对象检测,图像分类和图像降噪等计算机视觉任务中具有重要意义。但是,基于深度学习的方法需要大量标记的样本,这些样本难以获取并消耗大量的计算量,因此传统方法的研究和应用仍然是必要的,并且有很大的改进空间。

发明内容

本发明要克服现有技术的上述问题,提出基于光滑塔克分解与高阶张量汉克化的图像修复方法。,

为解决图像数据失真的视觉处理问题,本发明将汉克结构化技术扩展至高阶张量视觉数据中,并充分考虑图像的本质属性,引入离散全变分(Discrete Total Variation,TV

本发明解决其技术问题所采用的技术方案包括以下:

基于光滑塔克分解与高阶张量汉克化的图像修复方法,包括如下步骤:

步骤1)输入待修复图像

步骤2)构建高阶张量汉克化与离散全变分模型;

步骤3)结合步骤2)构建的图像修复模型,对彩色图像进行修复,最终重构输出高质量视觉数据图像

本发明的有益效果主要表现在:本文把汉克结构化技术扩展应用至张量领域中。考虑到矩阵的低秩性、光滑性同样存在于张量中,首先将数据嵌入到高维张量中,经过多维线性复制和多维的折叠线性操作将张量汉克结构化;其次考虑数据光滑性,引入离散全变分因子进行模型优化,最终通过低秩增量算法来更好的找到最佳秩,其算法具有良好的收敛性并且更精确地还原了自然图像。

本发明的优点是:兼顾了图像处理的效率和图像还原的精确性。

附图说明

图1是待修复区域示意图;

图2是像素丢失率90%的自然图像;

图3是利用本发明修复后的自然图像;

图4是本发明的方法流程图。

具体实施方式

下面结合附图进一步说明本发明的技术方案。

基于光滑塔克分解与高阶张量汉克化的图像修复方法,包括如下步骤:

步骤1)输入待修复图像

步骤2)构建高阶张量汉克化与离散全变分模型;

步骤3)结合步骤2)构建的图像修复模型,对彩色图像进行修复,最终重构输出高质量视觉数据图像

所述步骤2)的处理过程如下:

(2-1)高阶汉克结构化图像修复模型定义如下:

式中,

其中fold

(2-2)离散全变分模型定义如下:

x表示一个二维图像,v表示梯度;

令v的l

充分利用低秩互补信息和潜在的平滑特性。

所述步骤3)的处理过程如下:

(3-1)构建基于光滑塔克分解与高阶张量汉克化的图像修复模型,其定义如下

式中,λ表示平衡参数,

(3-2)公式(6)的求解取决于变量

算法1:

输入:待修复数据

输出:分解因子

3.2.1初始化分解因子分解因子U

3.2.2当n=1,…,2N时

3.2.3

3.2.4U

3.2.5

(3-3)算法1描述了一种基于ALS的传统塔克因子分解,其计算和存储瓶颈是更新因数矩阵U

由于公式(7)的复杂性,使用交替近端梯度算法(Alternating ProximalGradient Method,APG)算法来求解上式,

令G(v)=λ||v||

因此,其可以转换为对偶问题:

最终子问题U

算法2:

3.3.1τ,μ>0;θ∈[0,1];k=0

3.3.2初始化U

3.3.3

3.3.4

3.3.5

3.3.6k=k+1

其中prox

(3-4)另外,基于塔克的方法可以通过塔克的秩最小化来获得令人满意的效果,但是很难设置适当的秩(R

其中ε表示误差阈值;令

E(1)≥E(2)≥…≥E(R

最终,使用低秩增量优化基于光滑塔克分解与高阶张量汉克化的图像修复模型,如算法3所述

算法3:

输入:待修复数据

输出:分解因子

3.4.1初始化

3.4.2

3.4.3n′←n,R

3.4.4直到收敛条件:

(3-5)塔克分解因子重构输出

(3-6)类似地,汉克结构化张量

其中

(3-7)最终,输出高质量图像视觉数据

本说明书实施例所述的内容仅仅是对发明构思的实现形式的列举,本发明的保护范围不应当被视为仅限于实例所陈述的具体形式,本发明的保护范围也及于本领域技术人员根据本发明构思所能够想到的等同技术手段。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号