[发明专利]多方向加权TV和非局部自相似性正则化图像去模糊方法在审

专利信息
申请号: 201510848446.4 申请日: 2015-11-26
公开(公告)号: CN105427259A 公开(公告)日: 2016-03-23
发明(设计)人: 杨爱萍;魏宝强;田玉针;何宇清;张越 申请(专利权)人: 天津大学
主分类号: G06T5/00 分类号: G06T5/00
代理公司: 天津市北洋有限责任专利代理事务所 12201 代理人: 李丽萍
地址: 300072*** 国省代码: 天津;12
权利要求书: 查看更多 说明书: 查看更多
摘要: 发明公开了一种多方向加权TV和非局部自相似性正则化图像去模糊方法,主要是利用本发明所特有的将边缘检测加入加权TV去模糊模型,同时融入非局部自相似性正则化项而得到的基于边缘检测的多方向加权TV和非局部自相似性正则化的图像去模糊模型对模糊图像f、清晰图像x、辅助变量u三个子问题进行求解后,对参数λ、ν进行迭代更新,循环执行直到得到最优解,即将一模糊图像去模糊处理后得到其清晰图像x。实验结果表明,采用本发明对模糊图像进行去模糊处理后能达到很好地去模糊效果,和现有技术相比,由于采取了边缘检测,能对边缘处更好的处理,不仅消除了伪边缘,且能更好地保留图像的纹理和细节;同时提高了图像的SNR,具有更好的视觉效果。
搜索关键词: 多方 加权 tv 局部 相似性 正则 图像 模糊 方法
【主权项】:
一种多方向加权TV和非局部自相似性正则化图像去模糊方法,包括以下步骤:步骤1:建立基于边缘检测的多方向加权TV和非局部自相似性正则化的图像去模糊模型,包括:步骤1‑1:建立清晰图像x的多方向加权TV去模糊模型:模糊图像f的数学模型为:f=Kx+n          (1)式(1)中,f为模糊图像,x为清晰图像,K是非线性算子,n为加性噪声;TV去模糊模型为:<mrow><munder><mi>min</mi><mi>x</mi></munder><mi>T</mi><mi>V</mi><mrow><mo>(</mo><mi>x</mi><mo>)</mo></mrow><mo>+</mo><mfrac><mi>&mu;</mi><mn>2</mn></mfrac><mo>|</mo><mo>|</mo><mi>K</mi><mi>x</mi><mo>-</mo><mi>f</mi><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>2</mn><mo>)</mo></mrow></mrow>式(2)中,第一项为TV正则项,第二项为保真项;μ为正则化参数,K为模糊矩阵;加权TV去模糊模型为:<mrow><munder><mi>min</mi><mi>x</mi></munder><mi>&tau;</mi><mi>W</mi><mi>T</mi><mi>V</mi><mrow><mo>(</mo><mi>x</mi><mo>)</mo></mrow><mo>+</mo><mfrac><mi>&mu;</mi><mn>2</mn></mfrac><mo>|</mo><mo>|</mo><mi>K</mi><mi>x</mi><mo>-</mo><mi>f</mi><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>3</mn><mo>)</mo></mrow></mrow>式(3)中,第一项为加权TV正则项,τ为一正参数;清晰图像x的多方向加权TV去模糊模型为:<mrow><mi>W</mi><mi>T</mi><mi>V</mi><mrow><mo>(</mo><mi>x</mi><mo>)</mo></mrow><mo>=</mo><munderover><mo>&Sigma;</mo><mrow><mi>i</mi><mo>=</mo><mn>1</mn></mrow><mi>&alpha;</mi></munderover><msub><mi>g</mi><mi>i</mi></msub><mo>|</mo><mrow><msub><mi>D</mi><mi>i</mi></msub><mi>x</mi></mrow><mo>|</mo><mo>:</mo><mo>=</mo><mo>&Sigma;</mo><msub><mi>g</mi><mrow><mo>(</mo><mi>i</mi><mo>,</mo><mi>j</mi><mo>)</mo><mo>~</mo><mo>(</mo><mi>k</mi><mo>,</mo><mi>l</mi><mo>)</mo></mrow></msub><mo>|</mo><mrow><msub><mi>x</mi><mrow><mi>i</mi><mo>,</mo><mi>j</mi></mrow></msub><mo>-</mo><msub><mi>x</mi><mrow><mi>k</mi><mo>,</mo><mi>l</mi></mrow></msub></mrow><mo>|</mo><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>4</mn><mo>)</mo></mrow></mrow>式(4)中,求和范围为8邻域内所有α个像素对(i,j)~(k,l);gi对应第i个像素对的权值,对于中心像素的8邻域中,当中心像素与和它最邻近的4个像素构成像素对时,当中心像素与其余的4个像素构成像素对时,对模糊图像进行边缘检测后,若像素对在边缘异侧,令gi=0;否则令gi保持原始值;步骤1‑2:建立清晰图像x融入非局部自相似性正则化去模糊模型:对于给定像素xi的滤波结果为搜索窗内相似像素的加权平均,像素xj相对于像素xi的权重wij如下:<mrow><msub><mi>w</mi><mrow><mi>i</mi><mi>j</mi></mrow></msub><mo>=</mo><mi>exp</mi><mrow><mo>(</mo><mo>-</mo><mo>|</mo><mo>|</mo><msub><mi>x</mi><mi>j</mi></msub><mo>-</mo><msub><mi>x</mi><mi>i</mi></msub><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup><mo>/</mo><msup><mi>h</mi><mn>2</mn></msup><mo>)</mo></mrow><mo>/</mo><msub><mi>c</mi><mi>i</mi></msub><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>5</mn><mo>)</mo></mrow></mrow>式(5)中,h为高斯核控制参数,ci为归一化参数,由此,建立一个非局部自相似性约束项为:<mrow><mi>N</mi><mi>R</mi><mrow><mo>(</mo><mi>X</mi><mo>)</mo></mrow><mo>=</mo><munder><mo>&Sigma;</mo><mrow><msub><mi>x</mi><mi>i</mi></msub><mo>&Element;</mo><mi>X</mi></mrow></munder><mo>|</mo><mo>|</mo><msub><mi>x</mi><mi>i</mi></msub><mo>-</mo><mi>N</mi><mi>L</mi><mi>F</mi><mrow><mo>(</mo><msub><mi>x</mi><mi>i</mi></msub><mo>)</mo></mrow><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup><mo>=</mo><munder><mo>&Sigma;</mo><mrow><msub><mi>x</mi><mi>i</mi></msub><mo>&Element;</mo><mi>X</mi></mrow></munder><mo>|</mo><mo>|</mo><msub><mi>x</mi><mi>i</mi></msub><mo>-</mo><msubsup><mi>w</mi><mi>i</mi><mi>T</mi></msubsup><msub><mi>k</mi><mi>i</mi></msub><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>6</mn><mo>)</mo></mrow></mrow>式(6)中,ki是一个列向量,包含xi搜索窗内的所有中心像素;wi是包括相应权重值wij的列向量;将式(6)写成如下矩阵形式:<mfenced open = "" close = ""><mtable><mtr><mtd><mrow><mi>N</mi><mi>R</mi><mrow><mo>(</mo><mi>X</mi><mo>)</mo></mrow><mo>=</mo><mo>|</mo><mo>|</mo><mi>x</mi><mo>-</mo><mi>W</mi><mi>x</mi><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup><mo>,</mo></mrow></mtd><mtd><mrow><mi>W</mi><mrow><mo>(</mo><mi>i</mi><mo>,</mo><mi>j</mi><mo>)</mo></mrow><mo>=</mo><mo>{</mo><mtable><mtr><mtd><mrow><msub><mi>w</mi><mrow><mi>i</mi><mi>j</mi></mrow></msub><mo>,</mo><mi>i</mi><mi>f</mi><mi> </mi><msub><mi>x</mi><mi>j</mi></msub><mo>&Element;</mo><msub><mi>k</mi><mi>i</mi></msub></mrow></mtd></mtr><mtr><mtd><mrow><mn>0</mn><mo>,</mo><mi>o</mi><mi>t</mi><mi>h</mi><mi>e</mi><mi>r</mi><mi>w</mi><mi>i</mi><mi>s</mi><mi>e</mi></mrow></mtd></mtr></mtable><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>7</mn><mo>)</mo></mrow></mrow></mtd></mtr></mtable></mfenced>式(7)中,W为权重值wij对应的权重矩阵;步骤1‑3:建立基于边缘检测的多方向加权TV和非局部自相似性正则化的图像去模糊模型:由式(3)、式(4)及式(7),得到如下表示的基于边缘检测的多方向加权TV和非局部自相似性正则化的图像去模糊模型:<mrow><munder><mi>min</mi><mi>x</mi></munder><mi>&tau;</mi><munder><mo>&Sigma;</mo><mi>i</mi></munder><msub><mi>g</mi><mi>i</mi></msub><mo>|</mo><mrow><msub><mi>D</mi><mi>i</mi></msub><mi>x</mi></mrow><mo>|</mo><mo>+</mo><mi>&epsiv;</mi><mo>|</mo><mo>|</mo><mi>x</mi><mo>-</mo><mi>W</mi><mi>x</mi><mo>|</mo><msup><mo>|</mo><mn>2</mn></msup><mo>+</mo><mfrac><mi>&mu;</mi><mn>2</mn></mfrac><mo>|</mo><mo>|</mo><mi>K</mi><mi>x</mi><mo>-</mo><mi>f</mi><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>8</mn><mo>)</mo></mrow></mrow>式(8)中,ε为一正参数,令yi=Dix,令非局部正则化项中的u=x,u为辅助变量,将式(8)转变成:<mrow><munder><mi>min</mi><mi>x</mi></munder><mi>&tau;</mi><munder><mo>&Sigma;</mo><mi>i</mi></munder><msub><mi>g</mi><mi>i</mi></msub><mo>|</mo><msub><mi>y</mi><mi>i</mi></msub><mo>|</mo><mo>+</mo><mi>&epsiv;</mi><mo>|</mo><mo>|</mo><mi>u</mi><mo>-</mo><mi>W</mi><mi>u</mi><mo>|</mo><msup><mo>|</mo><mn>2</mn></msup><mo>+</mo><mfrac><mi>&mu;</mi><mn>2</mn></mfrac><mo>|</mo><mo>|</mo><mi>K</mi><mi>x</mi><mo>-</mo><mi>f</mi><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup><mo>,</mo><mi>s</mi><mo>.</mo><mi>t</mi><mo>.</mo><msub><mi>y</mi><mi>i</mi></msub><mo>=</mo><msub><mi>D</mi><mi>i</mi></msub><mi>x</mi><mo>,</mo><mi>u</mi><mo>=</mo><mi>x</mi><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>9</mn><mo>)</mo></mrow></mrow>式(9)对应的增广拉格朗日方程为:<mrow><mtable><mtr><mtd><mrow><msub><mi>L</mi><mi>A</mi></msub><mrow><mo>(</mo><mi>y</mi><mo>,</mo><mi>u</mi><mo>,</mo><mi>x</mi><mo>)</mo></mrow><mo>=</mo><mi>&tau;</mi><mo>|</mo><mo>|</mo><mi>y</mi><mo>|</mo><msub><mo>|</mo><mn>1</mn></msub><mo>-</mo><msup><mi>&lambda;</mi><mi>T</mi></msup><mrow><mo>(</mo><mi>D</mi><mi>x</mi><mo>-</mo><mi>y</mi><mo>)</mo></mrow><mo>+</mo><mfrac><msub><mi>&beta;</mi><mn>1</mn></msub><mn>2</mn></mfrac><mo>|</mo><mo>|</mo><mi>D</mi><mi>x</mi><mo>-</mo><mi>y</mi><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup><mo>+</mo><mi>&epsiv;</mi><mo>|</mo><mo>|</mo><mi>u</mi><mo>-</mo><mi>W</mi><mi>u</mi><mo>|</mo><mo>|</mo></mrow></mtd></mtr><mtr><mtd><mrow><mo>-</mo><msup><mi>&nu;</mi><mi>T</mi></msup><mrow><mo>(</mo><mi>u</mi><mo>-</mo><mi>x</mi><mo>)</mo></mrow><mo>+</mo><mfrac><msub><mi>&beta;</mi><mn>2</mn></msub><mn>2</mn></mfrac><mo>|</mo><mo>|</mo><mi>u</mi><mo>-</mo><mi>x</mi><mo>|</mo><mo>|</mo><mo>+</mo><mfrac><mi>&mu;</mi><mn>2</mn></mfrac><mo>|</mo><mo>|</mo><mi>K</mi><mi>x</mi><mo>-</mo><mi>f</mi><mo>|</mo><msubsup><mo>|</mo><mn>2</mn><mn>2</mn></msubsup></mrow></mtd></mtr></mtable><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>10</mn><mo>)</mo></mrow></mrow>从而将式(9)转换为分别对模糊图像f、清晰图像x、辅助变量u的求解;β1、β2分别为惩罚参数,β1=β2≡10,λ和ν分别为参数;步骤2:输入模糊图像f;步骤3:对步骤1获得基于边缘检测的多方向加权TV和非局部自相似性正则化的图像去模糊模型的参数设定初值,包括:式(8)中,模糊矩阵K为单位矩阵;令正则化参数μ=0.05/σ2,其中,σ为模糊核标准差,μ取值范围为[102,105];参数τ和参数ε的取值范围均分别为[2,5];式(10)中,λ=1,ν=1,x=f;步骤4:利用式(8)对模糊图像f进行边缘检测,确定像素i对应像素对的权值gi,当像素对位于边缘异侧时令gi=0,否则令gi为原始值;步骤5:利用式(11)和式(12)对式(10)中模糊图像f、清晰图像x、辅助变量u的求解进行迭代更新,其中利用式(13)判断迭代结果是否收敛;<mrow><mfenced open = "{" close = ""><mtable><mtr><mtd><mrow><msup><mi>y</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>&LeftArrow;</mo><mi>arg</mi><mi> </mi><msub><mi>min</mi><mi>y</mi></msub><msub><mi>L</mi><mi>A</mi></msub><mrow><mo>(</mo><msup><mi>x</mi><mi>k</mi></msup><mo>,</mo><mi>y</mi><mo>,</mo><msup><mi>u</mi><mi>k</mi></msup><mo>,</mo><msup><mi>&lambda;</mi><mi>k</mi></msup><mo>,</mo><msup><mi>&nu;</mi><mi>k</mi></msup><mo>)</mo></mrow><mo>,</mo></mrow></mtd></mtr><mtr><mtd><mrow><msup><mi>x</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>&LeftArrow;</mo><msub><mi>argmin</mi><mi>x</mi></msub><msub><mi>L</mi><mi>A</mi></msub><mrow><mo>(</mo><mi>x</mi><mo>,</mo><msup><mi>y</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>,</mo><msup><mi>u</mi><mi>k</mi></msup><mo>,</mo><msup><mi>&lambda;</mi><mi>k</mi></msup><mo>,</mo><msup><mi>&nu;</mi><mi>k</mi></msup><mo>)</mo></mrow><mo>,</mo></mrow></mtd></mtr><mtr><mtd><mrow><msup><mi>u</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>&LeftArrow;</mo><msub><mi>argmin</mi><mi>u</mi></msub><msub><mi>L</mi><mi>A</mi></msub><mrow><mo>(</mo><msup><mi>x</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>,</mo><msup><mi>y</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>,</mo><mi>u</mi><mo>,</mo><msup><mi>&lambda;</mi><mi>k</mi></msup><mo>,</mo><msup><mi>&nu;</mi><mi>k</mi></msup><mo>)</mo></mrow><mo>.</mo></mrow></mtd></mtr></mtable></mfenced><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>11</mn><mo>)</mo></mrow></mrow>其中,λk,νk分别表示第k‑1次迭代后更新的λ和ν,k为迭代控制变量;yk+1、xk+1、uk+1表示第k次迭代后y、x、u的结果;<mrow><mo>{</mo><mtable><mtr><mtd><mrow><msup><mi>&lambda;</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>=</mo><msup><mi>&lambda;</mi><mi>k</mi></msup><mo>-</mo><msub><mi>&beta;</mi><mn>1</mn></msub><mi>&gamma;</mi><mrow><mo>(</mo><msup><mi>Dx</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>-</mo><msup><mi>y</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>)</mo></mrow></mrow></mtd></mtr><mtr><mtd><mrow><msup><mi>&nu;</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>=</mo><msup><mi>&nu;</mi><mi>k</mi></msup><mo>-</mo><msub><mi>&beta;</mi><mn>2</mn></msub><mi>&gamma;</mi><mrow><mo>(</mo><msup><mi>x</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>-</mo><msup><mi>u</mi><mrow><mi>k</mi><mo>+</mo><mo>!</mo></mrow></msup><mo>)</mo></mrow></mrow></mtd></mtr></mtable><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>12</mn><mo>)</mo></mrow></mrow>式(12)中,γ是常数,γ的取值范围为(0,2);收敛条件为:<mrow><mfrac><mrow><mo>|</mo><mo>|</mo><msup><mi>x</mi><mrow><mi>k</mi><mo>+</mo><mn>1</mn></mrow></msup><mo>-</mo><msup><mi>x</mi><mi>k</mi></msup><mo>|</mo><mo>|</mo></mrow><mrow><mi>max</mi><mo>{</mo><mo>|</mo><mo>|</mo><msup><mi>x</mi><mi>k</mi></msup><mo>|</mo><mo>|</mo><mo>,</mo><mn>1</mn><mo>}</mo></mrow></mfrac><mo>&lt;</mo><mi>&delta;</mi><mo>-</mo><mo>-</mo><mo>-</mo><mrow><mo>(</mo><mn>13</mn><mo>)</mo></mrow></mrow>其中,δ为正常数,取值为{10‑4,10‑3,10‑2};迭代更新至满足收敛条件,输出去模糊图像xk即为清晰图像x。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津大学,未经天津大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/patent/201510848446.4/,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top