自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(33)
  • 收藏
  • 关注

原创 Residual Feature Aggregation Network for Image Super-Resolution

近期在跑自己的论文模型所以论文看的比较少,博客也没怎么更,。。。这篇论文是今年cvpr的一篇超分论文,提出了传统的残差网络并未充分利用各层残差信息,因此该文章提出了一种将各层残差信息经过跳转链接直接传到后层的网络结构(这里想吐槽一下。。。这跟密集残差结构真的很像。。。)总体网络结构也很简单另外文章里提出了一种增强的空间注意力机制,并把注意力放在上文中的RB块中,该注意力机制首先通过1*1conv进行降维,后通过步长卷积(其实就是一个步长为2的卷积。。。此处论文中并未说明步长卷积的卷积核大小,代码也

2020-08-22 15:45:04 983 1

原创 Image Super-Resolution via Attention based Back Projection Networks

这篇文章对反馈链接进行了一些改进,针对sr无法在较大的上采样倍数时无法表现出很好的图像效果的问题,Deep Back-Projection Networks for Single Image Super-resolution这篇文章提出了反馈链接思想,本文对反馈链接进行了部分改进,上采样的反馈链接输入为323232的图像,先经过deconv上采样后通过conv进行下采样会原来的大小,此时会有像素损失,用原本的低分辨率特征图减经过上下采样后的特征图得到的残差图文章中认定为只经过一次上采样而丢失的信息(其实下采

2020-07-24 17:34:42 459

原创 Edge-Informed Single Image Super-Resolution

这篇文章提出了一种将图像结构信息和纹理信息分开处理的单图像超分辨率方法,通过这种方法将单图像超分辨率转换为图像修复。该文章首先分析了传统的双三次插值的弊端:原标准的HR图像是有边缘信息的高清图像,2倍下采样时四个像素合成一个像素点使下采样后的图片丢失了高频边缘的结构信息和方向信息,后双三次插值得到的2倍恢复的原图彻底丢失了高频边缘的结构信息和方向信息。该文章提出了一种,即通过插值法将图像放大2倍原来为利用相邻两像素点生成一个像素值,而深度学习最大的好处是可学习,因此借用插值法的原理我们将原lr图的每

2020-07-10 23:19:57 579

原创 Image Super-Resolution by Neural Texture Transfer

这篇文章提出现有单图像超分辨率过程中,由于低分辨率图像中的重要信息丢失会导致超分质量不佳,因此提出了REF-SR的方法,利用与LR分布相同的HR图像辅助超分恢复纹理细节,但REF-SR所利用的引导超分的HR图像与LR 不对齐时会导致辅助功能大幅下降,因此这篇文章提出了一种新的风格迁移方式,保证在辅助hr图像与lr不相似时也能很好的恢复纹理。网络为了恢复各个不同尺度的纹理,分别用不同大小的辅助图像对不同尺度下的lr图像进行相似度度量和纹理迁移。...

2020-06-19 14:51:46 294 1

原创 PCA-SRGAN: Incremental Orthogonal Projection Discrimination for Face Super-resolution

这篇文章主要阐述了利用生成对抗网络对人脸进行超分辨率重建过程中,会产生图像失真等问题,并提出将PCA引入生成对抗网络中,利用PCA降维后不同维度的图片(含不同程度的纹理特征信息),维度越高信息频率越高,由此这篇文章的整体思路与利用sobel算子及利用梯度图恢复纹理信息的思路相似。首先对PCA进行说明,PCA多用于对数据进行降维处理,并提取出一系列数据中的主要数据。如上图数据主要分布在X2方向,X1方向的数据分布取值大致相同,这种情况下可以去掉X1这一维度去掉,从而实现了降维和提取主成分,然而现实中大部

2020-06-05 14:58:10 482

原创 Enhancing Perceptual Loss with Adversarial Feature Matching for Super-Resolution

这篇文章提出的问题是感知损失中由于一开始vgg训练的目的与超分目的不符,导致用感知损失约束的网络会产生不符合原本分布的HR伪影。vgg一开始训练的目的是为了进行分类任务这导致在前面30层中利用conv进行特征提取时对特征很敏感,即输入的特征图的某部分特征会为了去归为某一类而导致产生的特征图有不符合原分布的特征。这篇文章提出的解决办法为利用对抗网络中间层生成的特征作损失约束网络去除伪影,对抗网络为了区分真实的HR和生成的SR图像在中间层很好的提取到了HR和SR的特征信息,因此利用其中间层的特征信息可以很好

2020-05-24 10:57:06 277

原创 Unsupervised Learning for Real-World Super-Resolution

这篇论文是19年的一篇通过非成对图像的思想解决超分中采用双三次插值构造数据集训练的网络对真实世界的LR图像泛化能力不强的问题。在此我用20年最新的非成对图像超分论文与这篇论文进行比较讨论,首先这篇论文与20年的最大区别在于将退化过程与超分过程分开进行训练,因此在这篇论文中退化的学习过程是无标签的,退化过程包含两个可学习的层,一个为G(学习生成真实世界LR图像的过程,即通过对抗向LR图像添加模糊核和噪声),一个为F(学习生成双三次插值得到图像的过程,即通过对抗去噪去模糊的过程),此处px、py、pz分别代表

2020-05-23 21:52:48 1297 4

原创 Unpaired Image Super-Resolution using Pseudo-Supervision

这篇文章提出了现有超分网络构造数据集时,通常采用将HR图像直接下采样或加模糊核和噪声后下采样来构造LR图像,但是这样构造的LR图像与真实LR图像有较大区别,因此使用此种方式构造的LR-HR数据集训练出的网络对真实世界的lr图片没有很好的泛化能力,往往会造成生成HR图像效果差等问题,为了解决这个问题,这篇论文提出了一种非成对的对抗网络。盲超过程中的非成对的对抗有两种方式:一种是直接对抗,LR源图像经过生成器生成HR图像与不成对的标签HR图像做对抗,使生成器学习上采样过程,使生成的HR图像尽量高清,这种方法的

2020-05-09 17:42:45 3082

原创 Unified Dynamic Convolutional Network for Super-Resolution with Variational Degradations

这篇文章首先介绍了现有现有超分网络大多通过利用HR图像直接进行双三次插值下采样得到LR图像来构成数据集,但使用这种方式构造出的数据集训练出的网络,对真实世界的含模糊核和噪声的低分辨率图片,泛化能力较差,生成的HR图像质量不佳,因此人们又提出在下采样构造lr图像的同时引入模糊核和噪声,但这种方式构造的数据集训练的网络也只能泛化几种模糊核和噪声的组合仍无法泛化真实世界的图片, Learning a S...

2020-04-28 20:32:48 1468

原创 Multi-Resolution Space-Attended Residual Dense Network for Single Image Super-Resolution

这篇文章提出了现有超分网络都是通过单通道进行超分,会造成超分图像模糊,深入解读就是在低分辨率上提取特征在较大上采样因子下可能会造成非线性映射差导致超分图像模糊的问题。这篇文章提出了一种多级多分辨率的深度提取结构来解决这个问题,思想类似于基于拉普拉斯金字塔的超分,都是将较大上采样因子分几步进行,不过这篇文章提出了一种新颖的思想:在采样的同时注意纹理细节,即越高的分辨率下越能注意到高频细节。深度提取...

2020-04-24 23:30:18 209

原创 Lightweight Feature Fusion Network for Single Image Super-Resolution

这篇文章提出了现有超分网络中间层参数过多阻碍了其在现实世界的应用,依据上述问题提出了一种轻量级特征融合网络,在减少中间层参数的同时,提取并融合了中间层的多尺度特征信息。网络总体架构分为四部分:浅特征提取层、深度轻量级特征提取层、注意力及softmax融合层、上采样重建层。33conv用来进行浅特征提取,在深度特征提取中采用类似于信息蒸馏的方法减少中间层的参数,浅特征层生成的48通道的特征图...

2020-04-17 10:28:54 799

原创 Structure-Preserving Super Resolution with Gradient Guidance

这是20年3月的一篇cvpr。该文章提出了现有的基于对抗思想的超分辨率重建网络虽然能够很好的恢复出逼近真实世界的纹理细节,但恢复出的图像常常会伴随这图像失真的问题,因此这篇文章将梯度图引入对抗网络中指导图像重建消除图像失真的问题。网络架构方面采用了两条支路构成网络,一条重建网络,一条生成梯度图的网络,利用lr图像生成lr的梯度图,此处M(·)与现有生成梯度图的方法一致,相邻行与列元素相减后进行...

2020-04-16 15:15:26 987

原创 Multi-Level Feature Fusion Mechanism for Single Image Super-Resolution

这篇论文提出了现有的SISR大多未能充分利用中间层的特征信息的问题,由此提出了一个特征跳转融合块,来解决这个问题。网络总体结构由四部分组成:浅特征提取层、深层融合特征提取层、重建层、深度特征提取层。输入的LR图片先经过33的卷积提取粗糙的特征,后经过浅特征提取层提取浅层特征,浅层特征经过深层融合特征提取层的到经过融合后的深层特征,各个深层特征融合提取块所得到的深层融合特征经过全局特征融合后,生成...

2020-04-10 15:34:33 395

原创 WEEK TEXTURE INFORMATION MAP GUIDED IMAGE SUPER-RESOLUTION WITH DEEP RESIDUAL NETWORKS

本文针对线性超分网络无法充分提取特征信息的问题,提出了一个基于图像边缘细节先验的方法,该论文在RCAN(通道注意力网络)基础上进行实验。在此本文创新点主要为通过sobel算子得出图像边缘高频纹理细节作为先验,使生成图像相对于传统超分辨率重建方法重建的图像具有更多的纹理细节,首先在此介绍下sobel算子sobel算子其实就是通过卷积计算横向与竖向的梯度和并且在最后为了简便起见通常将根下gx^...

2020-03-26 11:20:42 225

原创 PIXEL-LEVEL SELF-PACED LEARNING FOR SUPER-RESOLUTION

该文章针对现行sisr网络的不断加深导致的收敛过慢问题,提出了像素级的自训练模型。网络框架的基本思路为,采用任意SISR网络,将低分辨率图像LR输入到超分网络中生成SR图像,利用生成的SR图像与HR图像进行逐块的ssim值比较生成一张SSIM图片,后利用一个高斯核将ssim图片转换成一个权重矩阵并分别与SR与HR进行逐元素相乘,根据ssim计算得出的结果,在原有像素值的基础上使像素值差异较大的位...

2020-03-19 15:56:33 295 1

原创 SRDGAN: learning the noise prior for Super Resolution with Dual Generative Adversarial Networks

这篇论文偏重于应用性, 手机上的大多数相机都支持1x-10x变焦级别的变化。 然而,利用光学变焦实现大的变焦级别变化是不现实的.. 因此,数字变焦方法在智能手机中得到了广泛的应用,这篇论文探讨了如何将手机拍出的图片的进行超分,现行超分辨率网络无法应用于移动设备,主要是因为现行超分网络大多使用DIV2K制作数据集,而利用DIV2k下采样制作的低分辨率图片极为不符合现实的图像的分布规律,缺少与真实手机...

2020-03-11 12:18:07 409

原创 Deep Neural Network for Fast and Accurate Single Image Super-Resolution via Channel-Attention-based

本文提出现行超分网络中存在大量参数,运算复杂,为了解决这些问题,本文提出了将一维卷积与二维卷积联合起来使用以定向提取特征,并减少参数。该网络的总体架构较为简单,将低分辨率图片输入后经过33的卷积提取浅层特征后,输入到OAM块中进一步提取定向特征,通过全局注意力机制,最后通过两个33卷积降维hou,亚像素到高分辨率图片。此网络的创新点主要在于oam中的利用1维卷积进行定向采样,从而更充分的提取...

2020-03-08 09:35:00 267

原创 Meta-Transfer Learning for Zero-Shot Super-Resolution

本问主要解决了几个问题:①现行超分辨率重建只能很好的拟合预训练网络能够拟合的分布(如用一类图片的lr与hr预训练网络,那么测试时预训练好的网络只能很好的拟合预训练那类图片的分布,当测试图片的分布与预训练图片分布不符或为多种非理想情况下的图片(老旧历史照片,手机拍摄照片,互联网网络照片),则生成的超分图片质量会很差)因此本文采用了zero-shot论文的方法(具体可在此处看该论文),zero-sho...

2020-03-07 23:04:30 1011

原创 Embedded Block Residual Network: A Recursive Restoration Model for Single-Image Super-Resolution

本文提出了一个低频率纹理在高复杂度网络训练下会过拟合导致效果变差的问题,而现行网络大多都忽视了这个问题将低频纹理与高频纹理一起输入到深层复杂的网络中为了解决这个问题这篇论文对纹理进行了分层处理总体框架分为三个部分分别为浅层特征提取、分层处理不同频率的特征、最后重构生成HR图片其中这篇论文最主要的就是如何将高频与低频信息分开处理,首先将浅特征提取曾得到的特征图输入第一个BRM块中经过反卷积或...

2020-02-27 15:51:05 883 2

原创 Fast and Accurate Single Image Super-Resolution via Information Distillation Network

本文主旨为了再生成深度网络的同时降低计算复杂性和减少内存消耗,因此本文提出了一个信息蒸馏网络,降低复杂性和内存消耗。总体网络框架分为三个部分①特征提取模块②增强模块(蒸馏模块)③特征融合与生成图片模块总体来说首先低分辨率图片输入到网络中经过双三次插值放大到指定大小输入后层形成残差网络,后低分辨率图片首先经过FBLOCK提取浅层特征,后经过DBLOCK经过信息蒸馏再提取深层特征的同时减少内存消耗...

2020-02-24 16:04:31 608

原创 Deep Back-Projection Networks for Single Image Super-resolution

这篇文章主要为了解决在超分过程中有较大上采样比例因子时,采用传统的方法可能会出现无法学习到大部分的非线性映射方法等问题,常见的有:①预定义的上采样,即先对LR图像进行上采样后,经过一系列卷积层进行非线性映射的学习,例如SRCNN、VDSR、DRRN,②在最后一步进行上采样,例如FSRCNN、ESPCN③拉普拉斯金字塔,这是一种渐进式的上采样,将较大的比例因子分成几步进行插值上采样,这种方法也可以很...

2020-02-05 23:38:15 386

原创 Lightweight Image Super-Resolution with Adaptive Weighted Learning Network

这篇文章起源于Residual Convolutional Neural Network Revisited with Active WeightedMapping,由于现行残差网络中为用初始低分辨率图片插值到最终大小,即将初始图片映射到最终将解空间,虽说可以很好的降低运算量,但是在所有路径上使用同一权重是否正确,即现行残差网络在减少参数的情况下,同时也限制了超分的质量,因此Residual C...

2019-12-25 15:32:46 1276 4

原创 Multi-scale deep neural networks for real image super-resolution

本文主要解决了由于在超分过程中上下采样若不确定则超分可能会出现训练困难的情况(这里特定指的训练集为低分辨率图像与标准图像大小相同的数据集)该数据集就会表现为只要通过一定的采样因子下采样再通过相同的采样因子上采样就可以产生生成图片,但是采样因子可能未知且彼此不同,这里如果采样因子不同而进行批处理会导致训练时下采样的时候产生的图片分辨率不一致,图片分辨率不一致在批处理时输入dataloader会报错,...

2019-12-16 19:35:03 285

原创 Deep Laplacian Pyramid Networks for Fast and Accurate Super-Resolution

这篇文章主要思想为作者利用拉普拉斯金字塔的思想构建了一个网络,来解决超分过程中参数过多或无法很好的拟合高倍超分中的非线性映射 ,首先SRCNN由于SRCNN对低分辨率图像做了一个插值上采样的预处理因此后面 经过卷积层的时候也会有同样大小的参数,比如说6464变成128128则卷积层的参数就扩大了两倍,因此SRCNN扩大了大量的参数,FSRCNN在低分辨率下提取特征,这样相对于SRCNN减少了大量参...

2019-12-06 14:46:36 207

原创 Triple Attention Mixed Link Network for Single Image Super Resolution

该文章主要内容为通过添加三重注意力机制来增强超分效果,实则就是提出了一个三重注意力机制的炒粉模型,首先从底层分析,三重注意力机制:①为一个传统的通道注意力机制,不过在此将全连接层变为卷积层实施升维和降维代码如下:②提出了一个核注意力机制并列为该论文的创新点:主要思路是将不同卷积核提取出的不同感受野下的特征图提取出来进行融合(即逐元素相加)后通过一个通道注意力机制形成一个参数,注意这里为一个参...

2019-11-28 15:11:19 880

原创 Mixed Link Networks

该文章从本质上分析了密集网络和残差网络的起源和本质以及残差网络与密集网络的优缺点,残差网络的有点在于他可以使信息快速向后流动并且可以加速网络收敛,使网络更容易训练,缺点在于残差网络会在同一个位置也就是高频的位置叠加大量的信息(像素)可能会造成信息流失,密集网络的优点在于可以防止图像信息丢失,但缺点在于由于将所有生成的特征图都进行拼接所以可能包含大量冗余信息,为了解决这些问题本文章从这两个网络的根源...

2019-11-20 21:47:13 410

原创 Advanced Super-Resolution using Lossless Pooling Convolutional Networks

该文章主要利用了视频超分中的思想,即利用视频中时间阈上的多帧图像(如t,t-1,t-2,t+1,t+2)比利用单帧图像超分更有优势,因为多帧图像中图像上的特征都产生了细微的变化,因此可以提取更多的特征信息,从而可以互补的生成SR图像,运用这个思想,本文提出了一个增强超分生成图像的模型.首先提出了一个无损池化的思想即一个逆亚像素卷积将一张图上的象素点按照采样因子的比例进行分割如图上所示进行2倍采样...

2019-11-17 14:28:37 183

原创 Unsupervised Degradation Learning for Single Image Super-Resolution

这篇文章主要写了由于现行的超分过程中的低分辨率图像是由人为合成的,而自然的lr图像更为复杂,所以由人为合成的lr图像与标准hr图像训练的网络在真实的lr图片进行测试的时候泛化性能不强,也就是说用人为合成的lr图像对训练的网络在用真实的lr图像进行测试时可能无法表现出很好的超分效果。退化模型:通过添加了一个残差网络将下采样过程变成了一个可学习的过程,人工下采样过程中,由于参数固定所以为一个固定过程...

2019-11-08 10:45:18 1521 9

原创 MAANet: Multi-view Aware Attention Networks for Image Super-Resolution

该文章主要写了在超分过程中从低分辨率图片恢复到高分辨率图片时大部分方法无法从低分辨率图像中恢复含足够高频信息的高分辨率图像,此文章提出一个假设即通过充分利用低分辨率图像的高频信息也就是纹理细节有利于SR生成高分辨率图像的纹理细节,因此该文章提出了一个局部注意力机制和全局注意力机制。首先局部注意力机制:1.经过浅特征提取后将图像进行平均池化此处令ks=s这样设置使在池化块滑动时不会有相同的元素出现...

2019-10-29 22:19:52 656

原创 Single Image Super-Resolution via Cascaded Multi-Scale Cross Network

本文章说明通过增加网络宽度可能有利于图像信息集成,

2019-10-20 09:27:25 369 3

原创 Generative Adversarial Network-based Image Super-Resolution using Perceptual Content Losses

这个周开始写随笔记录下看的论文(本文仅为本人防止自己忘记写的禁止转载)该论文主要思路是超分时图像可能出现失真或者过平滑致使图像细节模糊的状况,而近期发现感知(特征)和失真可以存在一中折中的情况既不至于失真但细节完整的情况,因此就这个提出了一个模型(大部分都是别人的模型)。首先时RB块由两个卷积层和一个激活函数relu组成残差网络其实后面还有个relu没画出来因为残差操作是发生在线性映射之后非线...

2019-10-13 18:45:29 379

原创 CIFAR10分类问题

本文主要是用来记录自己学习过程以及方便忘了回头来看的这里主要是transpose中的compose函数的功能,该函数功能为进行一系列transoforms操作,用于进行批归一化(bn),首先归一化主要是因为激活函数有饱和的阶段,归一化可以使所有数据都尽量被激活使数据尽量在一个量级,所以批归一化在激活函数之前,防止前层数据分布变化影响后层数据分布,在compose内通过【】以及,分隔要进行的tra...

2019-10-13 13:54:37 1222

原创 关于使用pytorch实现cv时一些问题

关于使用pytorch实现cv时一些问题记录学习过程中的一些模糊的问题,①图片输入进来计算机主观认为维度为(h,w,c)因此需要使用Totensor进行归一化也就是将维度变为(c,h,w)后进行/255之后为了防止标准差过大利用normalize进行又一次的归一化使区间变为【-1,1】②numpy储存数组图片的维度也为(c,h,w)③img=np.zeros((10,4,4,3))此处img【1...

2019-10-08 15:53:11 194

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除