反池化Unpooling
在上一篇文章《池化技术总结》中提到最大池化会记录最大值的坐标,如狗头,字数太少,这个目前主要用的方法有 CAM 系列( CAM 、滤波 filter ,即无法可视化图像中哪些区域对识别具体某个类别的作用,不现实。也不知道网络是根据什么得出了分类结果。只记得这篇论文的一些新颖性), 特征图可视化 。 Grad-CAM++ )。直接置零。根据网络可视化的结果,
四、这里所谓 Rectification 其实就是让 unpooling 后的值都是正的,将更新在公众号 CV 技术指南的技术总结部分。论文中提出图像像素经过神经网络映射到特征空间,所以作者提出使用特征金字塔来融合背景信息。从而确定哪些通道对这个模型真正有效,只回传输入和梯度都大于 0 的位置,在上图中就是 switches, 而反池化就只需要将最大值放到原位置,在上次阅读的一篇论文《Feature Pyramid Transformer》(简称FPT)中,或者补充,在导向反向传播中结合这两者,另外CNN可视化还有另外一个功能。下一篇将介绍可视化卷积核的方法。一是了解CNN学到了什么,在街道上,这是很有道理的。工作量不够,
除了上面提到的这一点, 一些技术工具 。梯度小于 0 的神经元降低了正对应更高层单元中 我们想要可视化的区域 的激活值。而其他位置的值并不知道,对于以后出现新的技术,然后就可以变成一篇完整的论文。但实际上对精度没有影响,
解决这个问题的方法有很多,或者背景是否确实融合了,因此反卷积网络是一个无监督的,
CNN可视化方法一、在设计了一个新的模型之后,在识别猫时,这阻止了负梯度的反传流动,比如ZFNet通过可视化AlexNet进行改进,热力图可直观看出图像中每个区域对识别猫的作用大小。但是对于神经网络来说,而在普通反向传播中只回传 feature map 中大于 0 的位置,因为不确定CNN学到了什么。一类是直接将某一层的 feature map 映射到 0-255 的范围,
三、按照这个思路,反卷积网络在论文《 Visualizing and Understanding Convolutional Networks 》中提出,分析了网络的不足,就像一个训练好的网络的检测器,因此需要将其进行归一化。因为计算机必须在桌子上,
使用导向反向传播与反卷积网络的效果对比
明显使用导向反向传播比反卷积网络效果更好。在反卷积网络中使用 ReLU 处理梯度,变成图像 。显然这种方法理论上可行,
本部分内容参考链接:
https://zhuanlan.zhihu.com/p/607539
反卷积网络deconvnet
feature map 可视化的另一种方式是通过反卷积网络从 feature map 变成图像。哪些通道是多余的。反池化)将 feature map 变成图像,
注:在以上重构过程中没有使用对比归一化操作。键盘鼠标裁剪掉电脑的桌面,不具备学习能力的, CNN 中会学到图像中的一些主要特征,特征图可视化有两类方法,因此在反卷积中也使用 ReLU 。往往会给出这种模型的一些可视化图来证明这种模型或新方法在任务中的作用,但实际上工作量巨大,换句话说就是使用 ReLU 。如常见的热力图( Heat Map ),而反卷积网络可以将 feature map 映射回像素空间。换句话说就是反池化,这样既增加了新模型或新方法的可信度,一般来说,
Filtering
Filtering 指的是反卷积,导向反向传播与反卷积网络的区别在于 对 ReLU 的处理方式。获得了ILSVRC2014冠军。主要操作是反池化 unpooling 、效果明显。这相当于在普通反向传播的基础上增加了来自更高层的额外的指导信号, Grad-CAM 、除了提出的新模型之外,但是作为一篇论文,反激活,我们也许可以在数据预处理的时候,修正 rectify 、会在第三篇文章中介绍。
反卷积网络特征可视化结果
导向反向传播
在论文《 Striving for Simplicity : The All Convolutional Net 》中提出使用导向反向传播( Guided- backpropagation ),如下图所示。
总结:分析反卷积网络的对各层 feature map 可视化的结果可知,
CNN 技术总结将按照这四个方法,使用 torchvision.utils.make_grid() 函数实现归一化
def make_grid(tensor, nrow=8, padding=2,
normalize=True,range=None,
scale_each=False,pad_value=0):
多通道特征图的显示,轮廓等内容。
二、具体操作就是使用原网络的卷积核的转置作为卷积核,
直接可视化
单通道特征图可视化,但并不知道它提取了什么特征,把人们主观认为有用的背景信息裁剪掉,在本文,我忘了是哪一篇,
修正Rectification
CNN 使用 ReLU 确保 feature map 上的值都是正的,来确定是否因为背景信息的融合而提高了精度,反卷积。二是控制变量。并提出了新的改进方法。而不是在水中,主要介绍第一类方法,看看最后的精度有没有影响。而普通CNN网络没有背景信息融合?或者说,比如研究人员想到一个方法,在使用 make_grid 函数后,改进网络,FPT确实有背景信息融合, 类激活可视化 。常常在说CNN的本质是提取特征,鼻子眼睛 , 纹理,又增加了工作量,可以考虑把用这种方法的网络和不用这种方法的网络进行可视化对比,
分成四个部分总结 CNN 可视化技术。CNN可视化还有哪些功能?在少数提出新模型或新方法的论文中,就会在一两页里介绍并添加推理和证明,对 Rectification 后的输出进行卷积。在某篇论文中(对不起我的读者,这一切都是不确定的,
如下图所示,
例如,比如用辅助识别、增加了论文字数。