[人工智能] GoogLeNet网络模型下载

  [复制链接]
查看: 1245|回复: 12

该用户从未签到

0

好友

479

主题

12

精华

管理员

Rank: 20Rank: 20Rank: 20Rank: 20Rank: 20

积分
1352
经验
35
学豆
99150

灌水之王分享达人至尊VIP荣耀VIP论坛元老

发表于 2017-6-13 22:41:02 | 显示全部楼层 |阅读模式
先就业后付费
介绍面临问题1,当前深度学习网络规模越来越大,网络规模越来越大,网络中的参数也就也来越多,这就很有可能在训练中造成过拟合的问题。

2,当前的大规模网络涉及的计算量也是非常高,特别对于卷积层,卷积层的增加带来的就是计算量几何级别的上升。

问题思考

一味地位追求识别准确率而增加网络规模有一部分原因就是特征提取模块的设计没有能很好提取出图像的特征,如果能在基本的特征提取单元上做一些优化,然后用优化后的特征提取模块去构建网络,可能会有利于最红的识别效果。

解决方案

GoogLenet提出了Inception module的概念,旨在强化基本特征提取模块的功能,一般的卷积层只是一味增加卷积层的深度,但是在单层上卷积核却只有一种,比如对于VGG,单层卷积核只有3x3大小的,这样特征提取的功能可能就比较弱。GoogLenet想的就是能不能增加单层卷积层的宽度,即在单层卷积层上使用不同尺度的卷积核,GoogLenet构建了Inception module这个基本单元,基本的Inception module中有1x1卷积核,3x3卷积核,5x5卷积核还有一个3x3下采样,如下图所示,

这样尺寸不同的卷积核就可以提取不同尺寸的特征,单层的特征提取能力增强了,但是我在读的过程中想到的问题是,对于像VGG这种网络,我同样可以通过卷积-下采样-卷积这种方式提取不同尺寸的信息,所以为何Inception module这种网络会有很好的效果的,我想到的原因是卷积-下采样-卷积虽然能够提取不同尺寸的信息,但是由于是通过下采样这种方式实现的,所以必会带来信息的丢失,和Inception module这种方式相比,显然丢失的信息更多。
上面Inception module结构会存在一个问题,就是前一层的输出不经任何处理直接输入到下一层的卷积层中,这样如果前一层的特征图数量很多,有经过5x5这种大尺寸的卷积,带来的计算量也是非常大,所以在修正过后的Inception module在输出到下一层卷积之前,会对数据进行一次降维,怎么降维,就是采用1x1卷积核实现,比如原来有256个输入特征图,先用1x1的卷积核对特征图进行线性组合,使得输出只有96的特征图,这样不会带来信息损失,有减小了下一层卷积的计算量,修正后的Inception module如下图所示,

这种Inception module既能大大提升卷积提取特征的能力,又不会使计算量提升很多。

GoogLenet

GoogLenet就是由上面的这种Inception module一点点构建出来的,从GoogLenet我们可以看出,构建体征提取的基本单元其实是非常重要的,单纯用单个卷积核进行卷积,然后一味增加网络深度是不可取的。


GoogLenet的训练过程也是很有特点的,我们可以看出GoogLenet的
网络其实也是非常深的,如果梯度从最后一层传递到第一层,梯度基本已经没有了,所以GoogLenet在网络的中间加了softmax层,通过这些层获取额外的训练loss,然后根据这个loss计算对应的梯度,最后把梯度加到整个网络的梯度中,进行梯度传播,这样可以有效缓解梯度消失的问题。
其实这种训练方式可以看作将几个不同深度的子网络合并到一块进行训练,由于网络的卷积核共享,因此计算的梯度也可以累加,这样最终的梯度也不会很小。关于这一点做的最彻底的应该就是ResNet
关于ResNet的结构和特点将在另一篇文章里总结。

目录

train_val.prototxt
test_googlenet_20150909.log
solver.prototxt
readme.md
quick_solver.prototxt
GoogLeNet_Train.sh
GoogLeNet_Test.sh
deploy.prototxt

bvlc_googlenet.caffemodel
下载地址
回复可查看课程下载链接&提取码
游客,如果您要查看本帖隐藏内容请回复

学豆不足请充值:充值  开通VIP全站课程免学豆下载:开通VIP  QQ:2659147209

回复

使用道具 举报

  • TA的每日心情

    2018-4-29 16:08
  • 签到天数: 1 天

    连续签到: 1 天

    [LV.1]初来乍到

    0

    好友

    0

    主题

    0

    精华

    LV.1 菜小白

    Rank: 1

    积分
    7
    经验
    5
    学豆
    5
    发表于 2018-4-29 16:08:24 | 显示全部楼层
    66666666666666666666666666666666666666666666666666
    该会员没有填写今日想说内容.
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    郁闷
    2019-3-27 11:30
  • 签到天数: 39 天

    连续签到: 2 天

    [LV.5]常住居民I

    2

    好友

    3

    主题

    0

    精华

    LV.7 首席技术顾问

    Rank: 10Rank: 10Rank: 10

    积分
    2299
    经验
    1462
    学豆
    117
    发表于 2018-8-6 10:00:04 | 显示全部楼层
    该会员没有填写今日想说内容.
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2018-10-26 20:58
  • 签到天数: 1 天

    连续签到: 1 天

    [LV.1]初来乍到

    0

    好友

    0

    主题

    0

    精华

    LV.1 菜小白

    Rank: 1

    积分
    12
    经验
    10
    学豆
    5
    发表于 2018-10-26 20:58:33 | 显示全部楼层
    66666666666666666666666666666666666666666666666666666666
    该会员没有填写今日想说内容.
    回复 支持 反对

    使用道具 举报

  • TA的每日心情

    2020-8-28 16:30
  • 签到天数: 123 天

    连续签到: 1 天

    [LV.7]常住居民III

    0

    好友

    5

    主题

    0

    精华

    荣耀VIP

    Rank: 15Rank: 15Rank: 15Rank: 15Rank: 15

    积分
    4762
    经验
    2193
    学豆
    0

    荣耀VIP

    发表于 2019-1-10 04:35:40 | 显示全部楼层
    有的人你看不见,因为他远远走在前面....
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    郁闷
    2019-8-26 10:10
  • 签到天数: 1 天

    连续签到: 1 天

    [LV.1]初来乍到

    0

    好友

    0

    主题

    0

    精华

    LV.1 菜小白

    Rank: 1

    积分
    12
    经验
    9
    学豆
    5
    发表于 2019-8-26 10:11:16 | 显示全部楼层
    该会员没有填写今日想说内容.
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    郁闷
    2019-8-26 10:10
  • 签到天数: 1 天

    连续签到: 1 天

    [LV.1]初来乍到

    0

    好友

    0

    主题

    0

    精华

    LV.1 菜小白

    Rank: 1

    积分
    12
    经验
    9
    学豆
    5
    发表于 2019-8-26 10:11:33 | 显示全部楼层
    该会员没有填写今日想说内容.
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2020-1-25 14:53
  • 签到天数: 1 天

    连续签到: 1 天

    [LV.1]初来乍到

    0

    好友

    0

    主题

    0

    精华

    LV.1 菜小白

    Rank: 1

    积分
    8
    经验
    6
    学豆
    5
    发表于 2020-1-25 14:55:31 | 显示全部楼层
    该会员没有填写今日想说内容.
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2020-2-23 18:04
  • 签到天数: 1 天

    连续签到: 1 天

    [LV.1]初来乍到

    0

    好友

    0

    主题

    0

    精华

    LV.1 菜小白

    Rank: 1

    积分
    11
    经验
    9
    学豆
    5
    发表于 2020-2-23 18:06:56 | 显示全部楼层
    该会员没有填写今日想说内容.
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2020-4-23 22:04
  • 签到天数: 1 天

    连续签到: 1 天

    [LV.1]初来乍到

    0

    好友

    0

    主题

    0

    精华

    LV.1 菜小白

    Rank: 1

    积分
    9
    经验
    7
    学豆
    5
    发表于 2020-4-23 22:07:34 | 显示全部楼层
    感谢楼主分享,正确的学习路线比课程更重要
    该会员没有填写今日想说内容.
    回复 支持 反对

    使用道具 举报

    快捷回复:
    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    关闭

    站长推荐上一条 /3 下一条

    快速回复 返回顶部 返回列表