2014年新加坡国立大学提出的

在GoogLeNet之前，该设计后来为GoogLeNet(Inception)和 ResNet 等网络模型所借鉴

 

NIN——Network In Network 网络中的网络

前面的的LeNet、 AlexNet和VGG在设计上的共同之处是：先以由卷积层构成的模块充分抽取空间特征，再以由全连接层构成的模块来输出分类结果。其中， AlexNet和VGG对LeNet的改进主要在于如
何对这两个模块加宽（增加通道数）和加深。

而 NiN 提出了了另外⼀一个思路，即串联多个由卷积层和“全连接”层构成的小网络来构建一个深层⽹网络