Please enable JavaScript.

Coggle requires JavaScript to display documents.

ResNeXt(2016) - Coggle Diagram

- - - - Split
        
        做法
        
        以全连接为例，将x=[x1,x2,....xd],w=[w1,w2,...,wn]分为xi,wi
        
        概述
        
        将数据x分成D个特征
      - Transform
        
        公式
        
        $$w_ix_i$$
        
        概述
        
        对每个特征进行一次线性变换
      - Merge
        
        概述
        
        通关单位加合成最后的输出
        
        公式
        
        $$\sum^D_{i=1}w_ix_i$$
    - - 背景
        
        Inception不同分支的不同拓扑结构的特征有非常刻意的人工雕琢的痕迹，而往往调整Inception的内部结构对应着大量的超参数，这些超参数调整起来是非常困难的
      - 公式
        
        $$F=\sum^C_{i=1}T_i(x)$$
      - 解释
        
        C是基数Cardinality，
        
        T是任意变换，如一系列剑姬操作(1x1=>3x3=>1x1)
        
        求和就是把T的结果相加或者concat起来
  - - - $$y=x+\sum^C_{i=1}T_i(x)$$