代码之家  ›  专栏  ›  技术社区  ›  Nima

CAffe CNN:转换层内过滤器的多样性[关闭]

  •  -2
  • Nima  · 技术社区  · 6 年前

    3)在学习(优化过程)过程中,同一层过滤器之间是否存在交互作用?如果是,怎么做?

    图)。

    2)Conv层中过滤器的多样性是好事还是坏事?对此有什么研究吗?

    1 回复  |  直到 6 年前
        1
  •  1
  •   Shai    6 年前

    假设您正在使用sgd(或类似的backprop变量)对网络进行培训,那么将在以下位置初始化权重: 随机的

    GrOWL


    使用“开箱即用”的优化器,每个层的学习过滤器彼此独立(梯度的线性)。但是,可以使用更复杂的损失函数/正则化方法使其依赖。