huawei-noah / AdderNet

Code for paper " AdderNet: Do We Really Need Multiplications in Deep Learning?"

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

BatchNorm 效果不好

zhangruiidol2013 opened this issue · comments

您好,看了您的文章,感觉非常好,最近也结合项目,将Conv替换了Adder ,但是我发现貌似BatchNorm 针对某些场景并不好。针对这个咱们有啥替换的建议不??谢谢。

你好,可以尝试替换为其他norm,例如layernorm,instancenorm,groupnorm等

对,我现在替换了 groupnorm . 期待会有好的结果。谢谢您。