首页 > 其他资讯 > 端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干

端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干

时间:25-04-25

通过结构重参数机制实现特征复用的作者们,赋予了ghostnet新的生命力,提出了硬件友好的方案repghostnet。在imagenet和coco基线任务中,验证了该方案的有效性和高效性。下图显示,与mobileone、mobilenext等轻量型架构相比,repghostnet表现更加出色!速览版请继续阅读!

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干

出发点

端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干

GhostNet通过引入廉价操作实现特征复用,但引入了对硬件不友好的Concat操作。尽管Concat特征复用无需参数和FLOPs,但其计算耗时不可忽视,如上图所示。那么,如何更高效地进行特征复用呢?答案是结构重参数!!!

端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干

上图展示了从Ghost到RepGhost的进化过程,包括以下三点:

使用Add替代Concat以降低耗时;迁移ReLU以符合重参数折叠机制;引入BN到shortcut分支进一步提升非线性。

端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干

上图展示了Bottleneck的改进过程:主要体现在通道数的调整,这是因为从Concat到Add的过渡会导致通道数发生变化。作者主要调整了中间通道数,而保持输入与输出通道数不变。

端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干

本文的实验结果

以下两个表格展示了在ImageNet和COCO数据集上的性能对比,RepGhost在轻量化方面表现出色,FLOPs基本在300M以内。

端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干


这就是端侧高效骨干RepGhost | 重参数赋能GhostNet,达成端侧超高效骨干的全部内容了,希望以上内容对小伙伴们有所帮助,更多详情可以关注我们的菜鸟游戏和软件相关专区,更多攻略和教程等你发现!

热搜     |     排行     |     热点     |     话题     |     标签

手机版 | 电脑版 | 客户端

湘ICP备2022003375号-1

本站所有软件,来自于互联网或网友上传,版权属原著所有,如有需要请购买正版。如有侵权,敬请来信联系我们,cn486com@outlook.com 我们立刻删除。