11111111111

微软在CVPR2022会议上提出的使用权重复用压缩视觉Transformer的新思路，主要是通过MiniViT模型实现的，该模型具有以下特点和优势解决边缘设备应用挑战MiniViT旨在解决ViT在边缘设备上应用的两大挑战参数量大和计算资源需求高显著的压缩效果MiniViT能够显著压缩SwinB Transformer的大小，并提升10%的。