Slide-Transformer: Hierarchical Vision Transformer with Local Self-Attention 一、分析
1、改进transformer的几个思路:
(1)将全局感受野控制在较小区域,如:PVT,DAT,使用稀疏全局注意力来…
我们常常写循环的时候,可能会遇到嵌套循环,如果出现退出循环,一层还好,多层循环就费劲了,传统做法是加 flag,如下:
for (let i 0; i < 10; i) {let flag falsefor (let j 0; j < 5; j…