强化学习下的多教师知识蒸馏模型【沈向洋带你读论文】【知识蒸馏】
张祥雨:Transformer究竟做对了什么,CNN能不能从中学习?
Transformer为什么会比CNN好
Transformer对时序预测真的有效吗? | AAAI'23 Oral
6分钟听懂Swin Transformer V2【CVPR2022 Oral】
【ReadPaper保姆级教程】手把手教你搞定论文阅读神器ReadPaper | 论文如何高效读懂?论文笔记要怎么做?
当FFN遇上Normalization[Transformer中的数学part37]
【沈向洋带你读论文】Transformers 在图学习表征方面真的表现不佳吗?【Transformers】【图学习】
Normalization的本质 [Transformer中的数学part31]
解耦知识蒸馏【CVPR2022】【知识蒸馏】
self-attention完整求导公式 [Transformer中的数学part29]
【沈向洋带你读论文】Dynamic Head——首次突破COCO单模型测试60AP大关
Lipschitz连续及其常量的定义讲解【深度学习中的数学ep5】
Transformer主要模块从数学上如何解读?【深度学习中的数学ep9】
代码验证理论 (5)[Transformer中的数学part46]
理解Wq'Wk的性质 [Transformer中的数学part33]
理论分析不同参数的影响[Transformer中的数学part35]
FC层和LN层该如何求导?【深度学习中的数学ep2】
SGD and Adam in Transformer[Transformer中的数学part36]
注意力稀疏化原理 [Transformer中的数学part34]