本文介绍了一种基于卷积运算的新注意力层，能够捕获局部和远程关系。这是通过组合普通和大型核卷积层来实现的。后者使用扩张卷积来捕获遥远的相关性。

Go to file

YYJ-aaaa 33bd6c6ee3 first commit		2024-11-15 16:20:02 +08:00
.gitattributes	Add .gitattributes	2024-11-15 15:39:52 +08:00
README.md	Initial commit	2024-11-15 15:39:51 +08:00
config.json	first commit	2024-11-15 16:20:02 +08:00
preprocessor_config.json	first commit	2024-11-15 16:20:02 +08:00
pytorch_model.bin	first commit	2024-11-15 16:20:02 +08:00

README.md

van-tiny_a13604486060830720472835

本文介绍了一种基于卷积运算的新注意力层，能够捕获局部和远程关系。这是通过组合普通和大型核卷积层来实现的。后者使用扩张卷积来捕获遥远的相关性。