On the Expressive Power of Transformers
Transformer的表达能力研究
机构 * University of California Santa Cruz(加利福尼亚大学圣克鲁兹分校) ; IBM Research(IBM研究院)
AI总结 本文基于电路复杂性的概念与方法,概述了界定Transformer表达能力的部分精选研究结果,助力校准其作为语言识别器的表达能力。
Comments 13 pages, 2 figures
大厂专区
Transformer的表达能力研究
机构 * University of California Santa Cruz(加利福尼亚大学圣克鲁兹分校) ; IBM Research(IBM研究院)
AI总结 本文基于电路复杂性的概念与方法,概述了界定Transformer表达能力的部分精选研究结果,助力校准其作为语言识别器的表达能力。
Comments 13 pages, 2 figures