当前位置:当前位置: 首页 >
为什么我还是无法理解transformer?
文章出处:网络 人气:发表时间:2025-06-24 18:45:12
不要想的太过复杂,就只有随机数生成的三个矩阵,原始输入已经通过矩阵相乘关联在三个随机数矩阵中,再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵,再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重,三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏,没有什么复杂的逻辑问题。
。
同类文章排行
- 现代艺术只考虑意义、不考虑美感吗?
- 目前react的生态系统是什么情况,有没有比较公认的成熟的开发技术栈?
- 在杭州2021年买房的你,房子亏了多少了?
- 为什么外卖小哥更愿意选九号、小牛呢?
- 为什么 macOS 上国产软件不流氓?
- 大家有没有「大众认为是烂片但个人却喜欢看」的影片?
- 日本制造的质量真的就那么好吗?
- 现在工作中k8s是使用containerd还是docker来管理容器?
- Windows上有没有一分多屏和多屏合一的软件?
- 你的低成本爱好是什么?
最新资讯文章
- 照骗能骗到什么程度?
- IT行业夫妻双双被裁,想去新西兰闯一闯可以吗?
- 为什么华为价值2.3W的鸿蒙电脑用的是美国西数的SN740固态硬盘?
- 为什么现在吹Rust的人这么多?
- 宝宝们 敢不敢发出你们自己最可爱的自拍照?
- 我在百纵科技买了一台美国CN2云服务器,如何测试是不是CN2线路?
- 成为体育女主播,光「好看」就够了吗?
- 你的低成本爱好是什么?
- 为什么大多数评测对macbook的屏幕素质避而不谈?当真不怕被pwm频闪闪瞎眼吗?
- 索尼互动娱乐宣布 PS6 的开发工作已经全面启动,你会如何期待索尼的下一代游戏主机呢?
- 如果肯德基的员工忍不住偷吃了一个鸡翅怎么办?
- 全栈(前端+j***a)是不是前端的未来?
- 如何评价女明星梅根福克斯的身材?
- 为什么 macOS 比 Windows 稳定?
- 你都见过什么样的电脑盲?
- 当初中俄为什么不摧毁朝鲜的核设施,让朝鲜拥有了自己的核武器?
- 为什么Mac连个正儿八经的CAD都装不了还敢打着生产力的旗号?
- 冬天也要穿胸罩吗?
- 如何基于Docker进行开发?
- ssd固态硬盘sata的好还是m.2好呢?





