不要想的太过复杂，就只有随机数生成的三个矩阵，原始输入已经通过矩阵相乘关联在三个随机数矩阵中，再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵，再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重，三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏，没有什么复杂的逻辑问题。
。
代码：
长期使用的大佬来说说，MacOS 真的比 Windows 稳定吗？
网传厦门某国企研发部门要求每日考察后端 400 行，前端 1000 行代码量，如属实，这个考核合理吗？
如何看待“京东外卖停止补贴后，日单量跌至两万单”这件事？
C罗赠送特朗普球衣：致唐纳德•特朗普总统，为和平而战。如何评价？
都说时尚是一个轮回，有哪些老电视剧里面的穿搭到现在都还是很潮的呢？
如何评价歼-36的正面照？
买到烂尾楼到底该有多绝望？
你最意想不到的一笔收入是怎么来的？
一个练过功夫的姑娘能打过一个没练过的男人吗？
8 岁小孩偷花 1 万多买 26 箱荔枝，孩子父亲称在商品未发货时申请退款被拒，这合理吗？
如何评价联想ThinkBook 16P 2025,是否值得选择？
武汉连续多年进入中国旅游城市排行榜 TOP 10 行列，为什么本地人却总觉得武汉「没什么好玩的」？
澳大利亚为什么是发达国家？
有没有GUI框架开发难度小，***消耗又不多，而且又跨平台？
一枚东风41能直接干掉一艘航母吗？
systemd吞并了什么?
以色列摩萨德这么厉害，中国网民为何不害怕？
公立医生帮联系民营救护车，800 公里收费 2.8 万元，收费合理吗？救护车收费标准是什么？
李梦被女篮主教练宫鲁鸣官宣弃用，争议很大，怎么看待？
超级喜欢穿短裙正常吗?
为什么go语言gc的时候要暂停整个程序？
自己拥有一台服务器可以做哪些很酷的事情？
有哪些开源web应用漏洞扫描工具？
如何评价首个女性友好的编程语言HerCode?
如何评价林志玲？
055一打一能不能打过阿利伯克？
如果你是《一帘幽梦》里的绿萍，你会不会最后原谅紫菱？
如何看待《剑星》已登顶 Steam 全球热销榜？
你在健身房发生过什么有趣的事情?
