近日,科技领域迎来一则备受关注的跨界互动。月之暗面公司发布的全新深度网络架构组件,不仅在行业内引发讨论,还获得了科技界知名人物马斯克的公开点赞。
月之暗面公司于前一日正式推出名为《Attention Residuals》(注意力残差)的深度网络架构组件。这一成果并非简单的技术迭代,而是对Transformer模型在深度方向上的信息流动方式进行了重构。长期以来,大模型的核心结构残差连接在十年间未有根本性变化,而此次月之暗面的研究则针对这一关键部分进行了重新设计,为相关领域的技术发展提供了新的思路。
该消息发布后,迅速在社交媒体上引发关注。马斯克在看到月之暗面的这项研究后,在社交媒体上评论称“Kimi这项研究干得漂亮”,表达了对这一成果的认可与赞赏。月之暗面Kimi官方账号也迅速回应,以幽默的方式表示“你的火箭造得也不错!”,这一互动不仅展现了科技领域开放交流的氛围,也让大众看到了不同领域顶尖人物之间的惺惺相惜。