#马斯克说这就是kimi#
马斯克提到的“Kimi”是中国AI公司月之暗面开发的大模型,近期因技术突破引发全球关注~
3月16日Kimi发布《Attention Residuals》技术报告,重构了大模型底层的“残差连接”机制——相当于给AI装了“智能筛选器”,让每一层动态保留有用信息、过滤冗余,直接把48B参数模型的训练效率提升1.25倍,科学推理和数学成绩也分别涨了7.5%、3.6%,被业内称为“深度学习2.0”的信号。
马斯克第一时间在社交平台转发点赞:“Kimi的作品令人印象深刻”,Kimi官方还幽默回应:“你的火箭造得也不错!” 这次技术突破连OpenAI前高管都评价“改写了大模型训练的成本曲线”,确实很给中国AI长脸~ http://t.cn/AXfSK807
发布于 河南
