标签: 月之暗面
【月之暗面KimiK3正式开源】7月27日晚,月之暗面发布KimiK3的模型权
【月之暗面KimiK3正式开源】7月27日晚,月之暗面发布KimiK3的模型权重、技术报告,并开源支撑KimiK3模型训练的关键Infra技术:MoonEP、FlashKDA和AgentEnv。据介绍,KimiK3是一个拥有2.8万亿参数的混合专家(MoE)模型,具备原生视觉理解能力,并支持100万token的上下文窗口。月之暗面表示,现在每个人都可以下载并部署KimiK3模型,无论是用于内部研发,还是嵌入到面向终端用户的产品中,均可自由使用。(界面)
#月之暗面喊马斯克掰掰手腕#【月之暗面再回应马斯克喊话:希望能出来“掰掰手腕”
#月之暗面喊马斯克掰掰手腕#【月之暗面再回应马斯克喊话:希望能出来“掰掰手腕”】7月21日,据21世纪经济报道消息,月之暗面企业业务负责人黄震昕在谈及马斯克称“Grok4.6会很快超过Kimi”时表示,“可能这次(K3)的这个表现,(让他们)得到一点震撼的感觉,现在拭目以待,希望他们出来跟我们掰一掰手腕。”据黄震昕介绍,他们与马斯克并没有直接认识,但双方互动非常频繁。对于能得到马斯克这一同行的肯定,黄震昕用“挺珍贵”来形容。这不是马斯克第一次注意到这家中国公司。今年3月,月之暗面发布《AttentionResiduals》论文,提出“注意力残差”机制以替代传统Transformer架构中的残差连接。马斯克在社交平台转发并评论:“Kimi的工作令人印象深刻(Kimi'sworkisimpressive)。”当时,月之暗面官方幽默回应:“你的火箭造得也不错!”
看到月之暗面的大模型KimiK3刷屏,我好奇去搜了搜月之暗面创始人杨植麟的履历
看到月之暗面的大模型KimiK3刷屏,我好奇去搜了搜月之暗面创始人杨植麟的履历,看完之后完全震惊了。首先,杨植麟可以说是一个“学神”,已经超越了学霸的概念。中学时候就获得了全国信息学奥赛一等奖,保送到了清华大学,清华大学是全国最高学府,聚集了来自全国各地的超级天才,然而即便是在这样的顶尖学府,杨植麟依旧以计算机专业全系第一名的成绩毕业了。其次,杨植麟对AI行业的贡献大的惊人,贡献了可以说是奠基性的成果,远超常人想象。在清华毕业之后,杨植麟留学美国就读于卡内基梅隆大学,大学期间他发表了两篇论文,分别提出了Transformer-XL、XLNet这两大划时代的NLP架构。其中,Transformer-XL架构,解决了大模型没有办法阅读长文本的致命缺陷;XLNet架构,奠定了大模型“长记忆+双向上下文”这个核心底层逻辑。这些都是真正的原创级别的巨大贡献,现在所有人工智能大模型,包括美国的ChatGPT、Claude,等等,现在都是采用杨植麟论文提出的研究成果来搭建自身的技术底层基座。这对整个人工智能行业都有无比深远的影响,这种学术上的成果是惊人到极致的。最后,杨植麟做出了那么厉害的成果之后,完全可以继续待在美国发展,但是他没有,而是很快就回国创业,经过一番努力终于创立了现如今的月之暗面;月之暗面也做出了很多惊人成果,现在的KimiK3则是又一个巅峰,参数规模达到了2.8万亿,在全球开源大模型中的排名达到了第一。不得不感叹,我们国家真是天才辈出啊,本以为开发出了DeepSeek的梁文锋就已经非常厉害了,可是杨植麟与之相比,也是丝毫不弱,在某些方面甚至还要更强。而且,杨植麟比梁文锋都还要年轻很多,他是92年出生,到现在是34岁,这么年轻就做出了这么惊人的成绩,真是令人佩服。
总理座谈会之后,月之暗面(Kimi)完成新一轮20亿美元(约合人民币140亿元)
总理座谈会之后,月之暗面(Kimi)完成新一轮20亿美元(约合人民币140亿元)融资,投后估值破200亿美元(约合人民币1400亿元)。