众力资讯网

昨天Kimi除了发布了K3的权重,还同时发布了4个开源项目:1. 多模态大模型视

昨天Kimi除了发布了K3的权重,还同时发布了4个开源项目:1. 多模态大模型视觉评测基准PerceptionBench,主要测试模型是否真的看清楚了图片(如看下哪条线更粗、指定坐标范围内写了什么等),不是测试传统的知识储备。目前还没有大模型拿及格分。K3目前排第二。

2. MoonEP,一个 MoE 专家并行通信库。它主要解决大规模 MoE 模型在多 GPU 训练或推理时的专家负载不均衡问题。它把不均衡的 MoE 路由转换成每张 GPU 固定且均衡的计算负载,以提升多卡 MoE 训练和推理的稳定性与通信效率。

3. AgentENV(AENV) 是 一个大规模 Agent 沙箱运行平台,用来批量启动、暂停、恢复和复制隔离的执行环境。它被用于支持 Kimi K3 的 Agentic RL训练。AgentENV 基于 Firecracker microVM 提供更强的隔离和环境生命周期管理。

4. FlashKDA 是 Kimi 为自家 Delta Attention 架构开源的高性能 GPU 推理算子,用更深度的 Kernel 融合和硬件优化,替代通用的 Triton/FLA 实现。它主要优化 KDA 中的门控、归一化、矩阵求逆、Delta Rule 递归状态更新和输出投影等操作。

How I AI