
一周前,开源AI公司月之暗面推出了最新一代大模型Kimi K3,该模型的参数规模突破2.8兆大关。全球科技界迅速做出反应——埃隆·马斯克在社交媒体上评论,用”印象深刻”一词对这一成就表达肯定之意。
这一消息发布仅一天后,马斯克公开宣布了xAI团队的下一步计划。他们正在开发参数量达2兆的Grok 4.6模型,承诺在七天内完成初步训练周期,并扬言新版本会在性能上超越Kimi。
面对这一挑战,月之暗面团队用了一句巧妙的回应:”欢迎加入2兆+阵营”。这句话既表达了欢迎态度,又含蓄地强调了自己已拥有2.8兆参数的先发地位。网络舆论普遍认为,这种从容的回应方式展现了技术自信。
从技术细节来看,Kimi K3采用了多项创新设计。该模型能处理100万个token的长文本,原生支持图像识别功能。在多个国际AI性能测试榜单上,这款模型在代码编写、复杂推理、多文档分析等领域均表现出色。
在底层架构上,研发团队采用了自主研发的KDA注意力算法和896个专家模块的混合架构。每次推理时只激活16个专家单元,这种设计大幅提高了运算效率,相比前代产品提升了2.5倍。月之暗面已确认将在7月27日发布完整的模型权重代码,向全球开发者开放商业化权限。
有趣的是,马斯克对月之暗面团队的认可已不是第一次。三月份时,月之暗面发表了题为”Attention Residuals”的研究论文,提出了一套创新的机制来替代标准Transformer中的某些部分。马斯克当时在社交平台转发并留言,称赞这项工作”令人印象深刻”。
月之暗面方面用一句诙谐的回应作答:”你的火箭造得也很漂亮啊”。这场跨越网络的技术对话被广泛解读为两位技术领袖之间的相互尊重,也预示了后续可能的良性互动。
然而,就在对Kimi K3表达赞赏之后没有多久,马斯克就转向了竞争态度。他在X平台上详细阐述了xAI的研究路线,强调Grok 4.6的训练即将在一周内进入完成阶段,新版本相对于此前的Grok 4.5会有明显进步,并表示很可能在性能上实现对Kimi的反超。
月之暗面的简洁回应显示出这家公司对自身实力的信心。通过邀请马斯克加入”2兆+俱乐部”这样的说法,他们既保持了友善的竞争姿态,又含蓄地提醒业界:Kimi K3已经拥有2.8兆的参数规模,领先优势已然形成。舆论分析认为,在这场隔空对话中,Kimi已经赢得了气势。
xAI是马斯克在2023年创立的人工智能初创公司。核心团队成员来自行业顶尖企业,包括OpenAI、谷歌DeepMind和Meta等机构。Grok系列大模型与X社交平台、特斯拉公司和SpaceX生态进行深度整合,形成了完整的产业链闭环。
这一消息发布仅一天后,马斯克公开宣布了xAI团队的下一步计划。他们正在开发参数量达2兆的Grok 4.6模型,承诺在七天内完成初步训练周期,并扬言新版本会在性能上超越Kimi。
面对这一挑战,月之暗面团队用了一句巧妙的回应:”欢迎加入2兆+阵营”。这句话既表达了欢迎态度,又含蓄地强调了自己已拥有2.8兆参数的先发地位。网络舆论普遍认为,这种从容的回应方式展现了技术自信。
从技术细节来看,Kimi K3采用了多项创新设计。该模型能处理100万个token的长文本,原生支持图像识别功能。在多个国际AI性能测试榜单上,这款模型在代码编写、复杂推理、多文档分析等领域均表现出色。
在底层架构上,研发团队采用了自主研发的KDA注意力算法和896个专家模块的混合架构。每次推理时只激活16个专家单元,这种设计大幅提高了运算效率,相比前代产品提升了2.5倍。月之暗面已确认将在7月27日发布完整的模型权重代码,向全球开发者开放商业化权限。
有趣的是,马斯克对月之暗面团队的认可已不是第一次。三月份时,月之暗面发表了题为”Attention Residuals”的研究论文,提出了一套创新的机制来替代标准Transformer中的某些部分。马斯克当时在社交平台转发并留言,称赞这项工作”令人印象深刻”。
月之暗面方面用一句诙谐的回应作答:”你的火箭造得也很漂亮啊”。这场跨越网络的技术对话被广泛解读为两位技术领袖之间的相互尊重,也预示了后续可能的良性互动。
然而,就在对Kimi K3表达赞赏之后没有多久,马斯克就转向了竞争态度。他在X平台上详细阐述了xAI的研究路线,强调Grok 4.6的训练即将在一周内进入完成阶段,新版本相对于此前的Grok 4.5会有明显进步,并表示很可能在性能上实现对Kimi的反超。
月之暗面的简洁回应显示出这家公司对自身实力的信心。通过邀请马斯克加入”2兆+俱乐部”这样的说法,他们既保持了友善的竞争姿态,又含蓄地提醒业界:Kimi K3已经拥有2.8兆的参数规模,领先优势已然形成。舆论分析认为,在这场隔空对话中,Kimi已经赢得了气势。
xAI是马斯克在2023年创立的人工智能初创公司。核心团队成员来自行业顶尖企业,包括OpenAI、谷歌DeepMind和Meta等机构。Grok系列大模型与X社交平台、特斯拉公司和SpaceX生态进行深度整合,形成了完整的产业链闭环。
您必须登录才能发表评论。