首页Ali的Black Tech：0.6B模型升级至17B MoE，有效参数占比5%，在CPU上运行，每秒处理30个令牌
阿里国际数字商务团队推出了Marco-MoE系列的最新成员Marco-Mini-Instruct，展示了“小规模也能带来大成效”的理念。 该模型总参数数为173亿，其中仅8.6亿为活跃参数（约占5%），从而实现了卓越的推理速度，即使在标准CPU上也能流畅运行。
超轻量级：针对 CPU 性能进行优化
据官方数据显示，该模型采用8位量化，配合四条DDR4 2400内存条，可实现约每秒30个令牌的推理速度。这种高效性使专家混合（MoE）架构更接近主流应用，显著降低了本地部署的门槛。
关键创新：升级再造技术释放潜力
Marco-Mini-Instruct 的突出特点不在于其规模或速度，而在于其独特的创建方法。该模型并非从零开始训练，而是通过“升级再造”技术，基于 Qwen3-0.6B-Base 模型演化而来。
该过程涉及将紧凑型小模型的组件拆分或复制为多个专家，并引入路由机制。同时，该方法还集成了细粒度子矩阵划分和“Drop-Upcycling”策略——在训练过程中随机舍弃某些专家或路由路径，以增加正则化并提高鲁棒性。 该方法成功地将纯Dense模型升级为MoE架构，为业界提供了MoE训练的一种全新、经济且高效的途径。
上下文长度与训练设置
该模型配置将 max_position_embeddings 扩展至 32K，但监督微调（SFT）阶段采用 8192 个令牌的上下文。因此，默认上下文长度非常适合大多数实际应用场景。
训练后突破：级联策略内蒸馏
后训练阶段同样令人印象深刻：首先进行 SFT 预热，随后采用级联的策略内蒸馏策略。 起初，蒸馏过程采用 Qwen3-30B-A3B-Instruct 作为教师模型，随后切换至更强大的 Qwen3-Next-80B-A3B-Instruct。 蒸馏数据涵盖指令遵循、复杂推理、对齐安全性和数学能力，确保模型在保持高效的同时显著提升整体智能水平。
基准测试结果：0.86B 活跃参数超越 4B 密集模型
最终生成的Marco-Mini-Instruct在多数主流基准测试中表现优于Qwen3-4B等众多密集模型。仅凭0.86B个活跃参数，它充分验证了MoE架构在实现“小而强”性能方面的巨大潜力。
行业影响：一种新的开源 MoE 训练范式
AIbase认为，这一成果的最大价值在于为开发者开辟了新的机遇。开发者不再需要从头开始训练大规模MoE模型；相反，团队可以选择一个合适的小型稠密模型，并严格复现论文中概述的“上循环”和“Drop-Upcycling”过程。 整个训练成本仍处于可控范围：SFT阶段需要64块GPU运行24小时，蒸馏阶段需要64块GPU运行110小时，这大大降低了中小型团队尝试MoE的门槛。
阿里巴巴此次的最新“改良”再次证明，模型效率的突破并不一定依赖于参数堆叠；创新的训练范式同样能够推动质的飞跃。 Marco-Mini-Instruct的发布无疑将加速MoE技术在边缘设备及个人开发者场景中的应用，使其成为整个行业值得关注的重要发展动向。
相关文章
美国股市触及历史里程碑，人工智能与航空航天巨头准备开启万亿美元时代
埃隆·马斯克、山姆·阿尔特曼和达里奥·阿莫迪，这三位科技领域的巨头，正推动其各自的企业迈向首次公开募股（IPO）。随着 SpaceX、OpenAI 和 Anthropic——这三家估值接近万亿美元的行业巨头——即将上市，2026 年被预测将成为美国历史上新股发行规模最大的一年。这一历史性的资本激增已引起全球金融界的关注，成为检验公共市场吸收如此大规模资金能力的关键压力测试。这些主要融资活动的同步启动预计将打破 2021 年创下的 1560 亿美元纪录。超级独角兽的资本博弈每家公司上市的路径
瑞典人工智能初创公司Lovable Eyes在完成主要融资轮后估值达132亿美元
随着人工智能驱动的编码工具日益普及，瑞典初创公司 Lovable 已获一轮重大融资。该公司计划筹集 30 亿美元，其估值有望升至 132 亿美元——这是去年 12 月记录的 66 亿美元的两倍。预计 Menlo Ventures 将主导此次投资。Lovable 的吸引力源于其核心的“氛围编码”（vibe coding）技术，该技术通过消除对复杂编码技能的需求来简化软件开发。用户只需以自然语言描述其需求，系统即可自动生成应用程序。这种直观的方法吸引了个人开发者、设计师和小企业，并扩展至 Work
Google 测试 Remy AI 代理，以 Gemini 为重点转向用户控制
根据《商业内幕》的报道，谷歌正在测试 Remy，这是 Gemini 的一款全新 AI 个人代理工具。该工具旨在代表用户执行任务，从而简化专业工作流程和日常事务。目前，Remy 正在 Gemini 应用的内部员工专属版本中进行测试。该报告引用了一份内部文件以及对两位熟悉该项目的个人的采访。内部资料将 Remy 描述为“全天候个人代理”，将 Gemini 定位为能够代表用户行事的主动助手。接近该项目的消息人士证实，谷歌员工正在积极测试 Remy。谷歌发言人拒绝提供进一步评论。该报告未提及公开发布
相关专题推荐
写作
最适合撰写长篇SEO文章的AI大纲生成器
2026年最新、最受好评的AI大纲生成器，专为长篇SEO文章打造，由XIX.AI精心甄选。这些强大的工具在快速创建高质量内容方面提供了颠覆性的帮助，显著提升了写作效率。 获取免费版与付费版的对比分析，以及实际测试结果和详细排名，助您找到最适合自身需求、不容错过的理想选择。立即探索，解锁您的AI竞争优势。
8 个工具
xix.ai
教育与学习
用于作业和考试备考的AI学习工具
2026年最新最佳AI学习工具，助您轻松完成作业和备考！XIX.AI精心筛选出一份广受好评的顶级工具清单，这些功能强大、颠覆传统的工具经过实际测试，能帮助学生提升效率、简化作业流程，并轻松通过考试。 获取免费版与付费版的对比分析、详细排名以及必试选项，释放你的AI优势。立即探索！
10 个工具
xix.ai
音乐创作
面向词曲创作者、旋律片段、主旋律及多语言草稿创作的AI人声演示工具
2026 年最新最佳 AI 人声演示工具，专为词曲创作者、旋律创作者和多语言内容团队打造！XIX.AI 精心整理了一份经过严格真实世界测试的高评分、变革性工具列表。您将找到详细的免费与付费对比数据、全面排名以及必试选项，帮助您提升创作效率并释放创意潜力。立即探索，发现满足您所有内容需求的完美工具！
9 个工具
xix.ai
商业
适合中小企业的最佳AI竞品分析工具
2026年最新最佳、评价最高的中小企业AI竞争研究工具！XIX.AI精心精选了一系列功能强大、颠覆行业格局的工具，每周都会根据严格的实际测试和详细排名进行更新。您可以查看全面的免费版与付费版对比，从而找到那些能提升工作效率、助您赢得竞争优势的必试工具。 立即探索，发现最适合您的工具！
9 个工具
xix.ai
图像编辑
用于电商服装、皮肤清洁和色彩一致性的 Photoshop AI 修图工具
2026 年最新最佳 Photoshop AI 修图工具，适用于电商服装、皮肤清洁和色彩一致性！这份顶级精选列表包含强大的变革性解决方案，可帮助您提升写作效率、简化内容创作并轻松实现完美的视觉效果。每个工具都经过实际测试，并通过每周更新的排名进行验证，同时提供免费与付费版本的详细对比。由 XIX.AI 支持，这是任何希望发挥 AI 优势的人必试指南。立即探索！
10 个工具
xix.ai
提示词
适用于 ChatGPT 工作流的最佳 AI 提示词库
2026年最新、最受好评的AI提示词库，可优化各类ChatGPT工作流程。XIX.AI精心整理了一套功能强大、具有颠覆性的提示词库，均经过严格的实际测试，以确保最佳性能。 您可以查看详细的免费版与付费版对比分析以及专家排名，这些内容将帮助您挑选出必试的工具，从而提升工作效率并释放您的AI优势。立即探索！
11 个工具
xix.ai
评论 (0)
0/500
阿里国际数字商务团队推出了Marco-MoE系列的最新成员Marco-Mini-Instruct，展示了“小规模也能带来大成效”的理念。 该模型总参数数为173亿，其中仅8.6亿为活跃参数（约占5%），从而实现了卓越的推理速度，即使在标准CPU上也能流畅运行。
超轻量级：针对 CPU 性能进行优化
据官方数据显示，该模型采用8位量化，配合四条DDR4 2400内存条，可实现约每秒30个令牌的推理速度。这种高效性使专家混合（MoE）架构更接近主流应用，显著降低了本地部署的门槛。
关键创新：升级再造技术释放潜力
Marco-Mini-Instruct 的突出特点不在于其规模或速度，而在于其独特的创建方法。该模型并非从零开始训练，而是通过“升级再造”技术，基于 Qwen3-0.6B-Base 模型演化而来。
该过程涉及将紧凑型小模型的组件拆分或复制为多个专家，并引入路由机制。同时，该方法还集成了细粒度子矩阵划分和“Drop-Upcycling”策略——在训练过程中随机舍弃某些专家或路由路径，以增加正则化并提高鲁棒性。 该方法成功地将纯Dense模型升级为MoE架构，为业界提供了MoE训练的一种全新、经济且高效的途径。
上下文长度与训练设置
该模型配置将 max_position_embeddings 扩展至 32K，但监督微调（SFT）阶段采用 8192 个令牌的上下文。因此，默认上下文长度非常适合大多数实际应用场景。
训练后突破：级联策略内蒸馏
后训练阶段同样令人印象深刻：首先进行 SFT 预热，随后采用级联的策略内蒸馏策略。 起初，蒸馏过程采用 Qwen3-30B-A3B-Instruct 作为教师模型，随后切换至更强大的 Qwen3-Next-80B-A3B-Instruct。 蒸馏数据涵盖指令遵循、复杂推理、对齐安全性和数学能力，确保模型在保持高效的同时显著提升整体智能水平。
基准测试结果：0.86B 活跃参数超越 4B 密集模型
最终生成的Marco-Mini-Instruct在多数主流基准测试中表现优于Qwen3-4B等众多密集模型。仅凭0.86B个活跃参数，它充分验证了MoE架构在实现“小而强”性能方面的巨大潜力。
行业影响：一种新的开源 MoE 训练范式
AIbase认为，这一成果的最大价值在于为开发者开辟了新的机遇。开发者不再需要从头开始训练大规模MoE模型；相反，团队可以选择一个合适的小型稠密模型，并严格复现论文中概述的“上循环”和“Drop-Upcycling”过程。 整个训练成本仍处于可控范围：SFT阶段需要64块GPU运行24小时，蒸馏阶段需要64块GPU运行110小时，这大大降低了中小型团队尝试MoE的门槛。
阿里巴巴此次的最新“改良”再次证明，模型效率的突破并不一定依赖于参数堆叠；创新的训练范式同样能够推动质的飞跃。 Marco-Mini-Instruct的发布无疑将加速MoE技术在边缘设备及个人开发者场景中的应用，使其成为整个行业值得关注的重要发展动向。
美国股市触及历史里程碑，人工智能与航空航天巨头准备开启万亿美元时代
埃隆·马斯克、山姆·阿尔特曼和达里奥·阿莫迪，这三位科技领域的巨头，正推动其各自的企业迈向首次公开募股（IPO）。随着 SpaceX、OpenAI 和 Anthropic——这三家估值接近万亿美元的行业巨头——即将上市，2026 年被预测将成为美国历史上新股发行规模最大的一年。这一历史性的资本激增已引起全球金融界的关注，成为检验公共市场吸收如此大规模资金能力的关键压力测试。这些主要融资活动的同步启动预计将打破 2021 年创下的 1560 亿美元纪录。超级独角兽的资本博弈每家公司上市的路径
瑞典人工智能初创公司Lovable Eyes在完成主要融资轮后估值达132亿美元
随着人工智能驱动的编码工具日益普及，瑞典初创公司 Lovable 已获一轮重大融资。该公司计划筹集 30 亿美元，其估值有望升至 132 亿美元——这是去年 12 月记录的 66 亿美元的两倍。预计 Menlo Ventures 将主导此次投资。Lovable 的吸引力源于其核心的“氛围编码”（vibe coding）技术，该技术通过消除对复杂编码技能的需求来简化软件开发。用户只需以自然语言描述其需求，系统即可自动生成应用程序。这种直观的方法吸引了个人开发者、设计师和小企业，并扩展至 Work
Google 测试 Remy AI 代理，以 Gemini 为重点转向用户控制
根据《商业内幕》的报道，谷歌正在测试 Remy，这是 Gemini 的一款全新 AI 个人代理工具。该工具旨在代表用户执行任务，从而简化专业工作流程和日常事务。目前，Remy 正在 Gemini 应用的内部员工专属版本中进行测试。该报告引用了一份内部文件以及对两位熟悉该项目的个人的采访。内部资料将 Remy 描述为“全天候个人代理”，将 Gemini 定位为能够代表用户行事的主动助手。接近该项目的消息人士证实，谷歌员工正在积极测试 Remy。谷歌发言人拒绝提供进一步评论。该报告未提及公开发布
2026年最新、最受好评的AI大纲生成器，专为长篇SEO文章打造，由XIX.AI精心甄选。这些强大的工具在快速创建高质量内容方面提供了颠覆性的帮助，显著提升了写作效率。 获取免费版与付费版的对比分析，以及实际测试结果和详细排名，助您找到最适合自身需求、不容错过的理想选择。立即探索，解锁您的AI竞争优势。
8 个工具
xix.ai
2026年最新最佳AI学习工具，助您轻松完成作业和备考！XIX.AI精心筛选出一份广受好评的顶级工具清单，这些功能强大、颠覆传统的工具经过实际测试，能帮助学生提升效率、简化作业流程，并轻松通过考试。 获取免费版与付费版的对比分析、详细排名以及必试选项，释放你的AI优势。立即探索！
10 个工具
xix.ai
2026 年最新最佳 AI 人声演示工具，专为词曲创作者、旋律创作者和多语言内容团队打造！XIX.AI 精心整理了一份经过严格真实世界测试的高评分、变革性工具列表。您将找到详细的免费与付费对比数据、全面排名以及必试选项，帮助您提升创作效率并释放创意潜力。立即探索，发现满足您所有内容需求的完美工具！
9 个工具
xix.ai
2026年最新最佳、评价最高的中小企业AI竞争研究工具！XIX.AI精心精选了一系列功能强大、颠覆行业格局的工具，每周都会根据严格的实际测试和详细排名进行更新。您可以查看全面的免费版与付费版对比，从而找到那些能提升工作效率、助您赢得竞争优势的必试工具。 立即探索，发现最适合您的工具！
9 个工具
xix.ai
2026 年最新最佳 Photoshop AI 修图工具，适用于电商服装、皮肤清洁和色彩一致性！这份顶级精选列表包含强大的变革性解决方案，可帮助您提升写作效率、简化内容创作并轻松实现完美的视觉效果。每个工具都经过实际测试，并通过每周更新的排名进行验证，同时提供免费与付费版本的详细对比。由 XIX.AI 支持，这是任何希望发挥 AI 优势的人必试指南。立即探索！
10 个工具
xix.ai
2026年最新、最受好评的AI提示词库，可优化各类ChatGPT工作流程。XIX.AI精心整理了一套功能强大、具有颠覆性的提示词库，均经过严格的实际测试，以确保最佳性能。 您可以查看详细的免费版与付费版对比分析以及专家排名，这些内容将帮助您挑选出必试的工具，从而提升工作效率并释放您的AI优势。立即探索！
11 个工具
xix.ai
