Token时代,开源同行

  发布时间:2026-07-30 15:38:07   作者:玩站小弟   我要评论
/ 涨粉易/当你向一个AI大模型提出一个问题,模型开始回答生成答案时,都会消耗若干数量的Token:作为大模型处理信息的基本单位,每一个Token的诞生,都不是某一项技术的功劳,而是经历了一条漫长的工 。

  / 涨粉易/当你向一个AI大模型提出一个问题,开源同行模型开始回答生成答案时,开源同行都会消耗若干数量的开源同行Token:作为大模型处理信息的基本单位,每一个Token的开源同行诞生,都不是开源同行某一项技术的功劳,而是开源同行经历了一条漫长的工程链路——从GPU芯片的计算指令,到操作系统的开源同行进程调度,到AI框架的开源同行算子编译,到推理引擎的开源同行显存管理,再到云原生集群的开源同行资源编排,最后生成用户收到的开源同行提问回答。

  7月17日至20日世界人工智能大会期间,开源同行沐曦股份将这条看不见的开源同行“Token生产链”搬到线下。在公司展台特设的开源同行“开源工坊”展区,十大开源社区集体亮相——从芯片算力到OS操作系统、开源同行从AI框架到推理引擎、从云原生调度到产业联盟——沐曦股份以完整的“生产链”方式,全景呈现Token背后的开源协作。

  每一个Token背后,都是一次开源协作

  沐曦股份“开源工坊”展区的主题为“每一个Token背后,都是一次开源协作”,现场通过聚集十大开源社区,展出了一条完整的Token生产链条:

  算力层,沐曦股份通过自研GPU与配套软件栈MXMACA,提供了坚实的算力底座。

  系统层,龙蜥社区以“AI ×OS × 云”深度融合为主线,打造面向AI原生的下一代Agentic操作系统底座。它是Token从GPU走向应用的第一道系统级桥梁。

  训练框架层, PyTorch 基金会携手开源社区破局、全力全速领跑下一代智能创新。

  推理层,作为当前最具影响力的两大开源推理引擎,vLLM以PagedAttention技术将KV Cache碎片率降至接近零。SGLang则以RadixAttention大幅降低多轮对话的计算成本。

  调度与基础设施层,CNCF驱动着云原生开源基础设施的演进;密瓜智能则主导发起并持续推动CNCF项目HAMi,致力于让异构算力更易用、更高效、更可治理;Red Hat坚持100%开源理念,让AI工作负载在任何云、任何芯片上自由部署。

  生态与产业化层,九源联合体聚焦国产智能计算系统建设与软件生态统一;木兰开源社区作为国家级开源社区,为项目孵化与开源治理提供公共服务;模力方舟汇聚最新AI模型,提供从体验到部署的全流程服务。

  十个节点,串成一条完整的AI Infra链路。每一个环节的缺失,Token就无法抵达用户。

  “每一层都有人卷,每个参与方都能共赢”

  “开源,让每一层都有人卷,每个参与方都能共赢。”

  每一个Token是否被充分利用,最终体现在每一次生成答案的质量上。模型精度、推理延迟、显存效率、集群吞吐,AI Infra链路上的许多指标都会影响Token的生产效率,进而决定Token的成本。

  这样的复杂度也决定了没有任何一家公司能同时把GPU硬件、操作系统、AI框架、推理引擎、云原生调度全部做到极致。开源让每一家公司在自己最擅长的一层深耕,并通过开放协议将优化成果共享给生态中的所有参与者。

  沐曦股份通过“开源朋友圈”聚齐十大开源社区,共同探索,相互验证,形成了一条打通GPU、操作系统、推理引擎、集群调度的全栈链路,开源协同也已超越“单点创新”、进入到“全链协同”的全新阶段。

  共建人工智能时代的“Android”

  如果说Token生产背后是一条开源协同链条共同参与,真正决定这条链路价值的,是它能否被开发者稳定、高效、低成本地用起来。而在整条Token生产链中,沐曦股份最核心的落点,正是它所处的算力层与软件栈——这也是决定国产算力从“可用”走向“通用易用、稳定可靠”的关键一环。

  沐曦股份以“自主创新+开放兼容”双轨并行理念为起点,自研MXMACA软件栈。提供了一套完整、高效的全栈软件工具链,涵盖应用开发、功能调试和性能调优等核心环节。同时,软件栈另一项突出优势在于原生兼容国际主流GPU生态,能够帮助用户无需过多修改代码、即可实现极低成本生态迁移。

  2025年2月14日, MXMACA软件栈正式开源。目前MXMACA软件栈注册开发者用户已超50万人。

  同时,MXMACA已兼容适配40多种AI框架,覆盖训练、推理、科学计算全场景,并支持500+AI模型、4500+开源项目运行,覆盖95%以上的主流AI场景,并实现了对PyTorch 2.8 2410个算子全量覆盖。

  按照沐曦股份的构想,公司将围绕MXMACA软件栈,努力打造一个开放、自主、全栈兼容的智能计算生态,目标是建设成人工智能时代的“Android”。

  从一颗芯片,到一条链路,再到一个生态,沐曦股份想做的,从来不只是把Token生产出来,而是让每一个Token都被更好地用起来。在开源这条路上,国产算力的答案已经清晰——真正的护城河不是某一层的极致,而是整个生态的共荣。


  • Tag:

相关文章

  • 快手加粉秘籍:轻松涨粉,打造人气账号

    在数字时代,社交媒体的影响力日益增强,而快手作为短视频平台的佼佼者,吸引了无数创作者和观众。如何在快手上快速增加粉丝,成为了许多内容创作者面临的问题。本文将深入探讨快手粉丝增长的奥秘,分享实用的涨粉策
    2026-07-30
  • 抖音直播间留人涨粉|直播间留人话术与场景搭建实现持续涨粉方法

    在抖音直播竞争白热化的当下,直播间留人时长与粉丝转化率已成为衡量运营效果的核心指标。我曾用3个月时间将一个新号从0做到10万粉丝,单场直播留存率从12%提升至47%,关键在于掌握了"场景-话术-节奏"
    2026-07-30
  • 抖音直播停留提升|直播间提升用户停留时长互动玩法与话术策略

    在抖音直播的激烈竞争中,用户停留时长是衡量直播间质量的核心指标之一。如何让观众从“路过”变成“驻足”,甚至主动参与互动?本文结合个人实操经验与真实案例,拆解提升停留时长的底层逻辑与具体方法,助你避开常
    2026-07-30
  • 抖音短视频行业热词|短视频行业热词挖掘工具与内容植入技巧

    在短视频内容同质化严重的2026年,如何精准捕捉用户需求、打造差异化内容成为创作者的核心命题。本文结合实操案例与行业数据,拆解热词挖掘工具使用方法、内容植入技巧及避坑指南,助你突破流量瓶颈。一、热词挖
    2026-07-30
  • 公众号加粉秘籍:轻松实现粉丝增长

    在当今数字化时代,社交媒体已成为品牌和个人展示自我、扩大影响力的重要平台。对于许多运营者来说,如何增加微信公众号的粉丝数量是一个关键问题。本文将为你提供一些实用的策略和技巧,帮助你的公众号快速增粉。明
    2026-07-30
  • 快手文案语录怎么写|快手情感语录短视频脚本与标题撰写技巧

    在快手这个充满活力的短视频平台上,情感语录类内容因其直击人心、引发共鸣的特点,一直备受用户喜爱。然而,如何撰写出既吸引人眼球又能深入人心的快手文案语录,以及如何设计出让人一眼难忘的短视频脚本与标题,却
    2026-07-30

最新评论