跳到主要内容
产品服务

YCOS|智算调优系统

面向大规模智算业务,对训推框架、通信库、网络配置和主机配置等关键环节进行系统化调优。

大模型推理总吞吐提升 46%大模型推理 TTFT 降低 22%
YCOS 产品展示图

产品定位

从训推框架到底层网络的全栈调优

YCOS 联动训推框架、通信库、网络与主机配置,分析跨层性能瓶颈,通过端到端协同调优提升智算集群的有效算力和业务性能。

核心能力

  • 训推框架:Megatron、DeepSpeed、SGLang
  • 训推通信库:NCCL、DeepEP、Mooncake TE
  • 网络配置:RoCE、PFC、ECN、网络调度
  • 主机配置:CPU、NIC、PCIe、NUMA

核心能力架构

四大关键环节协同调优

围绕智算集群的训练与推理链路,对关键软件与硬件配置开展系统化分析。

训推框架调优

调优对象:Megatron、DeepSpeed、SGLang 等。调优技术:超参数优化、训推性能分析与调优、KV Cache 调优。

训推通信库调优

调优对象:NCCL、DeepEP、Mooncake TE 等。调优技术:多设备融合调度优化、集合通信算法调优。

网络配置调优

调优对象:RoCE、PFC、ECN、网络调度等。调优技术:PFC+ECN 调优、网络性能深度分析与调优。

主机配置调优

调优对象:CPU、NIC、PCIe、NUMA 等。调优技术:计算核心调度、主机网络调优、亲和性调优。

价值与效果

全栈调优价值

通过端到端调优,提升算力性能和业务效率,并适配多种集群场景。

46%

大模型推理总吞吐提升。

22%

大模型推理 TTFT 降低。

适配能力强

同时支持多种推理框架、模型架构、计算卡。

产品服务

其他产品服务

组网、调优、运维与专业服务相互协同,共同覆盖智算网络完整生命周期。

智算组网

ZCube新一代智算集群组网架构

摒弃传统多层树状结构,采用完全扁平的互联架构,取消 Spine 层交换机,配合“单轨+多轨”混合接入与专属路由,为集群内 GPU 通信规划更短、负载更均衡的路径。

了解产品

智算运维

XOPS智算运维系统

面向智算集群的大规模训练和推理场景,打造计算、网络、存储全链路一体化运维平台,实现问题快速定位和故障高效排查。

了解产品

专业服务

全生命周期服务从规划到上线的完整交付能力

通过网络设备、算网调优和运维服务的一站式交付,保障智算集群网络稳定、通信高效、SLA 达标,助力集群快速上线。

了解产品
从网络开始

让下一座智算中心,从网络开始更高效

围绕新建集群、存量改造、性能调优或智能运维,与我们一起评估网络如何释放更多有效算力。

联系我们