客户案例 · 家居制造

九牧厨卫:可观测体系和智能运维

九牧厨卫将可观测从分散监控工具提升为企业级运行数据与决策体系,用统一语义连接资源、应用、服务、业务交易、事件和变更。
可观测AIOps智能运维
01

观测数据

指标·日志·链路
02

运行中枢

事件中心
03

分析方式

语义关联
04

运维演进

AIOps

项目背景

业务系统和基础设施持续扩展,运行数据分散在不同工具和团队。

核心挑战

故障发现、影响判断和根因定位缺少统一数据与关联语义。

客户现状与需求

问题拆开说明,建设目标才不会停留在口号

客户痛点

应用运行状态不可见

监控主要集中在操作系统、虚拟机和部分数据库,应用、接口、方法和业务动作缺少统一观测。

告警分散且噪声高

AlertManager、夜莺等多个系统分别运行,重复告警、孤岛告警和责任不清导致值班负担较高。

多源数据缺少语义关联

指标、日志和调用链虽然存在,但标签、时间、对象和 TraceID 缺少统一标准,数据难以自动关联。

故障分析高度依赖人工

运维和开发需要在多个工具间手工拼接证据,无法快速判断影响范围、根因候选和变更关联。

关键需求

建立全域可观测数据底座

覆盖数据中心、公有云、虚拟机、容器、数据库、中间件、应用和调用链,消除数据盲区。

统一事件与稳定性治理

将多源告警去重、抑制、聚类为可处理事件,通过 SLO/SLA、分级响应和 ITSM 联动形成闭环。

建设语义数据网络

建立统一观测对象模型,关联指标、日志、链路、变更、事件和业务影响。

落地 AIOps 与认知增强

建设动态异常检测、告警聚类、变更归因、根因候选和容量分析,再由大模型负责解释、问答和决策辅助。

建设目标

把业务诉求转化为可交付、可验证的建设目标

  1. 01统一观测数据

    覆盖数据中心、公有云、虚拟机、容器、数据库、中间件、应用和调用链,消除数据盲区。

  2. 02建立业务与技术关联

    将多源告警去重、抑制、聚类为可处理事件,通过 SLO/SLA、分级响应和 ITSM 联动形成闭环。

  3. 03增强故障分析能力

    建立统一观测对象模型,关联指标、日志、链路、变更、事件和业务影响。

建设方案

构建覆盖指标、日志、链路、拓扑和事件的可观测与 AIOps 体系。

01

统一数据采集与存储

通过 Prometheus、OpenTelemetry、日志采集、Kafka/Flink 处理与分层存储,建立稳定的数据供应链。

02

事件告警与 SLO

建设统一告警模型、事件生命周期、P1/P2/P3 分级响应、变更关联、错误预算与复盘机制。

03

语义关联与 AIOps

建设服务依赖拓扑、上下文时间窗口、影响模型、异常检测、时间聚合、根因候选和自学习模型。

04

大模型增强与流程集成

通过运维知识库、故障分析智能体、发布风险智能体和报告智能体,连接 DevOps、ITSM、CMDB 和 IAM。

关键架构

统一可观测与 AIOps 能力架构

从全栈数据采集到语义关联、智能分析和大模型认知增强,形成运行闭环。
01

应用领域与观测对象

将运行数据对齐到业务

制造领域研发领域供应链营销领域业务交易服务 / API
02

统一可观测数据底座

统一采集、标准、传输和存储

指标日志调用链变更数据统一标签分层存储
03

事件与语义关联

把原始数据转化为可理解上下文

告警降噪事件模型观测对象服务拓扑业务影响SLO / SLA
04

AIOps 智能分析

围绕实际运维场景输出判断

动态异常检测告警聚类变更归因根因候选影响评估容量与 FinOps
05

大模型增强与流程闭环

解释、检索、交互与受治理执行

智能运维问答故障分析智能体发布风险智能体运维报告ITSMDevOps / CMDB / IAM

实施路径

从现状评估到体系运营,分阶段控制建设风险

  1. 01
    数据与场景规划

    明确观测场景、数据模型、服务标识、业务语义与建设路线。

  2. 02
    统一观测与语义关联

    建设采集标准、数据底座、服务拓扑、业务地图和事件体系。

  3. 03
    AIOps 与智能协同

    在统一证据上引入异常检测、关联分析和受治理的运维 Agent。

实施原则

从数据模型和采集标准出发,逐步建设关联分析与智能运维能力。

实现效果

效果覆盖效率、质量、稳定性和长期运营

01

故障定位路径更短

开发和运维可以围绕服务、接口和业务链路查看指标、日志、调用链、变更和历史事件。

02

告警转换为可治理事件

同一故障引发的重复告警通过去重、抑制、聚类和拓扑关联收敛为事件,降低值班认知负担。

03

稳定性从经验转向指标闭环

通过服务健康、SLO、关键链路、事件闭环和复盘改进,让稳定性可度量、可跟踪、可持续改进。

04

运维知识可复用

历史故障、根因证据、处置步骤和复盘结论进入知识库,为智能问答和决策辅助提供可追溯依据。

持续演进

平台上线不是终点,能力需要跟随业务持续生长

从可观测走向证据驱动的智能运维

规则、小模型和拓扑算法负责技术判断;大模型负责解释、检索、交互和决策辅助。

能力标签

可观测AIOps智能运维