openEuler社区开源项目:CPDS(容器故障检测系统)介绍

2022年12月14日11:23:27 科技 1452

容器故障检测系统 CPDS (Container Problem Detect System) 是由北京凝思软件股份有限公司(以下简称“凝思软件”)设计并开发的容器集群故障检测系统,该软件系统实现了对容器TOP故障、亚健康状态的监测与识别。

2022年11月,凝思软件正式将该项目开源至openEuler社区。


+ + + + +

背景介绍:

随着近几年企业数字化发展浪潮及云原生技术的普及,低时延和高并发的线上场景频繁出现在企业日常经营中,业务创新的需求也在倒逼企业不断运用新兴技术手段。现如今,容器技术被广泛应用于人工智能、大数据、边缘计算等场景,作为轻量化的计算载体,为更多的场景赋予高度的弹性与敏捷性。

业务规模的增长,容器集群规模不断扩张,IT运维压力也成比例增大。各种软、硬件故障而造成的业务中断,成为稳定性影响的重要因素之一。目前业内对容器集群故障的检测方案主要基于集群组件状态检测、服务入口监控、自定义接口检活等,具有一定的局限性,难以对服务的亚健康状态进行检测与识别。处理方式也缺乏故障的诊断与执行策略的制定,难以处理一些关键、核心故障。

针对目前云原生领域存在的问题,凝思软件(LINX SOFTWARE)发起了CPDS(容器故障检测系统)开源项目,该项目开发的系统实现了对容器集群的故障检测、诊断与策略执行,解决了行业内的一个核心痛点问题。


+ + + + +

技术路线:

容器集群异常总体为三大类,即:集群基础服务异常、集群OS异常、业务服务异常。

集群基础服务异常类问题,利用systemd、initv等技术对相关关键服务进行启动、监控与策略执行。

集群OS异常类问题,在宿主机上实现节点代理,对节点网络、系统调用、磁盘LVM等相关信息进行采集、上报及策略执行。

业务服务异常类问题,采用业务无侵入的方式在节点、容器内设置跨NS的代理,针对容器内的应用状态、资源消耗情况、关键系统函数执行情况、io执行状态等进行全方位的监控、分析与异常检测。针对如CPU占用高的这类现象,对其多个参数、指标(irq、iowait等)进行细化分析,定位问题方向,同时结合系统调用、网络、磁盘等方面采集到的数据进行联合分析,定位故障原因,采取相应措施。同时针对业务容器内应用的相关系统调用进行执行结果、耗时等多维度分析,定位容器亚健康等潜在问题,采取相应措施,保障业务容器的稳定运行。


+ + + + +

系统架构:

CPDS系统技术架构如下图所示。其中信息采集模块通过节点、容器信息采集程序从集群基础服务、集群系统、业务容器服务等多层面进行关键数据采集,并上报异常检测模块;异常检测模块完成数据预处理后基于异常规则对采集数据进行异常检测,完成后将检测结果数据进行上传诊断模块;诊断模块基于诊断规则进行节点、业务容器的故障/亚健康诊断,并通过用户交互模块进行可视化诊断结果展示。

openEuler社区开源项目:CPDS(容器故障检测系统)介绍 - 天天要闻


+ + + + +

未来规划:

CPDS由CloudNative SIG进行开发维护,计划在23年下半年发布第一个R版本,提供对openEuler-22.03-LTS的支持。


项目地址:

https://gitee.com/openeuler/Cpds


+ + + + +

关于 凝思

北京凝思软件股份有限公司(以下简称“凝思软件”)由“中国Linux先行者”宫敏博士于2016年创办,是国内先进的国产安全操作系统厂商,以“实现国家大型基础设施行业基础软件国产化安全化”为使命,致力于研发生产“高安全性、高性能、高稳定性”的基础操作系统软件及相关产品和服务,在操作系统层面保障生产及关键业务系统的安全稳定运行,目前已成为国内大型基础行业国产操作系统的中坚力量。

凝思软件拥有安全操作系统、容器系统、分布式存储、虚拟化管理平台、安全云桌面系统、大数据平台、可信验证系统、内网主机安全监管软件、网络高可用软件、Windows应用运行平台等系列产品。




科技分类资讯推荐

引领科技豪华MPV新风尚 第二代腾势D9西安车展亮相 - 天天要闻

引领科技豪华MPV新风尚 第二代腾势D9西安车展亮相

兼具宜商气度与家用温情的科技豪华旗舰MPV,第二代腾势D9迎来西安地区正式亮相。新车依托全球新能源MPV冠军底蕴,以第二代刀片电池、双阀云辇-C、天神之眼5.0智驾等核心技术全面升级,兼顾商务体面与家庭舒适,为西北高端用户带来一站式全能出行解决方案。
采购禁入!科华数据材料造假被拒门外 - 天天要闻

采购禁入!科华数据材料造假被拒门外

本报(chinatimes.net.cn)记者胡雅文 北京报道这家赶上AI算力风口的公司,因投标材料造假,被相关采购方列入禁入名单两年,其此前提出的复议申请也被正式驳回。相关采购平台近日发布公告,明确驳回科华数据股份有限公司(下称“科华数据”,002335.SZ)此前提交的复议申请。早在一年前,科华数据已被认定在“信息通信枢纽...
快评乐道L80:15万元级买大五座,这波值得冲? - 天天要闻

快评乐道L80:15万元级买大五座,这波值得冲?

日前,乐道L80正式发布并开启预售,其整车购买预售价为24.58万元起,租电购买预售价则低至15.98万元起。面对大型SUV市场“细分再细分”之竞争趋势,这款乐道年度重磅新车都有哪些优势?又能否成为“大五座SUV革新之作”?下面,圈哥就带大家全方位感受。
成都直击凯威德:纯电全尺寸SUV的张扬与大气 - 天天要闻

成都直击凯威德:纯电全尺寸SUV的张扬与大气

4月22日,凯迪拉克以奥斯卡级盛典规格,将上海保利大剧院点亮为璀璨舞台,在品牌代言人倪妮与全场嘉宾的共同见证下,凯迪拉克全尺寸纯电公路旗舰——凯威德耀然上市。新车共推出长续航四驱Pro、高性能四驱Ultra两款配置,官方售价区间为46.88万-50.88万元。