作者:莫源


前言


中华财险是国内互联网金融行业的领导者,在企业云原生上云的过程中,完成了大量多租SaaS化业务的微服务化和容器化。其业务具有非常典型的金融属性,对架构稳定性、资源成本效率、数据安全等方面都提出了更高的要求和挑战,需要在实现降本增效的同时兼顾业务稳定性。在迁移的过程中,遇到了多租业务清算成本难、闲置/浪费资源发现难、优化策略与业务稳定性平衡难等挑战。中华财险工程师团队基于阿里云企业云原生IT成本治理方案沉淀了一套成熟的IT企业成本治理流程与系统,通过开箱即用的业务成本拆分、闲置资源可视化发现、弹性伸缩与混部等优化策略,将集群的闲置资源率从上云前的30%优化到10%以内。


中华财险的上云IT成本治理工作也荣获信通院2022年度云管和云网优秀案例:https://mp.weixin.qq.com/s/XBOcLcW9C0TO9mKhH7svbw


中华财险的云原生之路


云原生上云是目前企业上云的最佳路径,中华财险作为国内互联网金融行业的领导者也在驱动业务通过微服务化、云原生化的方式实现数字化转型。在云原生上云之前,中华财险的业务存在如下问题:


  • 业务资源的管理权限分散在各个团队,生产环境和测试环境下沉在业务团队,业务团队为临时验证的版本冗余了大量的资源。
  • 部分业务有明显的周期性,峰谷容量相差较大,造成资源低负载运行时间较长。
  • 压测环境单位时间内需要大量的临时机器,复用闲置资源需要腾挪机器、协调跨团队资源,流程和成本较高。
  • 缺少可量化的指标发现业务的浪费,单纯的利用率指标不能作为浪费的评判标准。


为了解决上述问题,中华财险工程师团队通过业务的微服务化、容器化的方式,将业务迁移到了阿里云容器服务之上,基于阿里云企业云原生IT成本治理方案沉淀了一套成熟的IT企业成本治理流程与系统,将IT成本的治理周期从原来的季度、月度,降低到了周、天。通过开箱即用的成本可视化与分摊能力,实时衡量团队资源浪费情况,实现数字化的降本增效。


下面是一些优化过程中的关键路径:


  • 通过命名空间进行多租业务的逻辑管理、财资拆分、浪费衡量


中华财险工程师团队将多租的SaaS化业务通过命名空间作为逻辑单元在同一个集群中进行统一管理,通过调整Request与Limit之间的比例,将原有独立容量管理的模型,转变为池化统一管理,提升资源的利用率。通过阿里云企业云原生IT成本治理方案提供的命名空间成本核算的能力,在一个集群内可以轻松实现不同业务的费用分摊,实现容量管理与财资管理。


通过ACK成本分析发现集群浪费情况以及各应用成本分布


  • 全量路压测进行容量预估与可靠性验证


在进行云原生化的过程中,中华财险工程师团队发现,业务团队提交的容量估算与实际的资源使用存在比较大的偏差。因此,在上云的过程中,中华财险工程师团队通过使用PTS(阿里云全链路压测服务)高仿真模拟环境全链路压测,确定系统水位和瓶颈,合理预估资源需求,将成本规模通过数字化的指标进行了建模,在保障集群容量可靠性的前体下,实现了成本规模的控制。


  • 建立成本浪费的衡量标准,发现浪费情况

单纯通过资源利用率的数值来判断业务是否存在浪费从实际场景上来看是不够有说服力的,业务团队冗余容量的策略一般会基于业务峰值的情况、程序高效运行的利用率区间、未来业务发展的情况等因素。在传统的成本治理周期以月度、季度甚至年度等更长时间的情况下,冗余是保障稳定性的最佳选择。为了解决这个问题,中华财险工程师团队提出了应用浪费度模型,通过结合资源利用率、波峰波谷振幅、业务断路器引入、业务成本趋势变化等多个因素进行整合,数字量化浪费比例,有效的发现了集群内的真实浪费情况。


通过 ACK 成本分析发现集群应用的浪费情况


  • 分时混部在线业务与临时业务错峰使用


在中华财险的业务场景中,有大量的临时任务、仿真任务,这些任务具有周期短、资源消耗高等特性,中华财险工程师团队发现集群的真实使用率在白天一直处在比较低的水平,而空闲的时间足够仿真任务和临时任务的执行。此外,在使用分时复用的时候,还配合了快上快下的抢占策略,既保障了集群的整体利用率提升,又能够在突增流量到来的时候,下线临时作业保障业务的整体的稳定性。


  • 定时伸缩实现核心业务资源预供给

中华财险有些业务存在明显的周期性和波峰波谷,资源比例相差数倍,在保障一定冗余的情况下,通过使用定时伸缩的方式,可以让出更多的集群的调度资源,让其他的临时作业可以跑得更快。


  • 闲置资源回收与业务弹性交付

当资源池化后,由于不用节点的调度策略打标和约束,会造成部分节点的调度水位较低,通过识别长时间低水位的节点的方式,可以发现集群中的闲置资源情况,降低资源浪费。并把一些低频度的资源交付通过弹性的方式进行优化,实现成本效率的进一步提升。


中华财险基础设施团队一路走来,经历了线上生产业务从传统IT架构到上云、上云原生的过程,在这个云原生化的过程中,中华财险的业务量也翻了数倍。经过云成本优化的一系列措施,某业务容器化后总降低配置:232C 400G ,节省约7台 32C 64G 的ECS的云计算资源,降低了约20%的服务器成本。在进行了混部、业务高峰低谷的弹性伸缩等优化后,平均成本优化率可达约15%。


最后


从某种角度而言,中华财险基础设施团队的架构优化策略是非常朴素和实用的,通过数字化、模型化、可视化企业IT成本,用数据指导和优化IT成本治理,将集群的闲置资源率从上云前的30%优化到10%以内。企业IT成本治理向来不是新技术的试验场,选择合适自身情况的方案,用数据量化结果,有理有据地驱动企业降本增效。


相关文章:


《阿里云首家通过《可信云·云成本优化工具能力要求》评估,云原生企业 IT 成本治理方案助力企业 FinOps