研运服务平台主要以应用开发支撑为导向、研发质效提升为目标、网管价值经营为抓手，规划“统一入口 + 十大中心”。提供应用研发运营访问一体化入口；适配多云异构云原生底座、支撑Dev Ops研运一体化、服务网管能力管控运营，提升应用开发效益、赋能业务快速创新。如 图1 所示，平台包括资源中心、服务中心、能力中心、应用中心、配置中心、研发中心、运维中心、质效中心、人才中心和流程中心十大模块。

平台定义四类11个角色，驱动多云异构云资源管理、网管服务登记注册、网管能力管控运营、统一权限管控、研运一体化管理等各项目工作开展。面向产品营销和经营决策，设置了产品销售者，主要是一线政企客户经理，负责销售OSS产品、有后端专家支撑诉求；此外，还设置了管理决策者，便于全面掌控网管资源、能力、应用的整体情况，结合网管研发质量、效益、过程等因素，对研发工作做决策指导。

面向平台配置，设置管理员、资源管理员和研发管理员三大角色。管理员负责平台涉及的部门、员工、厂家、角色等基础信息初始化维护，租户创建配置、账号创建配置、安全策略配置。资源管理员负责平台容器资源的统筹规划，计算、存储、网络资源面向不同场景的初始化配置与维护。研发管理员负责平台研发流水线的统筹规划，代码仓库、代码检测、制品库、流水线、镜像仓库面向不同应用场景的初始化配置与维护。

面向服务供给，设置服务提供者和服务管理员两大角色。服务提供者通过标准化信息导入模板和标准化服务注册规范，实现服务开发和服务注册接入。服务管理员对服务的来源(来源系统、提供者)和去向(订阅情况、调用量)进行管控审批，负责服务日常的健康度监控和质效评估分析。

面向产品开发使用，设置能力开发者、能力管理员、应用开发者、应用管理员和应用使用者五大角色。能力开发者从业务的角度对客户需求进行初步分析，并与服务进行匹配，负责能力的开发、测试、交付和调优。能力管理员统筹规划能力全景，明确能力建设里程碑，制定能力上下架规范与考核要求，对能力上架审核，负责能力质效评估运营分析。应用开发者依托平台提供的能力、资源、开发环境集流水线，遵循相关研发管理规范，围绕创新业务场景，快速创建应用。应用管理员负责需求管理审批、研发流水线调用审批、应用上架审批等研发过程管控，负责研运一体化运营管理。应用使用者对已发布的应用进行订阅和使用，可以根据个人诉求提需求。

如 图2 所示，研运服务平台统一对接运营商内部业务系统，整合账号、安全、需求、工单等基础系统能力，面向需求方提供产品商城全面展示底层资源、能力和应用信息，面向内部研发专家提供研发工作台，个性化分配和全流程管理产品研发任务，面向平台运维团队提供统一运维驾驶舱，面向企业管理层提供管理决策中心，实时分析研发质效，企业内部人员能力等信息。

现代化应用是组装式的，各模块可自治、可编排和可发现。可以灵活的构建差异化能力，快速响应客户需求，通过集成化应用数据平台，联接企业应用、数据，整合跨APP数据、开放API封装好业务能力(PBC)，通过低代码提供的组装体验，灵活编排以实现新的业务能力。

组装式应用PBC具备可自治，可编排和可发现三大优势。可自治：应用具有完整的服务能力，能够单独为用户服务。可编排：应用具有非常清晰、易用的接口，能够与其他PBC组合，从而创造新的能力可发现：应用具有能够让开发者发现、使用的服务能力，将服务能力上传到公开目录或服务市场，帮助开发者快速封装。基于组装式应用PBC可以实现服务器无感知，部署方式便捷和自动弹性扩展。服务器无感知：通过打包的服务能力进行快速组装，上线新功能，相对于微服务架构更加灵活。部署方式便捷：Server Less化资源层，用户无需关注底层资源部署。自动弹性扩展：做到一切皆服务，无需运维，做到毫秒级极致弹性，小时级的业务构建 [6] 。

围绕电信运营商网络管理相关软件平台研发和运维，如何保障系统稳健性存在较大。微服务架构造成的运维复杂度高，为保证高可用，势必要做故障演练，而混沌工程平台是必要的支撑手段。混沌工程是提升复杂系统稳定性的赋能活动，通过故障注入实验增加各个角度加强协作、提升系统稳定性的紧迫感，根据实验观测数据，分析系统运行和失效模式，以了解复杂系统，改进系统稳定性设计和可观测机制，提升系统韧性及故障响应速度。

本系统基于Chaos Mesh [7] 技术，通过Kubernetes在测试环境中搭建混沌实验，通过模拟网络故障(延迟、丢包等)、文件系统故障和Pod故障等问题来测试系统的恢复能力，每次混沌实验后，通过查看日志来查看测试结果。同时，结合了CICD工具的特性，完成了混沌实验的自动化执行，提升了测试效率。