支持百亿请求的微博广告运维技术实践(2)

▲ 图2-6

从17年开始，我们运维团队自研了一套自动化运维平台Kunkka，该平台主要基于SaltStack、Jenkins等技术，可以实现服务的快速上线、快速回滚等操作。整体架构如图2-7所示。

▲ 图2-7 Kunkka整体架构图

开发同学在提交代码到Gitlab后，自动触发Jenkins的编译操作，并将编译后的包上传至Nexus中，这时开发同学只需要选择他们想要部署的目标主机就可以了。

同时，为了应对平常突发的流量高峰和节假日的流量高峰，我们还对接了公司的DCP平台，可以在我们的Kunkka平台上自动生成Docker镜像文件，并上传公司的镜像仓库中，这样就可以在快速的将服务部署到云主机上，实现服务动态扩缩容。

整个服务部署过程中，我们还加入了多级审核机制，保障服务上线的安全性。具体流程如图2-8所示。

▲ 图2-8 Kunkka上线流程图

3、有效的报警

在服务上线后，我们要做的一个很重要的工作就是给我们的服务添加监控报警机制，否则我们就像瞎子一样，对我们系统服务运行情况一无所知。

关于报警系统业界优秀的报警系统有很多，使用的方案也基本大同小异。我们目前主要用的是开源的Prometheus报警系统，这里就不详细介绍了。

（编辑：ASP站长网）