鸿鹄协助管理华为云与炎凰Ichiban

炎凰对华为云的需求

在炎凰日常的开发中，对于服务器上的需求，我们基本都是采用云服务。目前我们主要选择的是华为云，华为云的云主机比较稳定，提供的云主机配置也比较多样，非常适合对于不同场景硬件配置的需求，而且在技术支持服务上，响应速度也非常快。

一般来说，我们主要会采购一些包年的云主机，来满足日常的研发和测试。但是同事们也会碰到一些adhoc的需求，比如：对于用户碰到的问题，我们需要在一个实验环境复现它们，我们会临时开几台云主机来模拟客户的环境。

随着炎凰数据的员工越来越多，这样临时创建机器的需求也越来越多。我们发现，华为云的API在功能上非常完整，且华为云的API Explorer是个非常方便的Debug和测试的工具。于是我们通过API快速地开发了Ichiban，这是一个内部创建云主机的工具。

炎凰Ichiban简介

为什么叫Ichiban？因为炎凰有啤酒文化，公司的冰箱中除了饮料，更放满了各种各样的精酿啤酒，我们每周五都会有技术分享会，同时也是一周一度的Happy hour，啤酒+食物无限量供应。所以我觉得Ichiban+烤串是我们炎凰程序员的夏天必备，随时欢迎来炎凰喝啤酒~

首先，Ichiban的登录界面是下图这样。因为我们使用Microsoft Azure AD来管理我们员工的账号，所以我们调用微软的API来进行登录，并记录和管理用户信息。

登录后，就可以看到创建的云主机信息。

从这一层开始，都调用华为云的API来实现，功能上包括了：

创建云主机

云主机开机、关机、重启、远程登录和删除

延长云主机租期

增加硬盘等等

Ichiban 的技术栈

我们使用的是华为云的Python SDK，这里不得不再次称赞华为云的API Explorer，是个能够提供快速开发功能的工具，能够根据你键入的值自动生成代码。

之后也可以使用华为云提供的‘SDK代码示例调试’中调试代码，而且是我们都熟悉的VS Code的风格。截个图，自己体会，常使用VS Code开发的朋友是不是很熟悉？

因为我们使用Python作为开发语言，所以用了 Flask + Gunicorn + Supervisor 来托管Web服务。

Flask 因为本身就是Python编写，所以对Python的契合度就很高，而且是一个轻量级的Web应用框架。

Gunicorn 是作为Flask的WSGI HTTP服务器。它所在的位置通常是在反向代理（如 Nginx）或者负载均衡（如 AWS ELB）和一个web应用（比如 Django 或者 Flask）之间。

这里只要把Flask 的5000端口托管起来即可，配置如下：

Supervisor 的服务进程为supervisord，主要用来在启动自身时启动管理的子进程，响应客户端的命令，重启崩溃或退出的子进程，记录子进程stdout和stderr输出，生成和处理子进程生命周期中的事件。可以在一个配置文件中配置相关参数，包括Supervisord自身的状态。在/etc/supervisord.d/xxxxx.ini 创建子进程，其管理的各个子进程的相关属性。配置文件一般位于/etc/supervisord.conf。

例如：子进程配置/etc/supervisord.d/ichiban.ini

Supervisor 的客户端称为supervisorctl，它提供了一个类shell的接口（即命令行）来使用supervisord服务端提供的功能。通过supervisorctl，用户可以连接到supervisord服务器进程，获得服务器进程控制的子进程的状态，启动和停止子进程，获得正在运行的进程列表。

客户端通过Unix域套接字或者TCP套接字与服务端进行通信，服务器端具有身份凭证认证机制，可以有效提升安全性。当客户端和服务器位于同一台机器上时，客户端与服务器共用同一个配置文件/etc/supervisord.conf，通过不同标签来区分两者的配置。

重启进程时可以运行：

鸿鹄收集来华为云的数据

问题来了。。。

Ichiban的代码我们写好了，功能实现了，解决了开发者使用云主机的问题，但是作为ichiban的管理者，我也碰到了问题，我该如何管理？我如何知道我每月消费了多少费用，以及详细的使用情况？

设想下随着公司同事越来越多，ichiban的使用量必然会增长，费用也会增长。老板问能不能每月或者一个季度对Ichiban做个预算，这时候没有数据的支撑，我们很难拿出数字来做下一次的预算。

这时鸿鹄的价值就凸显出来了，鸿鹄能够帮助我们通过日志文件，非常简单而又清晰地，统计出云主机的开机时间、云主机的数量、进而估算出费用。

Ichiban的日志是调用华为云的API生成的JSON格式的日志文件，然后通过fluentd发送到鸿鹄的平台。(也可以使用Vector作为数据传输工具)。本例中，log的数据类型为JSON，其实，大家可以根据自己的实际情况选择不同的数据类型。鸿鹄不挑数据类型，有什么数据，就接什么类型的数据，就Parse什么类型的数据。