Readme

OMP-运维管理平台

OMP（Operation Management Platform）是云智慧公司自主设计、研发的轻量级、聚合型、智能运维管理平台。是一款为用户提供便捷运维能力和业务管理的综合平台。具备运维一应俱全的功能，目的是提升运维自动化、智能化，提高运维效率，提升业务连续性和安全性。

OMP设计初衷

目前运维面临的痛点：

主机环境多样性，难以统一管理：如：混合云、私有云、跨IDC、虚拟化、容器化等
业务变更难度较大，自动编排能力较低
业务状态监控，多平台难以数据联动
业务出现异常，难以实现故障自愈
业务运行状态，难以评估，更难以分析
运维知识匮乏，缺少专家指导及专家解决方案

运维管理平台(OMP)的设计初衷就是想打造一应俱全的运维平台，降低交付难度，提升运维自动化、智能化，提高运维效率，提升业务连续性和安全性。

OMP核心功能

主机纳管：纳管主机资源，实时监控主机运行状态，可在线管理、在线连接终端等
应用管理：平台已内置常用基础组件，也支持符合标准的自研服务发布到应用商店，从而提供便捷的应用管理，如：安装部署、变更发布、弹性扩缩容、在线配置、优化等
应用监控：涵盖标准监控、定制监控、链路监控、智能监控等多种业务场景，通过大数据智能测算，可感知未来趋势，将异常控制在发生前
故障自愈：当业务系统出现异常或故障时，可按照预定的自愈策略进行故障治理，极大降低故障对业务影响，减少企业损失
状态巡检：自动、手动进行业务指标、运行状态汇总，支持自动发送报告到指定邮箱
备份/恢复：针对核心数据进行本地+异地备份，支持自动执行备份并将数据发送至指定邮箱，达到异地的存储效果，确保数据安全
精简工具：提供运维常用工具、命令、脚本、SQL等，为日常运维操作提供便利，减少误操作、减低技术门槛，支持自行维护、扩充更多工具
知识文库：积累运维常用知识、技术、架构、解决方案等，支持自行维护、扩充文库内容
小智解答：可以快速检索知识文库内容，如文库知识不足，可以申请人工远程支持
权限管理：针对不同用户、角色，进行权限控制，及操作审计
大屏展示：用大屏来展示最核心的运营状态
批量处理、流水线：<待定>

架构设计

环境依赖

后端技术栈：

Python 3.8.7
Django 3.1.4
Saltstack 3002.2
Uwsgi 2.0.19.1

数据库:

mysql 5.7.37
redis 6.2.7

前端技术栈：

Tengine 1.22.0
React 17.0.1

监控技术栈：

Prometheus 2.25.1
Alertmanager 0.24.0
Grafana 7.4.3
Loki 2.1.0
Promtail 2.2.0

安装部署

CentOS环境部署：

当前OMP安装包内部包含了其使用的所有组件，建议将OMP部署在 /data/ 下，当前版本部署流程如下：
step0：下载/解压安装包

# omp_open-0.5.tar.gz
wget -c https://github.com/CloudWise-OpenSource/OMP/releases/download/Release-v0.5.0/omp_open-0.5.tar.gz
tar -xmf omp_open-0.5.tar.gz -C /data

step1：依赖环境配置编辑文件vim /data/omp/config/omp.yaml

注意：当前版本已携带mysql、redis安装，配置信息如下，如需修改请在安装前修改

# redis相关配置
redis:
  host: 127.0.0.1
  port: 6380
  password: common123
# mysql相关配置
mysql:
  host: 127.0.0.1
  port: 3307
  username: common
  password: Common@123

step2：执行安装脚本

cd /data/omp && bash scripts/install.sh
# 注意1：执行后根据提示选择本机ip，如主机上存在多网卡多IP情况，需要根据业务需求自行判断使用哪个ip地址
# 注意2：当前执行操作的用户即为OMP中各个服务进程的运行用户，在以后的维护中，也应使用此用户进行操作

step3：grafana配置（执行install.sh报错时执行此步骤，后续会进行优化）

# 如果在安装过程中出现了grafana相关安装错误，需要确认grafana是否已经启动
# 在grafana启动的前提下执行其更新命令
/data/omp/component/env/bin/python3 /data/omp/scripts/source/update_grafana.py local_ip

step4：grafana跳转面板初始化（在跳转grafana出错情况下使用）

$ /data/omp/component/env/bin/python3 /data/omp/omp_server/manage.py shell
Python 3.8.7 (default, Dec 22 2020, 06:47:35)
[GCC 4.8.5 20150623 (Red Hat 4.8.5-44)] on linux
Type "help", "copyright", "credits" or "license" for more information.
(InteractiveConsole)
>>> from utils.plugin.synch_grafana import synch_grafana_info
>>> synch_grafana_info()
>>> quit()

Demo

通过浏览器访问页面，访问入口为：http://omp.cloudwise.com/#/login
默认用户名：admin
默认密码：Yunweiguanli@OMP
每晚 00:00 将重置数据

卸载OMP

omp节点上卸载操作如下：

bash /data/omp/scripts/uninstall.sh

升级回滚

OMP 自身升级、回滚

# 升级命令
bash cmd_manager omp_upgrade [必填参数：升级目标路径(如:/data/omp，注意此处路径末尾无/)] [选填参数:从某个断点处升级,默认开头]
# 例如
bash 升级包路径/scripts/cmd_manager omp_upgrade /data/omp(当前正在运行的旧安装路径) 

# 回滚命令
bash cmd_manager omp_upgrade [必填参数：升级目标路径(如:/data/omp，注意此处路径末尾无/)] [选填参数:从某个断点处升级,默认开头]
# 例如
bash 升级包路径/scripts/cmd_manager omp_rollback /data/omp(当前正在运行的旧安装路径)

断点执行

常用于执行过程中某一步骤失败时，期望从失败步骤处再次执行时使用，正常情况无需考虑此参数，参数默认下标为0

升级回滚可以理解成为jenkins的pipliene 是分步骤执行的，当我们在某一个位置出现异常时，手动修复后通过错误节点再次进行时使用，而跳过之前已经升级（回滚）正确的步骤

# 升级流程顺序如下：
# PreUpdate, Mysql, Redis, Grafana, Tengine, OmpWeb, OmpServer, Python, PostUpdate

应用商店

如何制作一个OMP应用商店中的应用

OMP 社区版-应用商店发布说明文档

内含

基础组件打包规范
应用服务打包规范
目录和配置说明
postgreSql、redis、rocketmq等应用Demo

卸载应用商店中已经发布的应用

命令行方式如下（未来会支持界面化方式，请关注后续版本）

export LD_LIBRARY_PATH=/data/omp/component/env/lib && /data/omp/component/env/bin/python3.8 /data/omp/scripts/source/uninstall_app_store.py --product 产品名称 --app_name 组件/服务名称 --version 版本

已经部署服务实例的安装包，无法卸载

参数说明：

--version 缺省时，卸载所有版本
卸载基础组件 --app_name 基础组件名称
卸载应用/产品 --product 应用/产品名称
卸载应用下指定服务 --product 应用/产品名称 --app_name 服务名称

OMP脚本功能说明

omp的控制脚本位于 omp/scripts/omp 其具体使用方式如下：

bash omp [all|tengine|uwsgi|worker|cron|salt|prometheus|alertmanager|grafana|loki] [status|start|stop|restart]
# OMP的所有组件的控制参数
bash omp all [status|start|stop|restart]
# 控制tengine的启停，影响页面访问
bash omp tengine [status|start|stop|restart]
# 控制django后端程序启停，影响页面访问
bash omp uwsgi [status|start|stop|restart]
# 控制celery异步任务启停，影响异步任务执行
bash omp worker [status|start|stop|restart]
# 控制celery定时任务，影响定时任务执行
bash omp cron [status|start|stop|restart]
# 控制salt-master的启停，影响服务端对Agent端的控制
bash omp salt [status|start|stop|restart]
# 控制prometheus的启停，影响页面监控数据
bash omp prometheus [status|start|stop|restart]
# 控制alertmanager的启停，影响告警邮件的发送，页面告警信息展示
bash omp alertmanager [status|start|stop|restart]
# 控制grafana的启停，影响页面grafana iframe数据、页面展示
bash omp grafana [status|start|stop|restart]
# 控制loki的启停，影响日志采集、页面展示服务日志问题
bash omp loki [status|start|stop|restart]

欢迎加入获取更多关于OMP的技术资料，或加入OMP开发者交流群，可扫描下方二维码咨询

icacti / omp Goto Github PK

omp's Introduction