【YashanDB监控运维平台（YCM）】资源订阅

网页路径1：【个人中心】>【我的订阅】网页路径2：【个人中心】>【消息中心】>【添加订阅】网页路径3：【右上角个人头像】>【我的订阅】网页路径4：【工作台】>【自定义收藏】功能介绍完成资源托管后，您可以按需订阅需要重点关注的数据库或服务器 添加订阅后，目标资源相关的告警消息、资源变动和任务消息都将会以站内消息的形式通知您。在【工作台】>【自定义收藏】收藏对应数据库或服务器时会自动订阅该资源，但取消收藏与取消订阅不会相互影响。

IT资源运维监控管理平台主要监控了什么？

资源监控就是对那些可能影响IT资源服务能力的各种技术性能参数进行全面监控，以便提前发现问题隐患并预警，帮助企业将故障消灭于萌芽状态之中。 重要的资源监控有以下几点：1.网络监控      系统的网络监控是基于SNMP 管理协议开发的跨厂商、跨平台的通用网络管理模块，能全面管理支持SNMP 协议各个网络设备厂商的产品，监控设备类型包括交换机 图片2.服务器       系统的服务器监控从多个方面对服务器硬件资源和操作系统进行监控管理，监控内容包括非法登录监测、存储空间监测、CPU负载监测、物理内存监测、交换区空间监测、IO负载监测、集群状态监测 图片图片      资源监控是否有效的关键在于科学和合理地规划监控内容，监控内容应该能全面覆盖可能导致该资源可能出现可用性和性能问题潜在隐患点。 监控平台对每类IT资源都参考故障树分析(Fault Tree Analysis，FTA)方法自上而下仔细梳理可能导致资源不可用或性能下降的各种隐患点，然后再据此设计监控指标和参数，最大限度地保证监控全面和有效性

【YashanDB监控运维平台（YCM）】资源信息设置

平台提供了对YashanDB及相关资源的全生命周期管理。提供管理和运维YashanDB，并提供预警和健康检测等监控告警功能，还提供了用户创建、权限授予、资源隔离等系统管理功能。 核心使用场景：包括实例纳管、资源、性能、容量、配置等管理服务，日常监控巡检、故障分析的智能服务，以及备份恢复、高可用等稳定性和安全方面的服务。通过化被动为主动的运维模式，有效地提升数据库运维水平。 资源信息设置包括资源托管设置和时间同步设置。资源托管设置：用户可以自定义配置ycm-agent在被托管服务器中的安装用户、端口以及安装路径。 时间同步设置：支持将云端、管理平台服务器以及被托管资源间进行时间同步。

【YashanDB监控运维平台（YCM）】资源托管设置

您可以自定义配置ycm-agent在被托管服务器中的安装用户、端口以及安装路径，在Web页面中修改配置与修改deploy.yml配置文件中client信息的效果一致。

【YashanDB监控运维平台（YCM）】资源密码保存

如果配置了自动登录，在执行某些需要登录数据库才能进行的操作时流程会更顺畅，否则系统会要求先手动登录数据库再继续后续的操作。

运维与监控

运维与监控 Hive配置 配置方式 Hive可以通过三种方式进行参数配置，但它们的作用范围不同。

【YashanDB监控运维平台（YCM）】基本运维管理

基本运维管理包括实例管理、配置参数、数据空间管理、会话管理、权限管理、数据库审计。实例管理：查看实例的服务器配置、更新数据库实例信息、启停实例、删除备节点等功能。 针对单机部署数据库提供了以下功能模块：基本信息：详情、告警监控、拓扑图、配置、网络配置数据库管理：数据空间管理（表空间）、权限管理、会话管理、备份管理、可靠性方案、数据库审计诊断优化：性能报告、锁管理、 事务分析、慢SQL分析、日志分析、数据库日志针对分布式部署数据库提供了以下功能模块：基本信息：详情、告警监控、拓扑图、配置、网络配置数据库管理：数据空间管理（表空间和表空间集）、权限管理、会话管理、备份管理 、可靠性方案、数据库审计诊断优化：锁管理、事务分析、慢SQL分析、日志分析、数据库日志针对共享集群数据库提供了以下个功能模块：基本信息：详情、告警监控、拓扑图、配置、网络配置数据库管理：数据空间管理（表空间 订阅管理平台支持用户订阅数据库，若数据库发生告警或资源变动时，将推送站内消息提醒给用户。

Greenplum 监控与运维

SQL标准错误码 二、例行系统运维任务 1. 例行vacuum与analyze 2. 例行重建索引 3. 管理GP数据库日志文件 三、推荐的监控与运维任务 1. 监控数据状态 2. 数据库警告日志监控 3. 硬件和操作系统监控 4. 系统目录（元数据表）监控 5. 数据维护 6. 数据库维护 7. 补丁与升级 四、性能问题排查指南 一、监控 1. SQL标准错误码 二、例行系统运维任务 1. 例行vacuum与analyze （1）每天在每个数据库执行，释放过期行所占空间，同时释放事务号防止XID回卷失败。 #! -delete' （2）命令行工具程序日志文件 gpssh -f all_host -e 'find ~/gpAdminLogs -mtime +10 -type f -delete' 三、推荐的监控与运维任务 监控数据状态 （1）列出下线的segment，5-10分钟执行一次，返回行则报警。

服务器运维中常用的几个资源监控工具整理

以这台鲲鹏服务器为例，先查看自己操作系统的发行版本（1）nmon：支持收集一段时间内，整机的CPU、磁盘、网络、内存等各项资源的使用情况。 （2）perf：Linux kernel自带的系统性能优化工具，获取指定进程内的调用情况、各线程调用的CPU资源消耗情况，并支持生成火焰图。 CPU、内存资源消耗情况，并支持查看每个CPU核的使用情况。 （4）iostat：监控每块磁盘的读写次数、数据量大小、使用率。 iostat属于sysstat软件包，可以直接安装。 yum install deltarpmyum install sysstat（6）dstat：监控系统整体的性能信息，包括CPU、磁盘、网络、分页等。

【YashanDB监控运维平台（YCM）】监控大盘

网页路径：【资源监控】>【监控大盘】默认监控大盘功能介绍管理平台预置了一个默认监控大盘，该大盘包含监控指标库中所有监控图，不允许删除默认大盘也不允许修改其配置信息，只能对其进行模式切换、图表配置等信息展示相关的配置 监控大盘中的监控图表也支持启停同步操作、实时刷新和设置监控图表数据展示的时间范围。 自定义监控大盘新建监控大盘网页路径：【新建监控大盘】功能介绍您可以按需新建符合实际需求的自定义大盘，例如仅配置少量最需要关注的监控指标图使大盘更简洁。 图表配置网页路径：【图表配置】功能介绍初始状态下，默认监控大盘或自定义监控大盘未配置主机或数据库资源，需要先进行【图表配置】才能正常展示监控图表。 Note：如果监控大盘中包含的指标在图表配置时未配置同类型资源，则会显示无数据。YashanDB数据库资源可精确到具体实例。

【YashanDB监控运维平台（YCM）】监控图

网页路径1：【资源监控】网页路径2：【工作台】网页路径3：【YashanDB】>【YashanDB列表】网页路径4：【主机管理】>【主机列表】监控图介绍数据库监控图网页路径1：【YashanDB监控】网页路径 1：【监控大盘】网页路径2：【数据库】>【我的收藏】网页路径3：【数据库名称】>【基本信息】>【告警监控】（>【更多监控】）功能介绍监控图是基于监控指标在时间、数量、比率等维度上的数据点之间的关系或趋势 ，理论上每个监控指标对应一张监控图表，但部分监控指标不适合用图表展示且数据图表无监控意义的则不产生监控图，例如YashanDB自选举开关配置等。 1：【主机监控】网页路径1：【监控大盘】网页路径2：【主机】>【我的收藏】网页路径4：【监控】网页路径4：【主机名称】>【监控】功能介绍监控图是基于监控指标在时间、数量、比率等维度上的数据点之间的关系或趋势 ，理论上每个监控指标对应一张监控图表，但部分监控指标不适合用图表展示且数据图表无监控意义的则不产生监控图，例如进程启动用户检测、进程状态等。

【YashanDB监控运维平台（YCM）】监控指标

网页路径：【资源监控】>【监控指标库】功能介绍管理平台提供了丰富的监控指标库，覆盖了数据库、操作系统和服务器的绝大部分关键指标，可以帮助您实时了解目标对象的运行状态、性能、资源用量以及负载等。 同时，为日常运维、性能调优等提供丰富的数据基础，助力于及时预防、发现并解决问题，避免问题扩大而产生业务影响。默认监控指标系统提供了丰富的默认监控指标，默认监控指标不支持编辑和删除。 默认的监控指标会生成默认告警项和添加到默认监控大盘。Note：默认监控大盘中只会添加部分具有图表展示意义的默认监控指标，也只有部分默认监控指标会生成默认告警项。 监控指标支持通过指标名称对监控指标进行搜索。创建指标网页路径：【创建指标】功能介绍除了系统提供的默认监控指标，还可以通过单击【创建指标】，输入指标名称、指标类型、单位和表达式，创建自定义监控指标。 【指标类型】：监控指标所属的资源对象的类型，分为数据库（YashanDB）和主机，必填参数。【表达式】：表达式语法为PromQL，指标可参考默认监控指标。

运维监控，如何获取数据？

运维如果想做自动化高效化，则少不了搭建监控系统。目前市面上已经有大量成熟、开源的监控平台可供挑选。但如果想实现一个监控系统，或了解监控系统的原理，则可参见本文。 1. 常见运维监控系统划分 常见运维监控系统可按有/无Agent，使用Pull/Push获取数据进行简单划分。 [sqpnqlpbyh.png? 相信运维/开发对此协议都很熟悉，用于监控时，它可以直接输入系统命令从而获得监控数据输出。优点是一次就能获取大量的信息，缺点是交互不好控制和获取到的输出往往需要清洗处理。SSH示例如下。 如果所请求的端口是对应的服务的标准端口（80），则端口号可以省略 'Origin' : "http://www.baidu.com", #发起一个针对跨域资源共享的请求 小结 运维监控系统可按“有/无agent”、“使用pull/push获取数据”划分成6类。 Agent实际是一个轻量程序，用于提供系统无法直接提供的数据。

运维监控之使用Prometheus + Grafana 监控 mysql

一、前言 上篇我们介绍如何通过Prometheus + Grafana +node explorer来监控linux，本文介绍一下如何通过Prometheus + Grafana +mysqld explorer 来监控mysql 二、安装mysqld explorer 1、下载mysqld explorer安装包并解压 wget https://github.com/prometheus/mysqld_exporter tar -zvxf mysqld_exporter-0.11.0.linux-amd64.tar.gz mv mysqld_exporter-0.11.0.linux-amd64 mysqld 2、在想监控的数据库中

运维监控之使用Prometheus + Grafana 监控 Linux

一、前言 本文主要介绍如何使用prometheus + grafana+node_exporter 监控 Linux，在介绍如何监控之前，先简要介绍一下grafana和grafana的安装 二、什么是

基于djngo的运维监控平台

README.md #效果一 #效果二 ---- #效果三  传送门： https://github.com/x931890193/-EOMS

系统运维|用 Netdata 监控 Linux

Netdata是一个实时的资源监控工具，它拥有基于web的友好界面，由FireHQL开发和维护。 通过这个工具，你可以通过图表来了解CPU，RAM，硬盘，网络，Apache，Postfix等软硬件的资源使用情况。 它很像Nagios等别的监控软件；但是，Netdata仅仅支持通过Web界面进行实时监控。 Netdata图表控制 Netdata并不会占用多少系统资源，它占用的内存不会超过40MB。因为这个软件是作者用C语言写的。

Kafka运维小贴士 | Kafka 消息监控

数据库发生死锁，或者消费发生并发问题，网络长时间阻塞，这些状况都会导致kafka消费发生阻塞，一旦发生阻塞，用户从mongodb或者elasticsearch中就会查询不到最新的mysql数据，所以笔者需要监控 kafka中消息的消费情况，监控的方案有很多，笔者进行了整理，以便日后回顾。 /kafka-manager命令，kafka默认端口是9000，进入管理页面之后配置kafka节点相关信息，就能监控kafka运行情况 如下是kafka-manager的管理界面 查看所有的消费组 ?

如何实现多站点运维监控？

来源：python运维技术 ID：python运维技术 在小型公司里如果产品线单一的话，比如就一个app, 一般1~2个运维就够用了，如果产品过于庞大，就需要多个运维人员，但对于多产品线的公司来说， 运维人员就要必须分多个人负责，因为超过200个站点让1个人维护，那工作量是巨大的，就单单给开发的沟通时间，估计就要占用一整天时间了，目前我所在的公司站点非常多，为管理方便，之前我们这里是实行过一段叫站长制的方式 ，就是不同人承担不同的项目维护，每个人就是自己所负责项目的站长，这个站长制实行完后，就有个监控问题，之前只要站点有问题，是每个人都可以收到，但为了防止报警泛滥，所以就需要把监控改成故障站点只发给负责该站点的站长 ，有了这个背景，我们今天就来实现这个需求，脚本基本实现首先要有一个能够报警的函数，还需要一个检查站点是否故障的函数，最后一个函数是如果站点恢复后，要重新加入要监控的列表中，到这基本差不多了，但如果站点太多 'Site Currently down - email sent' 这个函数就是从临时字典中取出第一次检查出有问题的站点，15分钟后再次检查，如果返回200，就发送邮件，并从临时字典中移除，重新加入监控列表中

【YashanDB监控运维平台（YCM）】卸载