虫子个人博客

kube-state-metrics 收集k8s集群基本状态信息 node-exporter 收集k8s运算节点基础信息 cadvisor 收集容器内部使用资源信息 blackbox-exporter 业务容器存活 k8s部署kube-state-metrics k8s部署node-exporter k8s部署cadvisor k8s部署blackbox-exporter k8s部署prometheus k8s部署grafana k8s部署alertmanager

交付cadvisocadvisor官方dockerhub地址 cadvisor官方github地址 准备镜像12345[root@ops-200 ~]# docker pull google/cadvisor:v0.33.0[root@ops-200 ~]# docker images|grep cadvisorgoogle/cadvisor v0.33.0 752d61707eac 13 months ago 68.6MB[root@ops-200 ~]# docker tag 752d61707eac harbor.od.com/public/cadvisor:v0.33.0[root@ops-200 ~]# docker push harbor.od.com/public/cadvisor:v0.33.0 准备资源配置清单创建资源目录 12[root@ops-200 ~]# ...

交付node-exporternode-exporter官方dockerhub地址 node-expoerer官方github地址 准备镜像12345[root@ops-200 ~]# docker pull prom/node-exporter:v0.18.1[root@ops-200 ~]# docker images|grep node-exporterprom/node-exporter v0.18.1 e5a616e4b9cf 10 months ago 22.9MB[root@ops-200 ~]# docker tag e5a616e4b9cf harbor.od.com/public/node-exporter:v0.18.1[root@ops-200 ~]# docker push harbor.od.com/public/node-exporter:v0.18.1 ...

交付kube-state-metricskube-state-metrics官方地址注：我的环境为1.16.7，所以镜像版本为1.9.4 准备镜像12345[root@ops-200 ~]# docker pull quay.io/coreos/kube-state-metrics:v1.9.4[root@ops-200 ~]# docker images|grep kube-statequay.io/coreos/kube-state-metrics v1.9.4 3eab960b6ee2 2 months ago 32.8MB[root@ops-200 ~]# docker tag 3eab960b6ee2 harbor.od.com/public/kube-state-metrics:v1.9.4[root@ops-200 ~]# docker push harbor.od.com/public/kube ...

alertmanagerPrometheus的警报分为两个部分。Prometheus服务器中的警报规则将警报发送到Alertmanager。该Alertmanager 然后管理这些警报，包括沉默，抑制，聚集和通过的方法，如电子邮件发出通知，也可以通过webhook接入钉钉等国内IM工具。 设置警报和通知的主要步骤是： 设置和配置 Alertmanager 配置Prometheus与Alertmanager连接 在Prometheus中创建警报规则 alertmanager配置文件123456789101112131415161718192021222324252627282930313233# vim /opt/alertmanager/config.yml# 全局配置项global: resolve_timeout: 5m # 超时,默认5min # 邮箱smtp服务 smtp_from: 'XXXX@qq.com' smtp_smarthost: 'smtp.qq.com:465' smtp_auth_username: ‘X ...

RabbitMQ的Monitoring文档中介绍了各种监控RabbitMQ的方式。 其中推荐了第三方的Prometheus Plugin， 这是一个第三方实现RabbitMQ的管理插件，可以作为Prometheus的RabbitMQ Exporter 查看插件目录123# systemctl status rabbitmq-server -l-rabbit plugins_dir "/usr/lib/rabbitmq/plugins:/usr/lib/rabbitmq/lib/rabbitmq_server-3.7.10/plugins# mkdir /usr/lib/rabbitmq/plugins/ 下载插件这里RabbitMQ的版本为3.7.10，Erlang版本为V10.2.1，从Release for latest RabbitMQ 3.7.x versions 里下载插件 123456# wget https://github.com/deadtrickster/prometheus_rabbitmq_exporter/releases/download/v3. ...

下载exporter1# docker pull oliver006/redis_exporter 运行exporter1# docker run -d -p 9121:9121 --name redis_exporter oliver006/redis_exporter --redis.password="passwd" –redis.addr：指明一个或多个 Redis 节点的地址，多个节点使用逗号分隔，默认为 redis://localhost:6379–redis.password：验证 Redis 时使用的密码； prometheus配置单机配置 12345- job_name: 'redis' scrape_interval: 10s static_configs: - targets: - ['localhost:9121'] 集群配置 1234567891011121314- job_name: redis_exporter static_configs: - targets: ...

部署node_exporter下载node_exporterhttps://prometheus.io/download/#node_exporter 123456# wget https://github.com/prometheus/node_exporter/releases/download/v0.18.1/node_exporter-0.18.1.linux-amd64.tar.gz# tar xf node_exporter-0.18.1.linux-amd64.tar.gz# cd node_exporter-0.18.1.linux-amd64/# cp node_exporter /usr/sbin/# which node_exporter/usr/sbin/node_exporter 启动脚本12345678910111213# vim /etc/systemd/system/node_exporter.service[Unit]Description=node_exporterAfter=network.target[Service]Type=simpleUs ...

下载prometheus云盘下载 123# wget https://github.com/prometheus/prometheus/releases/download/v2.17.1/prometheus-2.17.1.linux-amd64.tar.gz# tar xf prometheus-2.17.1.linux-amd64.tar.gz -C /opt/# ln -s /opt/prometheus-2.17.1.linux-amd64/ /opt/prometheus 创建目录与授权12345# cd /opt/prometheus# mkdir etc data# cp prometheus.yml etc/# useradd prometheus -M -s /sbin/nologin# chown prometheus.prometheus -R /opt/prometheus/ 启动脚本123456789101112# vim /etc/systemd/system/prometheus.service[Unit]Description=PrometheusD ...

监控项种类一般可分为 : 业务级别监控 / 系统级别监控 / 网络监控 / 程序代码监控/ 日志监控 / 用户行为分析监控/ 其他种类监控 这里给出几个例子 例如: * 业务监控 可以包含 用户访问QPS，DAU日活，访问状态(http code)， 业务接又(登陆，注册，聊天，上传，留言，短信，搜索)，产品转化率，充值额度，用户投诉 等等这些很宏观的概念(上层) * 系统监控 主要是跟操作系统相关的 基本监控项 CPU/ 内存 / 硬盘 / IO / TCP链接 / 流量 等等 (zabbix, prometheus) * 网络监控 (IDC)对网络状态的监控(交换机，路由器，防火墙，VPN) 互联网公司必不可少，但是很多时候又被忽略 例如:内网之间(物理内网，逻辑内网) 外网丢包率、延迟、等等 * 日志监控 监控中的重头戏(ELK)，往往单独设计和搭建，全部种类的日志都有需要采集 (syslog, soft, 网络设备，用户行为) * 程序监控 一般需要和开发人员配合，程序中嵌入各种接口直接获取数据或者特质的日志格式 prometheus核心组件 • Pro ...