日日操夜夜添-日日操影院-日日草夜夜操-日日干干-精品一区二区三区波多野结衣-精品一区二区三区高清免费不卡

目錄

• 背景
• 邊緣集群限制
• 關(guān)鍵需求
• 方案
• 架構(gòu)圖
• 技術(shù)方案規(guī)劃
• 實(shí)施步驟
• 1. 創(chuàng)建 roles
• 2. 創(chuàng)建 kubernetes-event-exporter config
• 3. 創(chuàng)建 Deployment
• 自動(dòng)化部署
• 最終效果

背景

邊緣集群（基于 樹莓派 + K3S) 需要實(shí)現(xiàn)基本的告警功能。

邊緣集群限制

CPU/內(nèi)存/存儲(chǔ) 資源緊張，無法支撐至少需要 2GB 以上內(nèi)存和大量存儲(chǔ)的基于 Prometheus 的完整監(jiān)控體系方案（即使是基于 Prometheus Agent, 也無法支撐） （需要避免額外的存儲(chǔ)和計(jì)算資源消耗）

網(wǎng)絡(luò)條件，無法支撐監(jiān)控體系，因?yàn)楸O(jiān)控體系一般都需要每 1min 定時(shí)（或每時(shí)每刻）傳輸數(shù)據(jù)，且數(shù)據(jù)量不小；

存在 5G 收費(fèi)網(wǎng)絡(luò)的情況，且訪問的目的端地址需要開通權(quán)限，且按照流量收費(fèi)，且因?yàn)?5G 網(wǎng)絡(luò)條件，網(wǎng)絡(luò)傳輸能力受限，且不穩(wěn)定（可能會(huì)在一段時(shí)間內(nèi)離線）;

關(guān)鍵需求

總結(jié)下來，關(guān)鍵需求如下：

• 實(shí)現(xiàn)對(duì)邊緣集群異常的及時(shí)告警，需要知道邊緣集群正在發(fā)生的異常情況；
• 網(wǎng)絡(luò)：網(wǎng)絡(luò)條件情況較差，網(wǎng)絡(luò)流量少，只只能開通極少數(shù)目的端地址，可以容忍網(wǎng)絡(luò)不穩(wěn)定（一段時(shí)間內(nèi)離線）的情況；
• 資源：需要盡量避免額外的存儲(chǔ)和計(jì)算資源消耗

方案

綜上所訴，采用如下方案實(shí)現(xiàn)：

基于 Kubernetes Events 的告警通知

架構(gòu)圖

技術(shù)方案規(guī)劃

• 從 Kubernetes 的各項(xiàng)資源收集 Events, 如：

  pod

  node

  kubelet

  crd

  …

• 通過 kubernetes-event-exporter 組件來實(shí)現(xiàn)對(duì) Kubernetes Events 的收集；
• 只篩選 Warning 級(jí)別 Events 供告警通知（后續(xù)，條件可以進(jìn)一步定義）
• 告警通過 飛書 webhook 等通信工具進(jìn)行發(fā)送（后續(xù)，發(fā)送渠道可以增加）

實(shí)施步驟

手動(dòng)方式：

在邊緣集群上，執(zhí)行如下操作：

1. 創(chuàng)建 roles

如下：

cat << _EOF_ | kubectl apply -f -
---
apiVersion: v1
kind: Namespace
metadata:
  name: monitoring
---
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata:
  name: event-exporter-extra
rules:
  - apiGroups:
      - ""
    resources:
      - nodes
    verbs:
      - get
      - list
      - watch
---
apiVersion: v1
kind: ServiceAccount
metadata:
  namespace: monitoring
  name: event-exporter
---
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
  name: event-exporter
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: ClusterRole
  name: view
subjects:
  - kind: ServiceAccount
    namespace: monitoring
    name: event-exporter
---
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
  name: event-exporter-extra
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: ClusterRole
  name: event-exporter-extra
subjects:
  - kind: ServiceAccount
    namespace: kube-event-export
    name: event-exporter
_EOF_

2. 創(chuàng)建 kubernetes-event-exporter config

如下：

cat << _EOF_ | kubectl apply -f -
apiVersion: v1
kind: ConfigMap
metadata:
  name: event-exporter-cfg
  namespace: monitoring
data:
  config.yaml: |
    logLevel: error
    logFormat: json
    route:
      routes:
        - match:
            - receiver: "dump"      
        - drop:
            - type: "Normal"
          match:
            - receiver: "feishu"                     
    receivers:
      - name: "dump"
        stdout: {}
      - name: "feishu"
        webhook:
          endpoint: "https://open.feishu.cn/open-apis/bot/v2/hook/..."
          headers:
            Content-Type: application/json
          layout:
            msg_type: interactive
            card:
              config:
                wide_screen_mode: true
                enable_forward: true
              header:
                title:
                  tag: plain_text
                  content: XXX IoT K3S 集群告警
                template: red
              elements:
                - tag: div
                  text: 
                    tag: lark_md
                    content: "**EventType:**  {{ .Type }}\n**EventKind:**  {{ .InvolvedObject.Kind }}\n**EventReason:**  {{ .Reason }}\n**EventTime:**  {{ .LastTimestamp }}\n**EventMessage:**  {{ .Message }}"
_EOF_