在Debian上配置Kafka监控可以通过多种工具和方法实现，以下是详细的步骤：
首先，你需要安装kafka_exporter，这是一个用于监控Kafka集群的工具。你可以通过Docker来部署它。
# 拉取kafka_exporter镜像 docker pull bitnami/kafka-exporter:latest 创建一个docker-compose.yml文件来配置和启动多个kafka_exporter实例，每个实例监控一个Kafka broker。
version: '3.1' services: kafka-exporter-opslogs: image: bitnami/kafka-exporter:latest command: '--kafka.server=10.2.19.43:9092 --kafka.server=10.2.24.62:9092 --kafka.server=10.5.98.190:9092 --kafka.version=3.2.1' restart: always ports: - 9310:9308 kafka-exporter-prod: image: bitnami/kafka-exporter:latest command: '--kafka.server=192.168.53.99:9092 --kafka.server=192.168.53.53:9092 --kafka.server=192.168.53.96:9092' restart: always ports: - 9311:9308 在包含docker-compose.yml的目录中运行以下命令来启动服务：
docker-compose up -d 在Prometheus的配置文件中添加kafka_exporter的job。
scrape_configs: - job_name: 'kafka-exporter' metrics_path: '/metricsscrape_interval: 15s scrape_timeout: 10s static_configs: - targets: - 10.0.0.26:9310 labels: name: kafka-opslogs - 10.0.0.26:9311 labels: name: kafka-prod 在Grafana中添加Kafka监控面板。你可以使用Prometheus的Grafana面板或者自己创建看板。
你可以使用Prometheus的告警功能来监控Kafka集群的健康状况。以下是一个示例告警规则：
groups: - name: kafka rules: - alert: KAFKA_brokers_异常 expr: kafka_broker_info != 1 for: 2m labels: severity: critical annotations: description: "{{ $labels.name }}当前brokers异常：{{ $labels.address }}" - alert: 电商生产KAFKA消息整体积压 expr: sum(kafka_consumergroup_lag_sum{job="kafka-exporter"}) by (name, consumergroup, topic) > 5000 for: 2m labels: severity: critical annotations: description: "【环境】{{ $labels.name }}\n【消费组】{{ $labels.consumergroup }}\n【topic】{{ $labels.topic }}【积压】：{{ $value | printf \"%.2f\" }}" - alert: 电商生产KAFKA消息分区积压 expr: (sum(kafka_consumergroup_lag{job="kafka-exporter"}) by (name 通过以上步骤，你可以在Debian上配置Kafka监控，确保Kafka集群的健康和性能。
