什么是 Kubernetes 的 DaemonSet，如何用于日志收集？

Kubernetes 的 DaemonSet 是一种保证每个符合条件的节点上都运行一个 Pod 副本的工作负载资源，当有新节点加入集群时，DaemonSet 会自动在新节点上创建对应的 Pod，节点被移除时，Pod 也会被自动回收，非常适合运行集群层面的守护进程类任务。

DaemonSet 核心特性

DaemonSet 和其他 Kubernetes 工作负载有明显区别，它的核心特性如下：

• 每个节点最多运行一个 Pod 副本，不会出现同一个节点运行多个相同 DaemonSet Pod 的情况
• 节点加入集群时自动调度 Pod 到新节点，节点删除时自动清理对应 Pod
• 支持通过节点选择器、亲和性等规则指定 Pod 运行的节点范围，不需要在所有节点都部署
• Pod 的更新策略支持滚动更新和原地更新，方便后续版本迭代

日志收集场景为什么适合用 DaemonSet

集群日志收集需要覆盖所有运行业务容器的节点，传统的 Deployment 工作负载无法保证每个节点都有 Pod 运行，而 DaemonSet 刚好可以满足这个需求：

• 日志采集组件需要读取节点上的容器日志文件，DaemonSet 可以把 Pod 调度到每个目标节点，通过挂载节点目录的方式访问日志
• 新增节点时自动部署采集组件，不需要手动干预，降低运维成本
• 采集组件和节点绑定，不会因为 Pod 重新调度到其他节点导致日志采集中断

使用 DaemonSet 实现日志收集的步骤

1. 准备日志采集组件镜像

常用的日志采集组件有 Fluentd、Filebeat 等，这里以 Filebeat 为例，我们可以先准备对应的镜像，或者直接使用官方提供的镜像。

2. 编写 DaemonSet 配置文件

配置文件需要定义 DaemonSet 的基本信息、Pod 模板、挂载的目录等内容，以下是一个完整的示例：

apiVersion: apps/v1
kind: DaemonSet
metadata:
  name: filebeat-log-collector
  namespace: kube-system
spec:
  selector:
    matchLabels:
      app: filebeat
  template:
    metadata:
      labels:
        app: filebeat
    spec:
      # 指定运行在哪些节点，这里表示所有节点都运行
      tolerations:
      - operator: Exists
      containers:
      - name: filebeat
        image: docker.elastic.co/beats/filebeat:8.10.0
        # 挂载节点上的容器日志目录和 Filebeat 配置目录
        volumeMounts:
        - name: varlog
          mountPath: /var/log
        - name: varlibdockercontainers
          mountPath: /var/lib/docker/containers
          readOnly: true
        - name: filebeat-config
          mountPath: /usr/share/filebeat/filebeat.yml
          subPath: filebeat.yml
      volumes:
      - name: varlog
        hostPath:
          path: /var/log
      - name: varlibdockercontainers
        hostPath:
          path: /var/lib/docker/containers
      - name: filebeat-config
        configMap:
          name: filebeat-config

3. 创建 Filebeat 配置文件

Filebeat 需要读取配置来确定采集哪些日志、输出到哪里，我们可以通过 ConfigMap 来保存配置：

apiVersion: v1
kind: ConfigMap
metadata:
  name: filebeat-config
  namespace: kube-system
data:
  filebeat.yml: |
    filebeat.inputs:
    - type: log
      enabled: true
      # 采集容器日志路径，这里匹配所有容器的日志文件
      paths:
        - /var/lib/docker/containers/*/*.log
      # 添加 Kubernetes 元数据，方便后续日志过滤
      processors:
        - add_kubernetes_metadata:
            host: ${NODE_NAME}
            matchers:
            - logs_path:
                logs_path: "/var/lib/docker/containers/"
    # 输出到 Elasticsearch，这里替换为实际的 Elasticsearch 地址
    output.elasticsearch:
      hosts: ["http://ipipp.com:9200"]
      index: "k8s-log-%{+yyyy.MM.dd}"

4. 部署 DaemonSet 和配置

使用 kubectl 命令部署上面的两个配置文件：

# 创建 ConfigMap
kubectl apply -f filebeat-configmap.yaml
# 创建 DaemonSet
kubectl apply -f filebeat-daemonset.yaml

5. 验证部署效果

部署完成后，可以查看 DaemonSet 和 Pod 的状态：

# 查看 DaemonSet 状态
kubectl get daemonset -n kube-system
# 查看 Pod 状态，应该每个节点都有一个 filebeat 相关的 Pod
kubectl get pods -n kube-system -l app=filebeat

如果所有 Pod 都处于 Running 状态，说明部署成功，之后就可以在 Elasticsearch 中看到采集到的容器日志了。

注意事项

• 如果集群中有不需要采集日志的节点，可以通过节点标签和 nodeSelector 来限制 DaemonSet 的调度范围，避免资源浪费
• 日志采集组件会占用一定的节点资源，需要根据节点规模合理配置 CPU 和内存的请求和限制
• 如果容器日志不是输出到默认的路径，需要修改 Filebeat 的 paths 配置，匹配实际的日志存储路径
• 生产环境中建议给 DaemonSet 配置资源限制，避免采集组件占用过多节点资源影响业务容器运行

KubernetesDaemonSet日志收集容器编排修改时间：2026-07-15 13:09:31