apiVersion: apps/v1
kind: DaemonSet
metadata:
  name: fluentd
  namespace: kube-system
spec:
  selector:
    matchLabels:
      name: fluentd
  template:
    metadata:
      labels:
        name: fluentd
    spec:
      containers:
      - name: fluentd
        image: fluent/fluentd-kubernetes-daemonset:v1-debian-elasticsearch
        env:
        - name: FLUENT_ELASTICSEARCH_HOST
          value: "elasticsearch-service"
        - name: FLUENT_ELASTICSEARCH_PORT
          value: "9200"
        volumeMounts:
        - name: varlog
          mountPath: /var/log
        - name: varlibdockercontainers
          mountPath: /var/lib/docker/containers
          readOnly: true
      volumes:
      - name: varlog
        hostPath:
          path: /var/log
      - name: varlibdockercontainers
        hostPath:
          path: /var/lib/docker/containers

2. Logların Fluentd ile Toplanması

Kubernetes node’larındaki Fluentd pod’ları, node’un dosya sisteminde yer alan /var/log/containers dizinini izleyerek burada bulunan tüm container loglarını toplar. Fluentd, bu logları yapılandırmasına göre Elasticsearch’e gönderir.

3. Elasticsearch ile Logların Saklanması

Fluentd, topladığı logları Elasticsearch’e gönderir ve Elasticsearch bu logları indeksleyerek saklar. Elasticsearch’ü kurarken aşağıdaki gibi bir Service tanımlayarak Fluentd’ın Elasticsearch ile bağlantı kurmasını sağlayabilirsiniz:

Elasticsearch Service:

apiVersion: v1
kind: Service
metadata:
  name: elasticsearch-service
  namespace: kube-system
spec:
  selector:
    app: elasticsearch
  ports:
  - port: 9200
    targetPort: 9200

4. Kibana ile Logların Görselleştirilmesi

Kibana, Elasticsearch’teki logları görselleştirmenizi sağlar. Kibana’yı da Kubernetes’e bir Deployment olarak kurduktan sonra, Elasticsearch’ü Kibana’ya tanımlamanız gerekir.

Kibana Configuration:

apiVersion: v1
kind: Service
metadata:
  name: kibana-service
  namespace: kube-system
spec:
  ports:
  - port: 5601
    targetPort: 5601
  selector:
    app: kibana

5. Logların Görüntülenmesi

Kibana’yı kullanarak topladığınız logları analiz edebilir ve görselleştirebilirsiniz. Kibana arayüzüne gidip, Elasticsearch indekslerinizi ekleyip, logları görmeye başlayabilirsiniz.

6. RBAC Yetkisi Verme

Fluentd’ın Kubernetes metadata’larını toplaması için uygun yetkilere sahip olması gerekir. Bunun için, Kubernetes’teki RBAC (Role-Based Access Control) kullanarak Fluentd’a gerekli izinleri vermelisiniz.

Role ve RoleBinding Oluşturma:

1. Role (Yetki Tanımlama): Aşağıdaki Role tanımını kullanarak namespaces kaynaklarına listeleme yetkisi verebilirsiniz:

apiVersion: rbac.authorization.k8s.io/v1
kind: Role
metadata:
  name: fluentd-role
  namespace: kube-system
rules:
- apiGroups: [""]
  resources: ["namespaces"]
  verbs: ["list", "get", "watch"]

apiVersion: rbac.authorization.k8s.io/v1
kind: RoleBinding
metadata:
  name: fluentd-rolebinding
  namespace: kube-system
subjects:
- kind: ServiceAccount
  name: default
  namespace: kube-system
roleRef:
  kind: Role
  name: fluentd-role
  apiGroup: rbac.authorization.k8s.io

Böylelikle Kubernetes cluster’ındaki tüm pod’lardan Fluentd aracılığıyla logları toplar ve Elasticsearch’e gönderip, Kibana ile görüntüleyebilirsiniz. Fluentd’ı düzgün yapılandırdığınızdan ve Elasticsearch’ün Fluentd tarafından ulaşılabilir olduğundan emin olmanız gerekir.