Statefulset Kubernetes con volume persistente NFS

Oct 16 2020

Ho un kubernetescluster e ho una semplice distribuzione per mongodbcon NFSset di volumi persistenti. Funziona bene, ma poiché risorse come i database sono statefulpensate di utilizzare Statefulsetper il mongodb, ma ora il problema è che, quando passo la documentazione, statefulset volumeClaimTemplatesinvece di volumes(nelle distribuzioni).

Ma ora arriva il problema.

in un deploymentfarlo in questo modo:

PersistentVolume-> PersistentVolumeClaim->Deployment

Ma come possiamo farlo Statefulset?

È come:

volumeClaimTemplates -> StatefulSet

Come posso impostare una PersistentVolumeper il volumeClaimTemplates. Se non usiamo PersistentVolumeper StatefulSet, come crea il volume e DOVE crea i volumi? È nelle hostmacchine (cioè i nodi di lavoro kubernetes)?

Poiché ho un NFSprovisioner separato che utilizzo per la mongodbdistribuzione (con replicasset = 1), come posso utilizzare la stessa configurazione con StatefulSet?

Ecco il mio mongo-deployment.yaml-> che trasformerò in un statefulset come mostrato nel secondo frammento di codice ( mongo-stateful.yaml)

mongo-deployment.yaml

<omitted>
---
apiVersion: v1
kind: PersistentVolume
metadata:
  name: task-pv-volume
  labels:
    name: mynfs # name can be anything
spec:
  storageClassName: manual # same storage class as pvc
  capacity:
    storage: 10Gi
  accessModes:
    - ReadWriteMany
  nfs:
    server: <nfs-server-ip>
    path: "/srv/nfs/mydata" 
---
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: task-pv-claim
spec:
  storageClassName: manual
  accessModes:
    - ReadWriteMany #  must be the same as PersistentVolume
  resources:
    requests:
      storage: 1Gi          
---
apiVersion: apps/v1
kind: Deployment
metadata:
  name: mongodb-deployment    
  labels:
    name: mongodb
spec:
  selector:
    matchLabels:
      app: mongodb
  replicas: 1
  template:
    metadata:
      labels: 
        app: mongodb
    spec:
      containers:
      - name: mongodb
        image: mongo
        ports:
        -  containerPort: 27017
        ... # omitted some parts for easy reading
        volumeMounts:
        - name: data  
          mountPath: /data/db
      volumes: 
        - name: data
          persistentVolumeClaim: 
            claimName: task-pv-claim

mongo-stateful.yaml

---
apiVersion: v1
kind: PersistentVolume
metadata:
  name: task-pv-volume
  labels:
    name: mynfs # name can be anything
spec:
  storageClassName: manual # same storage class as pvc
  capacity:
    storage: 10Gi
  accessModes:
    - ReadWriteOnce
  nfs:
    server: <nfs-server-ip>
    path: "/srv/nfs/mydata" 
---
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: mongodb-statefulset
spec:
  selector:
    matchLabels:
      name: mongodb-statefulset
  serviceName: mongodb-statefulset
  replicas: 2
  template:
    metadata:
      labels:
        name: mongodb-statefulset
    spec:
      terminationGracePeriodSeconds: 10
      containers:
      - name: mongodb
        image: mongo:3.6.4
        ports:
        - containerPort: 27017
        volumeMounts:
        - name: db-data
          mountPath: /data/db
  volumeClaimTemplates:
  - metadata:
      name: db-data
    spec:
      accessModes: [ "ReadWriteOnce" ]
      storageClassName: "manual"
      resources:
        requests:
          storage: 2Gi

Ma questo non funziona ( mongo-stateful.yaml) i pod sono nello pendingstato come quando lo descrivo mostra:

sono disponibili 0/3 nodi di default-scheduler: 1 nodo / i aveva contaminazione {node-role.kubernetes.io/master:}, che il pod non tollerava, 2 pod ha PersistentVolumeClaims immediati non associati

PS: la distribuzione funziona bene senza errori, il problema è con Statefulset

Qualcuno può aiutarmi, come scrivere un statefulset con i volumi?

Risposte

1 fjammes Oct 16 2020 at 14:50

Se la tua classe di archiviazione non supporta il provisioning dinamico del volume, devi creare manualmente PV e PVC associati , utilizzando i file yaml, quindi il volumeClaimTemplates consentirà di collegare i PVC esistenti con i pod del tuo statefulset.