qnap-dev/QNAP-CSI-PlugIn

QTS 5系 (Linux kernel 5系) で動くらしい

直接PVCを作るとQNAP上のLUNが作成されるのでアーキテクチャがシンプルで良い

やる

4. Verify that your NAS has created a storage pool and iSCSI service is enabled.

- To check storage pools on your NAS, open Storage & Snapshots and go to Storage > Storage/Snapshots.

- To check iSCSI service on your NAS, open iSCSI & Fibre Channel and verify that the toggle button is on.

code:bash

Overview

とりあえずtrident-operatorをデプロイ

backend_sample.json でバックエンドをデプロイ

code:bash

# READMEどおり

$ helm install qnap-trident ./Helm/trident -n trident --create-namespace

# ダメそうな雰囲気を出し始める

$ kubectl logs -n trident trident-operator-xxx

(snip)

(snip)

# とりあえずやってみる

$ ./bin/tridentctl obliviate alpha-snapshot-crd

helmでCRD入れたはずなのに、なぜ？？

待ってたら trident-csi コンテナが上がってきた

code:bash

$ kubectl get pod -n trident

NAME READY STATUS RESTARTS AGE

trident-controller-7c885fbf49-mtnlg 6/6 Running 0 21m

trident-node-linux-mk7x6 2/2 Running 0 21m

trident-operator-7cb7ccc9bf-hvllt 1/1 Running 0 41m

backendを追加する

code:bash

$ cat backend_sample.json

{

"version": 1,

"storageDriverName": "qnap-iscsi",

"backendName": "xxxx",

"storageAddress": "xxxxxx",

"username": "admin",

"password": "PASSWORD",

"debugTraceFlags": {"method":true},

"storage": [

{

"labels": {"storage": "renjo"},

"serviceLevel": "Any"

}

]

}

$ ./bin/tridentctl create backend -f backend_sample.json -n trident

$ ./bin/tridentctl get backend -n trident

+-------+----------------+--------------------------------------+--------+---------+

| NAME | STORAGE DRIVER | UUID | STATE | VOLUMES |

+-------+----------------+--------------------------------------+--------+---------+

| xxxx | qnap-iscsi | 4e25fa25-4cbf-4e11-9a9f-04b562eab4cf | online | 0 |

+-------+----------------+--------------------------------------+--------+---------+

$ cat Samples/StorageClass/sc.yaml

apiVersion: storage.k8s.io/v1

kind: StorageClass

metadata:

name: trident-basic

provisioner: csi.trident.qnap.io

allowVolumeExpansion: true

ためしに作る

code:bash

$ cat Samples/Volumes/pvc-basic.yaml

kind: PersistentVolumeClaim

apiVersion: v1

metadata:

name: pvc-basic

annotations:

# thin allocate & threshold is customized

trident.qnap.io/threshold: "90"

trident.qnap.io/ThinAllocate: "true"

spec:

accessModes:

- ReadWriteOnce

resources:

requests:

storage: 5Gi

storageClassName: trident-basic

$ kubectl apply -f Samples/Volumes/pvc-basic.yaml

$ kubectl get pvc

NAME STATUS VOLUME CAPACITY ACCESS MODES STORAGECLASS AGE

pvc-basic Bound pvc-46167d66-cbd5-44bc-87ef-989871cc4058 5Gi RWO trident-basic 18m

できた

code:bash

$ kubectl logs -n middleware moco-yellow-coral-0 moco-init

mysqld: Can't create directory '/var/lib/mysql/data/' (OS errno 13 - Permission denied)

exit status 1

Error: exit status 1

KubernetesはPodTemplate.spec.securityContext.fsGroupを設定することで、外部ディスクをマウントする際に権限を変更することができる。mocoはDockerfile上でrootユーザを利用しないように設定されているので合わせる必要がある。

ただ設定入っているのにうまくできないなあと思って調べていたが、どうもfsTypeがext4のときはダメでxfsのときはfsGroupがちゃんと切り替わるっぽい。のでStorageClasを変更してxfsでマウントされるようにしておく

code:bash

$ cat sc.yaml

apiVersion: storage.k8s.io/v1

kind: StorageClass

metadata:

name: trident-basic

provisioner: csi.trident.qnap.io

allowVolumeExpansion: true

parameters:

fsType: xfs

これで無事動いた