نحوه نصب لانگ هورن روی کوبرنتیز
مقدمه #
لانگ هورن یک سیستم ذخیره سازی بلوکی توزیع شده ی سبک و متن باز برای کوبرنتیز است که ذخیره سازی پایدار را برای برنامه های دارای وضعیت در یک خوشه فراهم می کند. ولوم های لانگ هورن، ذخیره سازی بلوکی مقیاس پذیر و با دسترسی بالا را که به گره های کارگر شما متصل است، با پشتیبانی از حالت های دسترسی چندگانه در خوشه کوبرنتیز شما ارائه می دهند.
در یک خوشه کوبرنتیز، لانگ هورن با اجزای اصلی زیر اجرا می شود:
- Longhorn UI: یک رابط وب گرافیکی که می توانید برای مشاهده، ایجاد، مدیریت و پشتیبان گیری از ولوم های Longhorn در یک کلاستر Kubernetes از آن استفاده کنید.
- Longhorn Instance Manager: روی هر گره در خوشه Kubernetes اجرا می شود و عملکردهایی مانند تکثیر، اسنپ شات، مدیریت نمونه، تشخیص خرابی گره و زمان بندی را فعال می کند.
- Longhorn Engine: جزء صفحه داده که داده ها را در کنترلر ذخیره سازی اختصاصی روی هر دستگاه بلوکی می خواند و می نویسد. هر دستگاه Longhorn دارای یک نمونه موتور مربوطه است که داده ها را تکثیر می کند و پشتیبان گیری یا اسنپ شات هایی را روی چندین گره ایجاد می کند.
- Longhorn CSI (Container Storage Interface) Driver: Longhorn را به عنوان یک ارائه دهنده فضای ذخیره سازی در یک کلاستر Kubernetes فعال می کند و عملیات مربوط به حجم را به اقدامات Longhorn ترجمه می کند. از مقدار
driver.longhorn.ioکه توسط منابعی مانند StorageClasses ارجاع داده می شود، برای مدیریت درخواست های حجم استفاده می کند.
این مقاله نحوه استقرار Longhorn روی Kubernetes و ایجاد یک سیستم ذخیره سازی توزیع شده که در دسترس منابع متعدد مانند Pods در کلاستر شما باشد را توضیح می دهد. همچنین از Volumeهای Longhorn در Negarnovin Object Storage پشتیبان گیری خواهید کرد تا بازیابی داده ها را فعال کنید یا Volumeهای جدید بازیابی فاجعه ایجاد کنید.
پیش نیاز ها #
قبل از اینکه شروع کنید:
- یک کلاستر Negarnovin Kubernetes Engine با حداقل
3گره و4 vCPUsدر هر گره مستقر کنید. - Negarnovin Object Storage را مستقر کنید و یک bucket
longhornجدید برای ذخیره پشتیبان های volume خود ایجاد کنید. - یک سرور مجازی با سیستم عامل دبیان ایجاد کنید تا به عنوان ایستگاه کاری مدیریت خوشه استفاده شود.
- با استفاده از SSH و به عنوان یک کاربر غیر ریشه با امتیازات sudo به سرور دسترسی پیدا کنید.
- Kubectl را با پیکربندی VKE خود نصب و پیکربندی کنید تا به کلاستر روی سرور خود دسترسی داشته باشید.
نصب لانگ هورن روی کوبرنتیز #
شما می توانید Longhorn را با استفاده از مدیر بسته Helm یا Kubectl روی کلاستر Kubernetes خود نصب کنید. برای نصب آخرین نسخه سازگار با اکثر نسخه های کلاستر Kubernetes، از Kubectl برای مشخص کردن شماره نسخه هدف و تغییر هرگونه اطلاعات پیکربندی در کلاستر خود استفاده کنید. مراحل زیر را برای نصب آخرین نسخه Longhorn با استفاده از Kubectl دنبال کنید و تمام منابع کلاستر موجود را تأیید کنید.
- آخرین فایل انتشار Longhorn را با استفاده از
wgetدانلود کنید.console$ wget https://github.com/longhorn/longhorn/releases/download/v1.6.1/longhorn.yamlدستور بالا نسخه
1.6.1,لانگ هورن را دانلود می کند، برای تأیید آخرین نسخه جهت استقرار در کلاستر کوبرنتس خود، به مخزن رسمی گیت هاب پروژه مراجعه کنید. - فایل ها را فهرست کنید و تأیید کنید که یک فایل
longhorn.yamlجدید در دایرکتوری کاری شما موجود است.console$ lsخروجی:
longhorn.yaml - با استفاده از آخرین فایل
longhorn.yaml، Longhorn را در کلاستر Kubernetes خود مستقر کنید.console$ kubectl apply -f longhorn.yamlوقتی نصب موفقیت آمیز باشد، خروجی شما باید مانند تصویر زیر باشد.
customresourcedefinition.apiextensions.k8s.io/systemrestores.longhorn.io created customresourcedefinition.apiextensions.k8s.io/volumes.longhorn.io created customresourcedefinition.apiextensions.k8s.io/volumeattachments.longhorn.io created clusterrole.rbac.authorization.k8s.io/longhorn-role created clusterrolebinding.rbac.authorization.k8s.io/longhorn-bind created clusterrolebinding.rbac.authorization.k8s.io/longhorn-support-bundle created service/longhorn-backend created service/longhorn-frontend created service/longhorn-conversion-webhook created service/longhorn-admission-webhook created service/longhorn-recovery-backend created service/longhorn-engine-manager created service/longhorn-replica-manager created daemonset.apps/longhorn-manager created deployment.apps/longhorn-driver-deployer created deployment.apps/longhorn-ui created - تمام منابع Longhorn مستقر در فضای نام جدید
longhorn-systemرا مشاهده کنید و تأیید کنید که آنها به درستی در خوشه شما اجرا می شوند.console$ kubectl get all -n longhorn-systemخروجی:
NAME READY STATUS RESTARTS AGE pod/csi-attacher-57689cc84b-tlzpb 1/1 Running 0 73s pod/longhorn-csi-plugin-lp562 3/3 Running 1 (15s ago) 73s pod/longhorn-ui-655b65f7f9-lgllp 1/1 Running 0 98s NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE service/longhorn-admission-webhook ClusterIP 10.100.203.235 <none> 9502/TCP 103s service/longhorn-backend ClusterIP 10.110.4.220 <none> 9500/TCP 104s NAME DESIRED CURRENT READY UP-TO-DATE AVAILABLE NODE SELECTOR AGE daemonset.apps/engine-image-ei-5cefaf2b 3 3 3 3 3 <none> 84s daemonset.apps/longhorn-csi-plugin 3 3 3 3 3 <none> 74s daemonset.apps/longhorn-manager 3 3 3 3 3 <none> 100s NAME READY UP-TO-DATE AVAILABLE AGE deployment.apps/csi-attacher 3/3 3 3 74s deployment.apps/csi-provisioner 3/3 3 3 74s deployment.apps/csi-resizer 3/3 3 3 74s NAME DESIRED CURRENT READY AGE replicaset.apps/csi-attacher-57689cc84b 3 3 3 74s replicaset.apps/csi-provisioner-6c78dcb664 3 3 3 74s replicaset.apps/csi-resizer-7466f7b45f 3 3 3 74s - آخرین بسته Longhorn NFS را نصب کنید تا ایجاد Volumeهای ReadWriteMany (RWX) در کلاستر شما امکان پذیر شود.console
$ kubectl apply -f https://raw.githubusercontent.com/longhorn/longhorn/v1.6.1/deploy/prerequisite/longhorn-nfs-installation.yaml - تأیید کنید که غلاف های Longhorn NFS در کلاستر شما ایجاد و اجرا می شوند.console
$ kubectl get pods | grep longhorn-nfs-installation
خروجی:
longhorn-nfs-installation-2kd6d 1/1 Running 0 43s longhorn-nfs-installation-52kgg 1/1 Running 0 43s longhorn-nfs-installation-qsst9 1/1 Running 0 43s
ایجاد یک کلاس ذخیره سازی Longhorn #
Longhorn از کلاس ذخیره سازی پیش فرض longhorn برای استقرار ولوم ها در کلاستر Kubernetes شما استفاده می کند. بسته به حجم کاری کلاستر خود، یک کلاس ذخیره سازی جدید ایجاد کنید تا هنگام اعمال PVCهای جدید برای ارتباط با درایور Longhorn CSI و استقرار ولوم های جدید با استفاده از Longhorn manager از آن استفاده کنید. در بخش های بعدی، کلاس های ذخیره سازی جداگانه ای ایجاد کنید تا هنگام اتصال حالت های دسترسی مختلف به PVCها در کلاستر خود از آنها استفاده کنید.
کلاس ذخیره سازی فقط خواندنی و نوشتنی (RWO) #
ادعاهای حجم پایدار (PVC) از حالت دسترسی ReadWriteOnly (RWO) برای نصب یک حجم با امتیازات خواندن و نوشتن روی یک پاد در یک زمان استفاده می کنند. RWO از اشتراک گذاری حجم پشتیبانی نمی کند و همه امتیازات خواندن و نوشتن را به یک پاد در یک زمان محدود می کند. این برای برنامه هایی که نیاز به سازگاری داده ها دارند، مانند پایگاه های داده ای که به طور مداوم داده ها را روی حجم های مشترک می نویسند، مناسب است. برای ایجاد یک RWO StorageClass جدید برای استفاده در خوشه خود، مراحل زیر را دنبال کنید.
- با استفاده از یک ویرایشگر متن مانند Nano، یک فایل StorageClass جدید به نام
rwo-storageclass.yamlایجاد کنید.console$ nano rwo-storageclass.yaml - تنظیمات زیر را به فایل اضافه کنید.yaml
kind: StorageClass apiVersion: storage.k8s.io/v1 metadata: name: longhorn-prod provisioner: driver.longhorn.io allowVolumeExpansion: true parameters: numberOfReplicas: "3" staleReplicaTimeout: "2880" # 48 hours in minutes fromBackup: "" fsType: "ext4" reclaimPolicy: Retain
فایل را ذخیره کنید و ببندید.
پیکربندی فوق یک StorageClass
longhorn-prodقابل توسعه جدید با سیاست حفظ (retainpolicy) ایجاد می کند که یک فضای ذخیره سازی را حتی در صورت حذف PVC مرتبط، فعال نگه می دارد. در پیکربندی:provisioner: درایور تأمین کننده ی فضای ذخیره سازی پایدار (PV) را تنظیم می کند. مقدارdriver.longhorn.ioاز موتور مورد نیاز Longhorn برای استقرار و مدیریت فضاها استفاده می کند در حالی که مقداری مانندblock.csi.negarnovin.comفضاهای ذخیره سازی پایدار (PV) را با Negarnovin Block Storage مستقر می کند که با Longhorn manager سازگار نیستند.allowVolumeExpansion: امکان تغییر ظرفیت درایوهای Longhorn را در یک کلاستر فراهم می کند. برای مثال، یک درایو10 GBمی تواند بسته به نیاز شما تا20 GBیا بیشتر افزایش یابد.numberOfReplicas: تعداد کپی های درایو Longhorn را برای استقرار و اتصال به گره های کلاستر شما تنظیم می کند.staleReplicaTimeout: یک مقدار time-out ایجاد می کند تا وقتی زمان فعالیت مشخص شده منقضی شد، یک درایو Longhorn را به عنوان غیرفعال علامت گذاری کند.staleReplicaTimeout: یک درایو Longhorn را از منبع پشتیبان شما مانند Negarnovin Object Storage بازیابی می کند.fsType: فرمت سیستم فایل ولوم Longhorn را تنظیم می کند.reclaimPolicy: اقدام مربوط به ولوم Longhorn را برای اعمال در هنگام حذف PVC یا PV مرتبط با کلاس مشخص می کند. ولوم های Longhorn از سیاست های حذف و حفظ پشتیبانی می کنند.
- کلاس StorageClass را روی کلاستر خود اعمال کنید.console
$ kubectl apply -f rwo-storageclass.yaml - تمام StorageClasses را در کلاستر خود مشاهده کنید و تأیید کنید که کلاس RWO جدید شما در دسترس است.console
$ kubectl get storageclassخروجی:
NAME PROVISIONER RECLAIMPOLICY VOLUMEBINDINGMODE ALLOWVOLUMEEXPANSION AGE longhorn (default) driver.longhorn.io Delete Immediate true 35m longhorn-prod driver.longhorn.io Retain Immediate true 4s negarnovin-block-storage block.csi.negarnovin.com Delete Immediate true 46m
کلاس ذخیره سازی ReadWriteMany (RWX)
ReadWriteMany (RWX) به چندین Pod اجازه می دهد تا به طور همزمان یک Volume را با امتیازات خواندن و نوشتن در کلاستر Kubernetes شما Mount کنند. این ابزار از اشتراک گذاری Volume پشتیبانی می کند و به Podها امکان دسترسی به داده های مشترک را می دهد که آن را برای اکثر برنامه های موجود در کلاستر شما مناسب می کند. مراحل زیر را برای ایجاد یک StorageClass جدید که می توانید با PVCهای ReadWriteMany (RWX) در کلاستر خود استفاده کنید، دنبال کنید.
- یک فایل جدید StorageClass به نام
rwx-storageclass.yamlایجاد کنید.console$ nano rwx-storageclass.yaml - تنظیمات زیر را به فایل اضافه کنید.yaml
kind: StorageClass apiVersion: storage.k8s.io/v1 metadata: name: longhorn-rwx provisioner: driver.longhorn.io allowVolumeExpansion: true reclaimPolicy: Delete volumeBindingMode: Immediate parameters: numberOfReplicas: "3" staleReplicaTimeout: "2880" fromBackup: "" fsType: "ext4" nfsOptions: "vers=4.2,noresvport,softerr,timeo=600,retrans=5,rw,hard" reclaimPolicy: Retain
فایل را ذخیره کنید و ببندید.
پیکربندی فوق یک کلاس ذخیره سازی جدید ReadWriteMany (RWX)
longhorn-rwxایجاد می کند که از Longhorn NFS برای نصب پادهای مدیریت اشتراکی و فعال کردن امتیازات خواندن و نوشتن همزمان برای چندین پاد در کلاستر شما استفاده می کند.nfsOptionsتفاوت اصلی مشخصات است که گزینه های اضافی Longhorn NFS را هنگام ایجاد والیوم های ReadWriteMany (RWX) فعال می کند. - پیکربندی StorageClass را روی کلاستر Kubernetes خود اعمال کنید.console
$ kubectl apply -f rwx-storageclass.yaml - کلاس StorageClasses را مشاهده کنید و تأیید کنید که کلاس RWX جدید در دسترس است.console
$ kubectl get storageclassخروجی:
NAME PROVISIONER RECLAIMPOLICY VOLUMEBINDINGMODE ALLOWVOLUMEEXPANSION AGE longhorn (default) driver.longhorn.io Delete Immediate true 36m longhorn-prod driver.longhorn.io Retain Immediate true 46s longhorn-rwx driver.longhorn.io Retain Immediate true 9s negarnovin-block-storage block.csi.negarnovin.com Delete Immediate true 47m
ایجاد درخواست های حجمی مداوم (PVC) #
مدیر Longhorn به صورت پویا، هر زمان که درخواست های جدید برای حجم های پایدار (PVC) به StorageClass شما ارجاع دهند، حجم های جدید Longhorn را به عنوان حجم های پایدار (PV) ایجاد می کند. برای ایجاد PVCهای جدید با حالت دسترسی Read Write Once (RWO) یا Read Write Many (RWX) برای نصب به عنوان حجم های ذخیره سازی برای Podها در کلاستر خود، بخش های زیر را دنبال کنید.
پی وی سی خواندنی و نوشتنی (RWO) #
- یک فایل پیکربندی منبع PVC جدید به نام
rwo-pvc.yamlایجاد کنید.console$ nano rwo-pvc.yaml - تنظیمات زیر را به فایل اضافه کنید.yaml
apiVersion: v1 kind: PersistentVolumeClaim metadata: name: test-rwo spec: accessModes: - ReadWriteOnce storageClassName: longhorn-prod resources: requests: storage: 10Gi
فایل را ذخیره کنید و ببندید.
پیکربندی فوق یک PVC
test-rwoجدید ایجاد می کند که بهlonghorn-prodStorageClass ارجاع می دهد تا یک Volume10 GBگیگابایتی Longhorn ایجاد کند، زمانی که PVC توسط یک Pod در کلاستر نصب شده باشد. - PVC را روی خوشه خود بمالید.console
$ kubectl apply -f rwo-pvc.yaml - تمام PVC های خوشه را مشاهده کنید و تأیید کنید که منبع جدید با وضعیت
Boundدر دسترس است.console$ kubectl get pvcخروجی:
NAME STATUS VOLUME CAPACITY ACCESS MODES STORAGECLASS VOLUMEATTRIBUTESCLASS AGE test-rwo Bound pvc-4026f8d2-873c-429b-8068-208b26a75692 10Gi RWO longhorn-prod <unset> 4sبر اساس خروجی بالا، وضعیت
Boundبه این معنی است که درخواست ذخیره سازی PVC موفقیت آمیز بوده و یک پارتیشن Longhorn با نامpvc-4026f8d2-873c-429b-8068-208b26a75692با موفقیت ایجاد شده است. ستون CAPACITY شامل ظرفیت پارتیشن Longhorn است در حالی که ACCESS MODES شامل حالت دسترسی پشتیبانی شده توسط پارتیشن است. - تمام PV های موجود در کلاستر خود را مشاهده کنید و تأیید کنید که یک Volume جدید Longhorn در دسترس است.console
$ kubectl get pvخروجی:
NAME CAPACITY ACCESS MODES RECLAIM POLICY STATUS CLAIM STORAGECLASS VOLUMEATTRIBUTESCLASS REASON AGE pvc-4026f8d2-873c-429b-8068-208b26a75692 10Gi RWO Retain Bound default/test-rwo longhorn-prod <unset> 8sبر اساس خروجی فوق، یک ولوم جدید Longhorn با ظرفیت 10Gi و دسترسی RWO
pvc-4026f8d2-873c-429b-8068-208b26a75692در دسترس است.شما یک PVC از نوع ReadWriteOnce در کلاستر خود ایجاد کرده و یک ولوم جدید Longhorn را آماده کرده اید. بر اساس پیکربندی، Podها در کلاستر شما می توانند PVC را به عنوان یک ولوم ذخیره سازی نصب کنند، اما فقط یک Pod می تواند همزمان داده ها را روی ولوم Longhorn نصب، خوانده و بنویسد.
خواندن، نوشتن و تعداد زیاد (RWX) PVC #
- یک فایل منبع RWX PVC جدید به نام
rwx-pvc.yamlایجاد کنید.console$ nano rwx-pvc.yaml - تنظیمات زیر را به فایل اضافه کنید.yaml
apiVersion: v1 kind: PersistentVolumeClaim metadata: name: rwx-pvc spec: accessModes: - ReadWriteMany storageClassName: longhorn-rwx resources: requests: storage: 20Gi
فایل را ذخیره کنید و ببندید.
پیکربندی فوق یک ReadWriteMany (RWX) PVC
rwx-pvcایجاد می کند که بهlonghorn-rwxStorageClass ارجاع می دهد تا یک ولوم جدید20 GBLonghorn را هنگام نصب PVC به عنوان ولوم ذخیره سازی توسط یک Pod فراهم کند. - منبع را به کلاستر خود اعمال کنید.console
$ kubectl apply -f rwx-pvc.yaml - تمام PVC های موجود در کلاستر خود را مشاهده کنید و تأیید کنید که PVC جدید RWX با وضعیت
Boundدر دسترس است.console$ kubectl get pvcخروجی:
NAME STATUS VOLUME CAPACITY ACCESS MODES STORAGECLASS VOLUMEATTRIBUTESCLASS AGE rwx-pvc Bound pvc-509f254e-255d-4aee-bdc1-8c10c6cc49f5 20Gi RWX longhorn-rwx <unset> 7s test-rwo Bound pvc-4026f8d2-873c-429b-8068-208b26a75692 10Gi RWO longhorn-prod <unset> 3m10s - تمام PV های موجود در کلاستر خود را مشاهده کنید و تأیید کنید که یک Volume جدید Longhorn در دسترس است.console
$ kubectl get pvخروجی:
NAME CAPACITY ACCESS MODES RECLAIM POLICY STATUS CLAIM STORAGECLASS VOLUMEATTRIBUTESCLASS REASON AGE pvc-4026f8d2-873c-429b-8068-208b26a75692 10Gi RWO Retain Bound default/test-rwo longhorn-prod <unset> 3m31s pvc-509f254e-255d-4aee-bdc1-8c10c6cc49f5 20Gi RWX Retain Bound default/rwx-pvc longhorn-rwx <unset> 28sشما یک PVC از نوع ReadWriteMany (RWX) در کلاستر خود ایجاد کرده اید. تمام Podهایی که PVC را به عنوان Storage Volume نصب می کنند، می توانند همزمان داده ها را در Longhorn Volume در کلاستر Kubernetes شما بخوانند و بنویسند.
ادعاهای حجم پایدار (PVC) را آزمایش کنید #
برای آزمایش حالت های دسترسی ReadWriteOnce (RWO) و ReadWriteMany (RWX) خود، با نصب PVC های مربوطه به عنوان حجم های ذخیره سازی، Pod های نمونه برنامه را در خوشه خود مستقر کنید. بخش های زیر را دنبال کنید تا Pod های جدیدی ایجاد کنید که به PVC های شما ارجاع می دهند و تأیید کنید که حجم های جدید Longhorn در خوشه شما ایجاد می شوند.
یک بار خواندن و نوشتن (RWO)
برای ایجاد یک Nginx Pod جدید که فایل های برنامه وب را با استفاده از دایرکتوری /usr/nginx/ و با استفاده از ReadWriteOnce PVC شما به عنوان درایو ذخیره سازی می خواند و می نویسد، مراحل زیر را دنبال کنید.
- یک فایل منبع Pod جدید
nginx-rwo-pod.yamlایجاد کنید.console$ nano nginx-rwo-pod.yaml - تنظیمات زیر را به فایل اضافه کنید.yaml
apiVersion: v1 kind: Pod metadata: name: nginx-webserver spec: containers: - name: rwo-container image: nginx:latest volumeMounts: - name: rwo-volume mountPath: /data volumes: - name: rwo-volume persistentVolumeClaim: claimName: test-rwo
فایل را ذخیره کرده و ببندید.
پیکربندی فوق یک Pod جدید
nginx-webserverایجاد می کند که محتوا را از PVC یک بار خواندنی-نوشتنی که در دایرکتوری/usr/share/nginx/htmlدرون کانتینر برنامه قرار دارد، ارائه می دهد. - منبع را در کلاستر Kubernetes خود اعمال کنید.console
$ kubectl apply -f nginx-rwo-pod.yaml - تمام Pod های موجود در کلاستر خود را مشاهده کنید و تأیید کنید که یک Pod جدید
nginx-webserverدر حال اجرا است.console$ kubectl get podsخروجی:
NAME READY STATUS RESTARTS AGE nginx-webserver 1/1 Running 0 41s - با استفاده از Kubectl به محیط غلاف Nginx دسترسی پیدا کنید.console
$ kubectl exec -it nginx-webserver -- /bin/bash
دستور
-- /bin/bashپوسته Bash را در محیط pod با پشتیبانی از دستورات و ابزارهای رایج لینوکس فعال می کند. هنگامی که دستور فوق با موفقیت اجرا شود، محیط ترمینال شما باید به پوسته زیر تغییر کند..consoleroot@nginx-webserver:/# - یک پیکربندی HTML جدید بنویسید تا با استفاده از ابزار echo، محتوای پیش فرض فایل
/usr/share/nginx/html/index.htmlرا جایگزین کند.console$ echo "<html><body><h1> Hello World! Nginx Writes to the RWO Longhorn Volume </h1></body></html>" > /usr/share/nginx/html/index.html
- دسترسی به آدرس IP
127.0.0.1در Nginx localhost را با استفاده از Curl آزمایش کنید.console$ curl 127.0.0.1
تأیید کنید که محتوای صفحه وب
Hello Worldسلام دنیا شما در خروجی مشابه تصویر زیر نمایش داده می شود.html<html><body><h1> Hello World! Nginx Writes to the RWO Longhorn Volume </h1></body></html>
بر اساس خروجی بالا، پاد
nginx-webserverدسترسی خواندن و نوشتن به والیوم ReadWriteOnce Longhorn که با دایرکتوری/usr/share/nginx/htmlمانت شده است را دارد. با این حال، فقط یک پاد می تواند همزمان حافظه را بخواند یا بنویسد.بر اساس پیکربندی حافظه، پادهای دیگر ممکن است بتوانند PVC را با امتیازات فقط خواندنی مانت کنند، اما نمی توانند همزمان با برنامه
nginx-webserverفایل ها را بنویسند. - از محیط Nginx Pod خارج شوید.console
# exit
خواندن، نوشتن و تعداد زیاد (RWX)
حالت دسترسی Read Write Many (RWX) برای برنامه های خوشه ای با رابط های ارتباطی front-end و back-end مناسب است. مراحل زیر را برای ایجاد Podهای جدید برنامه که همزمان داده ها را در یک volume ذخیره سازی PVC نصب شده ReadWriteMany می خوانند و می نویسند، دنبال کنید.
- یک فایل پیکربندی Pod جدید به نام
log-backend.yamlایجاد کنید که داده ها را در یک دایرکتوری ذخیره سازی mount شده بنویسد.console$ nano log-backend.yaml - تنظیمات زیر را به فایل اضافه کنید.yaml
apiVersion: v1 kind: Pod metadata: name: log-writer spec: containers: - name: log-writer-container image: busybox:latest command: ["/bin/sh", "-c", "while true; do echo $(date) >> /var/log/app.log; sleep 1; done"] volumeMounts: - name: shared-storage mountPath: /var/log volumes: - name: shared-storage persistentVolumeClaim: claimName: rwx-pvc
فایل را ذخیره کنید و ببندید.
پیکربندی فوق یک
log-writerجدید برای Application pod ایجاد می کند که به طور مداوم تاریخ و زمان کلاستر Kubernetes را در یک فایل لاگlonghorn-date.logدر دایرکتوری مشترک/var/log/می نویسد. Volume پی وی سی ReadWriteMany به عنوان یک Volumeshared-storageبا استفاده از دایرکتوری مشترک/var/logبه عنوان مسیر mount قابل دسترسی برای تمام منابع متصل، Mount می شود. - یک فایل پیکربندی Pod دیگر به نام
log-frontend.yamlایجاد کنید تا داده ها را از دایرکتوری ذخیره سازی نصب شده بخواند.console$ nano log-frontend.yaml - تنظیمات زیر را به فایل اضافه کنید.yaml
apiVersion: v1 kind: Pod metadata: name: log-viewer spec: containers: - name: log-reader-container image: busybox:latest command: ["/bin/sh", "-c", "tail -f /var/log/app.log"] volumeMounts: - name: shared-storage mountPath: /var/log volumes: - name: shared-storage persistentVolumeClaim: claimName: rwx-pvc
فایل را ذخیره کنید و ببندید.
پیکربندی فوق یک
log-viewerPod جدید ایجاد می کند که داده ها را از فایلapp.logایجاد شده توسطlogs-writerbackend Pod در دایرکتوری مشترک/var/log/می خواند. - یک فایل پیکربندی Pod جدید در backend به نام
updatelog-backendایجاد کنید که به طور مداوم داده ها را در فایل مشترک می نویسد.console$ nano updatelog-backend.yaml - تنظیمات زیر را به فایل اضافه کنید.yaml
apiVersion: v1 kind: Pod metadata: name: updatelog spec: containers: - name: log-writer-container image: busybox:latest command: ["/bin/sh", "-c", "while true; do echo Update from backend pod $(date) >> /var/log/app.log; sleep 1; done"] volumeMounts: - name: shared-storage mountPath: /var/log volumes: - name: shared-storage persistentVolumeClaim: claimName: rwx-pvc
فایل را ذخیره کنید و ببندید.
پیکربندی فوق یک Pod
updatelogجدید ایجاد می کند که به روزرسانی ها را در فایل مشترکapp.logدر دایرکتوری/var/log/می نویسد. Pod یک پیام جدیدUpdate from backend podو تاریخ کلاستر را به فایل لاگ اضافه می کند. - تنظیمات پاد را روی کلاستر خود اعمال کنید.console
$ kubectl apply -f log-backend.yaml $ kubectl apply -f log-frontend.yaml $ kubectl apply -f updatelog-backend.yaml
- تمام پادهای (Pods) موجود در کلاستر خود را مشاهده کنید و تأیید کنید که پادهای آزمایشی جدید در حال اجرا هستند.console
$ kubectl get podsخروجی:
NAME READY STATUS RESTARTS AGE log-viewer 1/1 Running 1 (37s ago) 59s log-writer 1/1 Running 0 64s updatelog 1/1 Running 0 51s - لاگ های پادِ
log-viewerرا مشاهده کنید و تأیید کنید که هر دو پادِ بک اند به طور فعال در حال نوشتن داده ها در فایل مشترک/var/log/app.logهستند.console$ kubectl logs log-viewerخروجی:
Update from backend pod Tue Apr 30 18:48:19 UTC 2024 Tue Apr 30 18:48:20 UTC 2024 Update from backend pod Tue Apr 30 18:48:20 UTC 2024 Tue Apr 30 18:48:21 UTC 2024 Update from backend pod Tue Apr 30 18:48:21 UTC 2024 Tue Apr 30 18:48:22 UTC 2024 Update from backend pod Tue Apr 30 18:48:22 UTC 2024 Tue Apr 30 18:48:23 UTC 2024 Update from backend pod Tue Apr 30 18:48:23 UTC 2024 Tue Apr 30 18:48:24 UTC 2024 Update from backend pod Tue Apr 30 18:48:24 UTC 2024 Tue Apr 30 18:48:25 UTC 2024 Update from backend pod Tue Apr 30 18:48:25 UTC 2024 Tue Apr 30 18:48:26 UTC 2024 Update from backend pod Tue Apr 30 18:48:26 UTC 2024 Tue Apr 30 18:48:27 UTC 2024 Update from backend pod Tue Apr 30 18:48:27 UTC 2024 Tue Apr 30 18:48:28 UTC 2024 Update from backend pod Tue Apr 30 18:48:28 UTC 2024بر اساس خروجی فوق، Podهای backend
log-writeوupdatelogبه طور همزمان داده ها را در فایل مشترکapp.logمی نویسند در حالی کهlog-viewبه طور فعال داده ها را از فایل می خواند. در نتیجه، روش دسترسی ReadWriteMany به چندین Pod این امکان را می دهد که داده ها را به اشتراک بگذارند، فایل ها را بخوانند و همزمان در یک فضای ذخیره سازی بنویسند.
پیکربندی Longhorn برای دسترسی خارجی #
رابط کاربری (UI) لانگ هورن یک برنامه وب گرافیکی است که به شما امکان می دهد وضعیت ولوم های لانگ هورن و تمام PVCهای نصب شده را رصد کنید. مراحل زیر را برای نصب یک کنترلر Ingress و دسترسی ایمن به رابط کاربری لانگ هورن در کلاستر Kubernetes خود با ارسال درخواست های خارجی به پورت رابط کاربری لانگ هورن دنبال کنید.
- آخرین نسخه Nginx Ingress Controller را با استفاده از Kubectl روی کلاستر Kubernetes خود نصب کنید.console
$ kubectl apply -f https://raw.githubusercontent.com/kubernetes/ingress-nginx/controller-v1.10.1/deploy/static/provider/cloud/deploy.yamlخروجی:
namespace/ingress-nginx created serviceaccount/ingress-nginx created serviceaccount/ingress-nginx-admission created role.rbac.authorization.k8s.io/ingress-nginx created role.rbac.authorization.k8s.io/ingress-nginx-admission created clusterrole.rbac.authorization.k8s.io/ingress-nginx created clusterrole.rbac.authorization.k8s.io/ingress-nginx-admission created rolebinding.rbac.authorization.k8s.io/ingress-nginx created rolebinding.rbac.authorization.k8s.io/ingress-nginx-admission created clusterrolebinding.rbac.authorization.k8s.io/ingress-nginx created clusterrolebinding.rbac.authorization.k8s.io/ingress-nginx-admission created configmap/ingress-nginx-controller created service/ingress-nginx-controller created service/ingress-nginx-controller-admission created deployment.apps/ingress-nginx-controller created job.batch/ingress-nginx-admission-create created job.batch/ingress-nginx-admission-patch created ingressclass.networking.k8s.io/nginx created validatingwebhookconfiguration.admissionregistration.k8s.io/ingress-nginx-admission created - تمام Pod های
ingress-nginxController ایجاد شده را مشاهده کنید و تأیید کنید که Pod ingress-nginx به طور فعال در حال اجرا است.console$ kubectl get pods --all-namespaces -l app.kubernetes.io/name=ingress-nginx
خروجی:
NAMESPACE NAME READY STATUS RESTARTS AGE ingress-nginx ingress-nginx-admission-create-n2gvf 0/1 Completed 0 98s ingress-nginx ingress-nginx-admission-patch-vqfhn 0/1 Completed 0 98s ingress-nginx ingress-nginx-controller-57b7568757-ctk5z 1/1 Running 0 99s - حداقل
3دقیقه صبر کنید تاingress-nginxController یک Load Balancer را مستقر کند. سپس، تمام سرویس های موجود در فضای نام ingress-nginx را مشاهده کنید تا آدرس IP عمومی خارجی اختصاص داده شده به سرویسLoadBalancerخود را تأیید کنید.console$ kubectl get services ingress-nginx-controller --namespace=ingress-nginx
خروجی:
NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE ingress-nginx-controller LoadBalancer 10.106.252.171 203.0.113.5 80:30886/TCP,443:32107/TCP 4m25sبر اساس خروجی بالا، IP متعادل کننده بار خارجی شما
203.0.113.5است. به ثبت کننده دامنه خود دسترسی پیدا کنید و یک رکورد DNS A جدید تنظیم کنید که به آدرس IP خارجی اشاره کند تا همه درخواست ها را به خوشه Kubernetes شما ارسال کند. - یک فایل منبع جدید Ingress به نام
longhorn-ingress.yamlایجاد کنید.console$ nano longhorn-ingress.yaml - تنظیمات زیر را به فایل اضافه کنید.
longhorn.example.comرا با نام دامنه واقعی خود جایگزین کنید.yamlapiVersion: networking.k8s.io/v1 kind: Ingress metadata: name: longhorn-production44 namespace: longhorn-system spec: ingressClassName: nginx rules: - host: negarnovin.ddns.net http: paths: - pathType: Prefix path: "/" backend: service: name: longhorn-frontend port: number: 80
فایل را ذخیره کنید و ببندید.
پیکربندی فوق یک منبع جدید Ingress به نام
longhorn-productionایجاد می کند که رابط کاربری Longhorn را با استفاده از نام دامنه شماlonghorn.example.comدر معرض نمایش قرار می دهد و تمام درخواست های خارجی HTTP را به برنامه داخلیlonghorn-frontendروی پورت80ارسال می کند. - پیکربندی Ingress را روی کلاستر خود اعمال کنید.console
$ kubectl apply -f longhorn-ingress - تمام منابع Ingress را در فضای نام
longhorn-systemمشاهده کنید و تأیید کنید که پیکربندی Longhorn Ingress شما در دسترس است.console$ kubectl get ingressخروجی:
NAME CLASS HOSTS ADDRESS PORTS AGE longhorn-production nginx longhorn.example.com 203.0.113.5 80 2m20sشما Nginx Ingress Controller را نصب کرده اید و یک پیکربندی جدید Longhorn Ingress ایجاد کرده اید که تمام درخواست های خارجی را به برنامه داخلی
longhorn-frontendارسال می کند. در نتیجه، می توانید با استفاده از نام دامنه خود، به طور ایمن به رابط کاربری Longhorn دسترسی داشته باشید تا بتوانید Volumeها را در کلاستر Kubernetes خود ایجاد و مدیریت کنید.
دسترسی به رابط کاربری Longhorn #
- با استفاده از یک مرورگر وب مانند فایرفاکس به نام دامنه Longhorn خود دسترسی پیدا کنید.
http://longhorn.example.com - حجم ها، گره ها و خلاصه فضای ذخیره سازی کلاستر Kubernetes خود را در داشبورد Longhorn تأیید کنید. علاوه بر این، ناحیه حجم ها شامل اطلاعاتی در مورد وضعیت تمام حجم های Longhorn موجود در کلاستر شما است.

- برای دسترسی به Volume های Longhorn موجود در کلاستر Kubernetes خود، روی Volume در منوی ناوبری بالا کلیک کنید.
- تأیید کنید که والیوم های ReadWriteOnce (RWO) و ReadWriteMany (RWX) شما در وضعیت سالمی در دسترس هستند.

- برای مشاهده اطلاعات بیشتر مانند تعداد کپی ها، جزئیات ولوم، اسنپ شات ها و پشتیبان ها، روی هر یک از ولوم های لانگ هورن کلیک کنید.
- به لیست پارتیشن های Longhorn برگردید و روی Create Volume کلیک کنید تا یک پارتیشن Longhorn جدید با استفاده از رابط کاربری Longhorn ایجاد شود.
- اطلاعات مربوط به ولوم مورد نظر خود را وارد کنید و روی منوی کشوییAccess Mode کلیک کنید تا روش دسترسی به ولوم ReadWriteOnce یا ReadWriteMany را انتخاب کنید.

- برای اعمال ولوم جدید و تأیید اینکه در فهرست ولوم های Longhorn شما موجود است، روی OK کلیک کنید.
- ولوم را انتخاب کنید و روی Attach کلیک کنید تا ولوم جدید Longhorn به هر یک از گره های کلاستر شما که فضای ذخیره سازی کافی دارد، اختصاص داده شود.

- روی منوی کشویی Node کلیک کنید، گره کارگر هدف خود را انتخاب کنید و برای آماده سازی ولوم جدید با استفاده از فضای ذخیره سازی گره خود، روی Attach کلیک کنید.
- تأیید کنید که وضعیت ولوم جدید Longhorn سالم است و فیلد Attached To شامل گره کلاستر انتخابی شما می شود.

شما یک درایو Longhorn جدید در رابط کاربری Longhorn ایجاد کرده اید. می توانید یک PVC جدید ایجاد کنید که به نام درایو Longhorn جدید اشاره دارد تا درایو جدید را بسته به روش دسترسی آن، در کلاستر خود mount کنید.
پشتیبان گیری از Volumeهای Longhorn در NegarNovin Object Storage #
پشتیبان گیری های Longhorn با ذخیره سازی S3 مانند Negarnovin Object Storage برای بازیابی و ایجاد Disaster Recovery Volumes (DR volume) در صورت خرابی گره ها در کلاستر شما سازگار است. مراحل زیر را برای اعمال پیکربندی های جدید Negarnovin Object Storage در کلاستر خود دنبال کنید و Longhorn را برای پشتیبان گیری از Volumeها در باکت مقصد خود تنظیم کنید.
- به نمونه Negarnovin Object Storage خود دسترسی پیدا کنید و Hostname, Secret Key و Access Key را برای استفاده در خوشه خود کپی کنید.
- یک فایل منبع مخفی جدید
negarobj-secret.yamlایجاد کنید تا اعتبارنامه های NegarNovin Object Storage خود را در آن ذخیره کنید.console$ nano negarnovinobj-secret.yaml - پیکربندی های زیر را به فایل اضافه کنید.
examplekey,examplesecretوewr1.negarnovin.comرا با اعتبارنامه های واقعی Negarnovin Object Storage خود جایگزین کنید.yamlapiVersion: v1 kind: Secret metadata: name: longhorn-negarnovin-backups namespace: longhorn-system type: Opaque stringData: AWS_ACCESS_KEY_ID: examplekey AWS_ENDPOINTS: https://ewr1.negarnovin.com AWS_SECRET_ACCESS_KEY: examplesecret
فایل را ذخیره کنید و ببندید.
پیکربندی فوق یک فایل جدید به نام
longhorn-negar-backupsبا نام Secret ایجاد می کند که شامل اطلاعات دسترسی Negarnovin Object Storage شما در فضای نامlonghorn-systemاست. Longhorn هنگام ایجاد پشتیبان گیری، بسته به باکت هدف در پیکربندی شما، به این فایل مخفی ارجاع می دهد. - پیکربندی را روی کلاستر Kubernetes خود اعمال کنید.console
$ kubectl apply -f negarobj-secret.yaml - تمام اسرار موجود در فضای نام
longhorn-systemرا مشاهده کنید و تأیید کنید که منبع جدید Negarnovin Object Storage شما در دسترس است.console$ kubectl get secrets -n longhorn-systemخروجی:
NAME TYPE DATA AGE longhorn-negarnovin-backups Opaque 3 35s - در مرورگر وب خود به رابط کاربری Longhorn دسترسی پیدا کنید.
- روی منوی کشویی تنظیمات (Setting ) در منوی ناوبری اصلی کلیک کنید و از لیست گزینه ها، عمومی (General ) را انتخاب کنید.
- به بخش Back Up بروید Backup Target و با استفاده از آدرس اینترنتی
s3://، نام مخزن و آدرس اینترنتی مخزن NegarNovin Object Storage، محل پشتیبان گیری را روی مخزن NegarNovin Object Storage خود تنظیم کنید.s3://[email protected]/ - نام منبع NegarNovin Object Storage Secret خود را
longhorn-negarnovin-backupsدر فیلدBackup Target Credential Secretوارد کنید.
نصب لانگ هورن در کوبرنتیز - برای ذخیره تغییرات و اعمال پیکربندی جدید پشتیبان گیری Longhorn، Enter را فشار دهید.
- برای دسترسی به ولوم های Longhorn خود، در منوی ناوبری اصلی روی Volume کلیک کنید.
- یک حجم هدف برای پشتیبان گیری انتخاب کنید. برای مثال،
test-volume. - برای وارد کردن جزئیات پشتیبان جدید، روی Create Backup در منوی ناوبری بالا کلیک کنید.

- روی Add Labels for Backup کلیک کنید و جزئیات برچسب پشتیبان مورد نظر خود را وارد کنید. به عنوان مثال،
longhorn-backupوlatest-backupبه ترتیب به عنوان کلید و مقدار برچسب. - بسته به حجم درایو خود، منتظر بمانید تا فرآیند پشتیبان گیری کامل شود و برای دسترسی به تمام Backup موجود، در منوی اصلی روی پشتیبان گیری کلیک کنید.
- تأیید کنید که نسخه پشتیبان جدید Longhorn شما در لیست موجود است.

- به مخزن ذخیره سازی negarnovin خود دسترسی پیدا کنید و تأیید کنید که یک دایرکتوری
backupstoreجدید توسط Longhorn با اشیاء پشتیبان گیری حجمی شما ایجاد شده است.
شما از پارتیشن Longhorn خود در Negarnovin Object Storage نسخه پشتیبان تهیه کرده اید، می توانید یک پارتیشن بازیابی فاجعه جدید ایجاد کنید یا از داده های بازیابی برای بازگرداندن هرگونه تغییر خوشه ای استفاده کنید. برای خودکارسازی پشتیبان گیری از پارتیشن Longhorn خود یا ایجاد پشتیبان گیری دستی برای پشتیبان گیری مداوم از داده های پارتیشن در باکت مقصد، به Recurring Job در منوی ناوبری اصلی رابط کاربری Longhorn بروید.
نتیجه گیری #
شما Longhorn را با استفاده از یک کلاستر Negarnovin Kubernetes Engine (VKE) روی Kubernetes مستقر کرده اید. شما Volume Longhorn را ایجاد کرده اید و چندین PVC را با حالت های دسترسی ReadWriteOnce و ReadWriteMany برای استفاده با برنامه های کلاستر خود که PVCها را به عنوان Volumeهای ذخیره سازی Mount می کنند، تنظیم کرده اید. علاوه بر این، شما با استفاده از رابط کاربری Longhorn، پشتیبان های Longhorn را برای ذخیره خارجی داده های Volume جهت بازیابی در صورت خرابی کلاستر ایجاد کرده اید. برای اطلاعات بیشتر و گزینه های پیکربندی، به مستندات Longhorn مراجعه کنید.









