手当たり次第に書くんだ

飽きっぽいのは本能

Kubernetes Ceph CSI の使い分け – RBD と CephFS をどう見るか

Kubernetes で Ceph を永続ボリュームとして使う場合、Ceph CSI には大きく RBD と CephFS の 2 つの入口があります。どちらも Ceph を使いますが、Pod から見える性質は同じではありません。

この記事では、Ceph CSI RBD と Ceph CSI CephFS を、StorageClass、PVC、Pod の使い方から見比べます。具体的なクラスタ値ではなく、運用時にどちらを選ぶべきかを判断するための観点を扱います。

関連する記事

RBD と CephFS の違い

RBD はブロックデバイスとしてボリュームを提供します。多くのデータベースや単一 Pod が書き込む用途では扱いやすい選択です。CephFS はファイルシステムとして提供され、複数 Pod から共有して読み書きする用途に向いています。

項目RBDCephFS
Pod からの見え方ブロックデバイスをファイルシステムとしてマウントする共有ファイルシステムをマウントする
典型的な用途DB、単一 writer、状態を持つ Pod共有ディレクトリ、複数 reader/writer、アプリ間共有
アクセスモード主に ReadWriteOnceReadWriteMany を扱いやすい
確認する設定pool、image features、fstypefs name、subvolume、共有範囲
注意点複数 Pod から同時 writer にしない共有前提の権限とディレクトリ設計が必要

この違いを曖昧にしたまま StorageClass を作ると、PVC は作成できても、アプリケーションの期待する読み書きモデルと合わないことがあります。

StorageClass で固定すること

Ceph CSI では、StorageClass に provisioner、reclaim policy、volume binding mode、volume expansion の可否などを持たせます。RBD ではさらに image features や fstype も設計対象になります。

kubectl get storageclass
kubectl describe storageclass ceph-csi-rbd
kubectl describe storageclass ceph-csi-cephfs

reclaimPolicy は PVC 削除時に実体ボリュームをどう扱うかに関わります。検証環境では Delete が便利ですが、重要データを扱う環境では消える範囲を理解しておく必要があります。

volumeBindingMode はボリューム確保のタイミングに関わります。Ceph のような外部ストレージでは、Kubernetes ノードのローカル制約だけでなく、Ceph 側の pool、filesystem、認証情報も合わせて考えます。

RBD を選ぶ場面

RBD は、1 つの Pod が状態を持ち、再作成されても同じデータを使いたい場面で扱いやすいです。MariaDB、PostgreSQL、Redis など、基本的に単一 writer として動かす構成では RBD を選ぶ理由があります。

  • DB のデータディレクトリを PVC に出す
  • Pod の再作成後も同じデータを使う
  • ReadWriteOnce の前提で設計する
  • fstype と image features をクラスタ方針として決める

ただし、RBD は共有ファイルシステムではありません。複数 Pod から同時に書き込む共有ディレクトリとして使うと、アプリケーション側の想定と合わないことがあります。

CephFS を選ぶ場面

CephFS は、複数 Pod から同じファイルツリーを扱いたい場合に候補になります。アップロードファイル、共有コンテンツ、複数 replica から参照する静的ファイルなど、ファイルシステムとして共有したい用途で検討します。

  • 複数 Pod から同じディレクトリを参照する
  • ReadWriteMany を使いたい
  • ファイル単位の共有がアプリケーション要件になっている
  • 権限、所有者、ディレクトリ分離をアプリ設計と合わせる

CephFS を使えば共有はしやすくなりますが、共有してよいデータと共有してはいけないデータの境界はアプリケーション側で決める必要があります。単に RWX が使えるからという理由だけで選ぶと、障害時の切り分けが難しくなります。

PVC と Pod で確認すること

StorageClass を作っただけでは、アプリケーションが正しく永続化できているとは言えません。PVC が Bound になっていること、Pod にマウントされていること、Pod 再作成後もデータが残ることを分けて確認します。

kubectl get pvc -A
kubectl describe pvc -n default data-example
kubectl get pod -n default -o wide
kubectl describe pod -n default example-pod

PVC が Pending の場合は、StorageClass、provisioner、Ceph 側の認証情報、pool または filesystem の存在を確認します。Pod が起動しない場合は、PVC ではなくマウント権限やファイルシステムの問題で止まっていることもあります。

Helm release と CSI driver の状態を見る

Ceph CSI を Helm で導入している場合でも、見るべき対象は Helm release だけではありません。release が存在すること、CSI driver の Pod が起動していること、StorageClass と Secret が期待どおり作られていることを分けて確認します。

helm list -A
kubectl get pods -A | grep ceph-csi
kubectl get csidriver
kubectl get secret -A | grep ceph-csi

Helm release が deployed でも、Ceph monitor への到達性や認証情報が誤っていれば PVC の作成で失敗します。Kubernetes 側の状態と Ceph 側の実体を分けて見ることが重要です。

運用時の判断軸

Ceph CSI は、Kubernetes の中だけで完結する機能ではありません。Kubernetes、CSI driver、Ceph cluster、アプリケーションの読み書きモデルがつながって初めて安定します。

  • 単一 writer のデータは RBD を基本に考える
  • 複数 Pod で共有するファイルは CephFS を検討する
  • StorageClass ごとに reclaim policy と expansion の扱いを決める
  • PVC の Bound とアプリケーションの永続化成功を分けて確認する
  • Secret、monitor、pool、filesystem を Kubernetes 外の依存関係として見る

RBD と CephFS は、どちらが上位という関係ではありません。アプリケーションが必要とする読み書きモデルに合わせて使い分けるものです。

参考書籍
参考書籍

Kubernetes完全ガイド 第2版

Kubernetes の永続ボリューム、StorageClass、Pod 運用を体系的に確認したい場合の参考書籍です。価格や在庫はリンク先で確認してください。

Amazon で見る

このリンクは Amazon アソシエイトリンクです。

関連する記事
Kubernetes Ceph CSI の使い分け – RBD と CephFS をどう見るか

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です

日本語が含まれない投稿は無視されますのでご注意ください。(スパム対策)

トップへ戻る