VeeamとCephを使用したバックアップソリューションアーキテクチャ

VMWareとHyper-V上の仮想マシンのバックアップのアーキテクチャは似ています。Veeamはデータムーバーを使用して、ソースホストからバックアップリポジトリへデータを転送します。データムーバーはプロキシサーバーとリポジトリサーバー上で実行されます。バックアップリポジトリのバックエンドストレージとしてCephを使用するには、Linux物理サーバーまたは仮想マシン上にRBDまたはCephFSをマウントしてリポジトリサーバーとして使用することができます。

プロキシサーバーとリポジトリサーバーがハイパーバイザクラスタ内の仮想マシンである場合、VMディスク、プロキシサーバー、およびリポジトリサーバー間でネットワークフリーの高速データ転送の利点を得ることができます。 大規模ハイパーバイザクラスタの最適な構成は、各VMWareホストに1つのプロキシサーバーVMと1つのリポジトリサーバーVMを展開することです。 それ以外の場合は、各VMWareホストに1つのバックアッププロキシVMを展開し、1つのオフホストリポジトリホストを展開して、プロダクションVMWareからのワークロードを削減することができます。

Veeam Backup and ReplicationのリポジトリとしてAmbedded Cephアプライアンスを使う方法は3つあります。CephFSとRBDブロックデバイスはオンプレミスのバックアップリポジトリとして使用できます。S3オブジェクトストレージは、リモートロケーションの容量層として使用できます。

VeeamのバックアップリポジトリとしてCeph RBDブロックデバイスとCephFSファイルシステムを設定する方法については、このページの最後にあるホワイトペーパーで詳細を確認できます。

テスト環境

cephクラスター

• 3つのMars 400、3つのモニター、20のOSD、1つのMDS（メタデータサーバー）
• 各CephデーモンはデュアルコアのArm A72マイクロサーバーで実行されます
• オペレーティングシステム：CentOS 7
• Cephソフトウェア：Nautilus 14.2.9 Arm64
• ネットワーク：Mars 400ごとに4つの10Gbネットワーク 

Veeam Backup & Replication 10、バージョン：10.0.1.4854

Veeamバックアップサーバー

• CPU: インテル ジーオン E5-2630 2.3GHz デュアル
• DRAM: 64GB
• ネットワーク: 2x 10Gb sfp+ ボンディング
• ディスク: システム用に1TB、ボリューム用に256GB SATA3 SSD
• Windows Server 2019

 Veeam プロキシサーバー

• Veeam バックアップサーバーと共設

 リポジトリサーバー

• 仮想マシン

◇ CPU: 4コア 2.3GHz

◇  DRAM：8GB

◇  ネットワーク：ブリッジ

◇  ディスク：50GBの仮想ディスク

◇  OS：CentOS 7.8.2003

• ベアメタルサーバー

◇  CPU：Intel Xeon X5650 2.67GHz DUAL

◇  DRAM：48GB

◇  ネットワーク：2ポート 10Gb sfp+ ボンディング

◇  ディスク：システム用1TB

◇  OS：CentOS 7.6.1810

ハイパーバイザーホスト

◇  CPU: インテル Xeon E5-2630 2.3GHz デュアル

◇  DRAM: 64GB

◇  ネットワーク：2ポート 10Gb sfp+ ボンディング

◇  ディスク：システム用の1TB

◇  Windows Server 2019

VMWareホスト

◇  CPU: インテル Xeon E5-2630 2.3GHz デュアル

◇  DRAM: 64GB

◇  ネットワーク：2ポート 10Gb sfp+ ボンディング

◇  ディスク：システム用の1TB

◇  ESXi 6.5

ネットワーク：10GbEスイッチ

さまざまなセットアップでのベンチマーク

さまざまなバックアップリポジトリのバックアップパフォーマンスをベンチマークするために、異なるバックアップリポジトリと3つのバックアップソースでテストをセットアップしました。

テストに使用するバックアップソースは、サーバー上のSATA SSDベースのボリューム、Hyper-VのWindows VM、およびCentOS 7 VMとVMWareのWindows VMです。

(1)SSDドライブ上のボリュームのバックアップ

表1. SATA SSDを使用したサーバーからのボリュームのバックアップ

表2.

注意：平均データ書き込みレートは、転送されたデータを時間で割ったものです。これらのレートは、これらのバックアップジョブにおけるCephクラスタのワークロードを表しています。

(2)HDD上のHyper-V上のWindows 10 VMのバックアップ

このベンチマークでは、SATAハードドライブに保存されているHyper-Vインスタンスをバックアップします。 これらのジョブの処理速度はHDDの帯域幅の上限に達しています。 私たちはまた、ボトルネックがソースにあることも見つけることができます。なぜなら、ジョブのほとんどの時間で彼らの負荷が忙しいからです。 Cephクラスターは、Veeamバックアップジョブからのターゲットのワークロードが軽いです。 Cephクラスターは作業時間の6%から1%しか忙しくありません。

前回のベンチマークと比較して、VMバックアップの処理速度はSSDバックアップよりもはるかに低いです。これは主に、VMデータがハードドライブに保存されているためです。

テーブル3。

テーブル4. SATA3 HDD上の仮想マシンイメージのバックアップ

注意：平均データ書き込みレートは、転送されたデータを時間で割ったものです。これらのレートは、これらのバックアップジョブにおけるCephクラスタのワークロードを表しています。

(3)HDD上のESXiで仮想マシンのバックアップ

このテストは、VMWare ESXi 6.5ホストのHDD上で実行されているCentOS 7およびWindows 10仮想マシンを、4+2のエラーコード保護を備えたCeph RBDでバックアップリポジトリにバックアップします。

テーブル5.

表6.

注意：平均データ書き込みレートは、転送されたデータを時間で割ったものです。これらのレートは、これらのバックアップジョブにおけるCephクラスタのワークロードを表しています。

結論

テスト結果によると、Ceph RBDとCephFSは類似したパフォーマンスを持っています。 これは、RBDとCephFSのパフォーマンスのベンチマークに関する私たちの経験に合致しています。 CephFSとRBDの特徴を比較すると、それぞれに利点と欠点があります。 複数のリポジトリサーバーを展開する必要がある場合は、バックアップリポジトリサーバーごとにRBDイメージを作成する必要があります。Ceph RBDは1つのホストにしかマウントできません。 CephFSと比較して、RBDを使用するとメタデータサーバーが不要なため、よりシンプルです。 作成時にRBDの容量サイズを割り当てる必要があるため、スペースが不足した場合は容量をリサイズする必要があります。

CephFSをリポジトリとして使用する場合、Cephクラスタに少なくとも1つのメタデータサーバ（MDS）を展開する必要があります。高可用性のために、スタンバイメタデータサーバも必要です。Ceph RBDと比較して、ファイルシステムにクォータを設定する必要はありません。そのため、CephFSを無制限のストレージプールとして扱うことができます。

このユースケースのデモンストレーションでは、バックアップジョブごとに1つのVMのみをバックアップします。上記のテストレポートによれば、平均データ書き込み速度は処理速度とデータの重複排除および圧縮効率に関連しています。より速いソースディスクは、バックアップジョブの所要時間を短縮し、より速い処理速度をもたらします。ユーザーのインフラストラクチャに応じて、複数の同時ジョブを展開して異なるオブジェクトを同時にバックアップすることができます。Cephストレージは、複数の同時ジョブをサポートするのに非常に優れています。

3つのAmbedded Mars 400によって駆動される20x HDD OSD Cephクラスターは、4+2の消去符号プールに対して最大700MB/sの集約書き込みスループットを提供することができます。複数の現在のバックアップジョブを展開することで、全体のバックアップ時間を短縮する利点が得られます。Cephクラスターの最大パフォーマンスは、クラスター内のディスクドライブの総数にほぼ比例します。

このユースケースでは、バックアップリポジトリとしてS3オブジェクトストレージを使用してテストは行いませんでした。S3オブジェクトストレージは、Veeam Scale-Outバックアップリポジトリの容量ティアとして、およびNASバックアップのターゲットアーカイブリポジトリとして使用することができます。Ambedded UVSマネージャー、ceph管理Web GUIを使用して、簡単にRADOSゲートウェイをセットアップし、オブジェクトストレージユーザーを作成することができます。