Wesloo
すべてのトピックトピック

データの保存と記憶装置

ブロック オブジェクト ファイル ストレージの違い

要点

ブロック、オブジェクト、ファイルの3種類は、データを保存しネットワーク経由で利用する方式です。ブロックは低遅延の読み書き、ファイルは階層的な共有、オブジェクトは大規模な非構造化データに向きます。選択はワークロードのアクセスパターンと規模で決まります。

ポイント

  • ブロックストレージは固定サイズのブロックにデータを分け、データベースや仮想マシンで低遅延の読み書きに使う。
  • ファイルストレージはファイルとディレクトリの階層で共有ファイルシステムや文書管理に向く。
  • オブジェクトストレージはデータ、メタデータ、一意の識別子をまとめたオブジェクトとして保存し、大量の非構造化データに向く。
  • 3方式とも複製やチェックサムで永続性と破損検出を支える。
  • アクセス方法はブロックが直接、ファイルがファイルシステム、オブジェクトがAPI中心で異なる。
ブロック オブジェクト ファイル ストレージという呼び方で、データをクラウドやネットワーク経由で保管し、利用者やアプリケーションが離れた場所から扱える3つの方式を指します。保存単位とアクセス方法が異なるため、同じデータでも適した方式が変わります。

ブロック オブジェクト ファイル ストレージの基本的な違い

ブロックストレージはデータを固定サイズのブロックに分け、各ブロックを個別に読み書きします。ファイルストレージはファイルとディレクトリの階層でデータを整理します。オブジェクトストレージはデータ、メタデータ、一意の識別子をまとめたオブジェクトとして保存します。

ブロック方式自体にはファイルやフォルダの構造がなく、解釈はファイルシステムやアプリケーション側に委ねられます。ファイル方式は共有ファイルシステムとして使いやすく、オブジェクト方式はフラットな名前空間で大量の非構造化データを扱います。

ブロックストレージの特徴

ブロックストレージはデータをアドレス可能なブロックに分け、独立して読み書きできます。データベース、仮想マシン、トランザクション処理のように頻繁な低遅延の読み書きが必要なワークロードに向きます。

ブロックは異なるファイルシステムでフォーマットしたり、データベースのようにアプリケーションが直接扱ったりできます。容量の拡張に対応するサービスもありますが、プラットフォームごとの上限があります。Amazon EBSのようなサービスは、クラウド上の仮想マシンで動くデータベースのファイルやトランザクションログを保持する用途で使われます。

  • 低遅延の読み書きに向く
  • ブロック単位で更新できる
  • ファイルシステムの選択に柔軟性がある

ファイルストレージの特徴

ファイルストレージはファイルとディレクトリの階層でデータを整理し、サーバーやアプリケーションに共有ファイルシステムとしてアクセスを提供します。文書管理や共同作業のように、慣れたフォルダ構造が役立つ場面に向きます。

ファイル方式は小規模な共有作業に適し、階層的な整理が理解しやすい利点があります。共有ファイル用途では、ブロックほど低遅延を重視しない場合に選ばれます。

  • 階層的な整理がしやすい
  • 共有ファイルシステムとして使いやすい

オブジェクトストレージの特徴

オブジェクトストレージでは、データ・メタデータ・一意の識別子をひとまとまりのオブジェクトとして扱います。階層ではなくフラットな論理名前空間で管理します。

画像、動画、文書、バックアップ、アプリケーションログ、データレイク、静的資産のような大量の非構造化データに向きます。Amazon S3のようなサービスは、動画配信プラットフォームで動画やサムネイルを保管する例で使われます。

オブジェクトの識別にはファイル名やパスではなく一意の番号を使い、操作にはAPIを用います。既存のアプリケーションから扱うには、コードの追加やAPI呼び出し、命名規則の把握が求められます。

オブジェクトストレージは容量の拡張性を重視し、大量の非構造化データを低コストで保存できます。一方で、トランザクション処理では遅延が高めで、スループットもブロックやファイルより低い傾向があります。作成済みのオブジェクトをその場で部分変更することはできず、更新は新しいバージョンの作成で扱います。現代のサービスではバージョニング機能で更新を管理できます。

オブジェクトストレージでは従来のファイルロックは限定的で、現代のサービスはオブジェクト単位の保持やバージョニングで更新を扱います。

オブジェクトの保存先は、ローカルのハードディスクからパブリッククラウドのサーバーまで選べます。メタデータでは、固定キーに値を設定したり、独自のキーと値を組み合わせたりできます。

3方式に共通する点

3方式はデータをネットワーク経由で保存・共有する点で共通します。データ永続性を支えるため、複製やチェックサム、エラー検出コードを使います。メタデータには名前、サイズ、タイムスタンプ、権限などの属性が含まれ、データの整理や検索に役立ちます。

データを複数の場所に保持するため、1か所に障害が起きても別の場所から取り出せます。チェックサムとエラー検出コードは保存中の破損を検出します。

選び方

方式の選択はワークロードの要件次第で、どれか一つが他を完全に置き換えるわけではありません。ブロックは低遅延が求められるデータベースや仮想マシン向き、ファイルは共同作業や文書管理の小規模運用向き、オブジェクトは大量の非構造化データや生成AI・AI/ML、メディア配信向きです。

画像や動画のようにいつでも取り出したいデータの保存ではオブジェクトストレージが選ばれやすく、ブロックやファイルより使用容量を抑えられる場合があります。

観点ブロックファイルオブジェクト
保存単位固定サイズブロックファイルとディレクトリオブジェクト
主な用途DB、VM、トランザクション共有ファイル、文書画像、動画、ログ、バックアップ
アクセス直接読み書きファイルシステムAPI
名前空間ブロックアドレス階層フラット
遅延傾向低用途による高め

保存方式の比較では、NASとSANの違いやRAIDレベルの選び方も参考になります。クラウドでのオブジェクトとブロックの比較はオブジェクトストレージとブロックストレージの違いを参照してください。

誤解しやすい点

オブジェクトストレージはファイルをオブジェクトとして保存できますが、既存アプリケーションから使うにはAPIと命名規則の理解が必要です。ファイルストレージのようなフォルダ階層はありません。

ブロックストレージは高性能ですが、すべての用途に最適とは限りません。大量の非構造化データや共同作業には他の方式が適します。

容量拡張に優れるオブジェクトストレージでも、作成後のオブジェクトをその場で部分変更できず、更新は新しいバージョンの作成で扱います。

よくある質問

オブジェクトストレージはファイルストレージの代わりになりますか?

大量の非構造化データには向きますが、フォルダ階層や従来のファイルロックはありません。既存アプリケーションからはAPIと命名規則の理解が必要です。

ブロックストレージが向くワークロードはどれですか?

データベース、仮想マシン、トランザクション処理のように、頻繁な低遅延の読み書きが必要な場合に向きます。ブロックは個別に読み書きでき、ファイルシステムの選択にも柔軟です。

3方式に共通する永続性の仕組みは何ですか?

複製、チェックサム、エラー検出コードを使います。複製により1か所の障害時も別の場所からアクセスできます。

オブジェクトストレージの更新方法はどう違いますか?

作成後のオブジェクトをその場で部分変更できません。更新は新しいバージョンの作成で扱い、現代のサービスではバージョニングで管理できます。

関連ページ

  • データ重複排除とは?仕組みと効果

    データ重複排除は、同じ内容のデータが複数ある場合に余分なコピーを除き、1つの実体への参照に置き換える技術です。ストレージ使用量を減らし、バックアップやファイルサーバー、VDIなどで効果が出やすいです。圧縮とは異なり、大きな同一部分を共有コピーで置き換えます。

  • クラウドストレージ ストレージクラスとは?

    クラウドストレージ ストレージクラスは、オブジェクトに付与されるメタデータで、保存コストやアクセス特性、冗長性の扱いに影響する。Google Cloud Storageでは、既にレガシークラスを使っていない限りStandard storageを基準にし、I/O負荷の高いAI、機械学習、データ分析にはRapid storageを選ぶ。移行はオブジェクトの書き換えやライフサイクル管理で行え、Autoclassで自動化できる。

  • NVMe SATA 違い:SSD選びの基準

    NVMeはSSD向けに設計された新しいプロトコルで、SATAより高速で低遅延です。SATAはHDDとSSDの両方で使える互換性の高い旧来の接続方式です。用途と予算に応じて、どちらが適切かが変わります。

  • ストレージメディアの寿命:HDDとSSDの違い

    家庭で普通に使うSSDは、5年から10年ほど持つことが多い。HDDは可動部品があるため衝撃や熱の影響を受けやすい。どちらも突然故障する可能性があるため、重要なファイルは別媒体に保存する。

  • NASとSANの違い:保存方式と選び方

    NASは標準ネットワーク上でファイルを共有する保存装置で、SANは専用高速ネットワークでブロック単位の保存を提供する。NASは導入と管理が容易で、SANは高性能と拡張性を重視する環境に向く。両者は目的が似ていても、接続方式とサーバーから見た見え方が異なる。

  • RAIDレベルの選び方と比較

    RAIDは複数のディスクを束ねて性能や耐障害性を高める技術である。レベルごとにストライピング、ミラーリング、パリティの組み合わせが異なり、容量効率と障害耐性も変わる。用途と予算に合わせて選び、RAIDだけに頼らず別途バックアップを用意する。

このページの作成方法

執筆の前に、下記の情報源でテーマを調査しました。その後、自動の品質チェックを通過しています。

このページの誤りを報告する