Linux（> 32TB）の大量のディスクスペースにはどのファイルシステムを使用する必要がありますか？

Question

Linuxで大きなファイルシステムを作成しようとしていますが、一般的なファイルシステムの多くで問題が発生しています。

• JFSには、32TBを超える拡張を許可しないバグがあります。
• XFSにはfsckにバグがあり、大量のデータ（〜20TB）があるディスクでfsckを実行すると、マシンが使用可能なすべてのメモリを使用してクラッシュします。
• E2fsprogsの問題により、EXT4は16TBに制限されています。
• BTRFSは素晴らしいでしょうが、現在、私が必要とするfsckはありません。

他のアイデアはありますか？

Answer 1

LinuxのユーザーランドFuseベースのシステムであるため、他のシステムほど高速ではないかもしれませんが、 [〜＃〜] zfs [〜＃〜] は法案に合うかもしれません...

その名前はもともと「ZettabyteFileSystem」の略でした。元の名前セレクターはたまたまその名前を気に入っており、ZFSファイルシステムには2つを格納する機能があります。⁵⁸ 各ZBが2であるゼタバイト⁷⁰ バイト。

ZFSは128ビットのファイルシステムであるため、1.84×10をアドレス指定できます。¹⁹ NTFSなどの64ビットシステムの2倍のデータ。 ZFSの制限は、決して遭遇しないほど大きくなるように設計されています。 ZFSの理論上の制限は次のとおりです。

• 2⁴⁸ —個々のディレクトリのエントリ数
• 16エクサバイト（16×10¹⁸ バイト）—単一ファイルの最大サイズ
• 16エクサバイト—任意の属性の最大サイズ
• 2⁵⁶ ゼタバイト（2⁷⁸ バイト）—任意のzpoolの最大サイズ
• 2⁵⁶ —ファイルの属性の数（実際には2に制限されています⁴⁸ ZFSファイルシステム内のファイル数について）
• 2⁶⁴ —任意のzpool内のデバイスの数
• 2⁶⁴ —システム内のzpoolの数
• 2⁶⁴ —zpool内のファイルシステムの数

地殻には、ZFSの制限を超えるのに十分な大きさのファイルストレージアレイを作成するのに十分な原子がないという人もいます。

Answer 2

ZFSは可能な解決策ですが、最近では、最初に除外したファイルシステムを使用することもできます。

• ext4：ペタバイトのfilesystemdは、最近のe2fsprogおよびカーネルバージョンでは問題にならないはずです。
• btrfs：動作しています btfsck そして大きなサイズにスケーリングすることもできます。