コグノスケ

未来から過去へ表示(*) link

過去から未来へ表示

もっと前

2011年12月7日 >>> 2011年11月24日

もっと後

2011年12月4日

permalink

編集する

Linuxのファイルシステム再考

目次: Linux

せっかくファイルサーバのRAIDを組み直すのだから、使用するファイルシステムも再考することにしました。

こんな話、前にも書きましたね（2009年2月1日の日記参照）。Linuxのファイルシステムは一長一短で選ぶのが難しいのです。

ext2/ext3: Linuxのデフォルトだったファイルシステム。枯れていて安定で速度も出る。最大の欠点はfsckが遅すぎること。待てど暮らせど一向に終わらないのです。
ext4: Linuxのデフォルトとなる（もうなってるかな）ジャーナルファイルシステム。一応ext3ベースだけど中身がかなり変わっている？安定で速度も出るけど、欠点はやはりfsckが遅い。ext3（数時間）から劇的改善されたext4（数十分）とのことですが、遅い、遅すぎるわ。
ReiserFS: Hans Reiserさん作のLinux初のジャーナルファイルシステム。Hansさん逮捕につき、NamesysとSuSEのナイスガイ達がメンテしていたものの、唯一の味方SuSE Linuxに標準ファイルシステムから外され、Linux 2.6.33でロック周りをめちゃくちゃイジられてバグバグになり、もはや死亡寸前？
XFS: SGIのジャーナルファイルシステム。SGI IRIXからの移植。シーケンシャルリード、ライトが速い、起動時のチェックもやたら早い。しかしファイル作成は遅い。巨大ファイルを読みながらディレクトリ削除なんて、ハエが止まるレベルの遅さ。
JFS: IBMのジャーナルファイルシステム。IBM AIXからの移植＆バージョンアップ。AIXのJFSと区別するためJFS2とも呼ばれる。ネット上のベンチマークを見る限り、XFSに似ている、つまりファイル作成が遅いみたい。微妙だ。
ZFS: Sunのジャーナルファイルシステム。Sunの自信作だけあって、便利で速いらしい。しかしライセンス非互換＆特許問題でLinuxに取り込めない。Fuse経由で使うのはイマイチだし、ネット上のベンチマークを見る限り、やはりXFSレベルのファイル作成スピードらしい。微妙だ。
NTFS: Microsoftのジャーナルファイルシステム。仕様は公開されていないはずなのに、カーネルハッカー達により解析され、今やLinuxからread/writeが可能。スゴい。とはいえLinuxで日常的に使うファイルシステムに適しているか？というと疑問符が付く。
BtrFS: Oracleのジャーナルファイルシステム。次期Linux標準を目指しスクラッチから作成された。現在も絶賛開発中なので、これからもしばらくUnstable状態が続きそう。大事なデータを置く場所には適さないだろう。

ここしばらくXFSを使ってきたけれど、ファイル削除が遅くてもう我慢ならない。じゃあ代替案は？と考えても、ご臨終寸前のReiserFSも、XFSと性能が似たり寄ったりのJFSも、どちらも微妙極まりないんだよなあ。

ダメ元でJFSにしてみるか、無難にext4にするしかなさそうですね…。

編集者:すずき(2023/04/29 21:34)

コメント一覧

hdkさん(2011/12/04 23:11)
ReiserFS ってご臨終寸前なの? 性能いいし結構気に入ってるんだけどなぁ。Debian のカーネル 2.6.32 だから大丈夫とか? うーん。

といいつつ、自宅サーバー PC では NILFS2 を積極的に使ってますw
すずきさん(2011/12/05 00:33)
＞hdk さん
実際にパッチを見たわけではないし、見てもたぶんわからないので「ご臨終」は言い過ぎかも。
ま、Reiser4 も Linux に入る見込みなさそうですし、明るい未来はないですね…。

ReiserFSは会社のPC（2.6.33以降のカーネル）で容赦なく使っています。XFSだとコンパイルが遅くてやってられないのです。

NILFS2 はおもしろそうだけど、容量食いそうだね…。

この記事にコメントする

2011年12月3日

permalink

編集する

HDDがやばい

先週くらいからファイルサーバに書き込むとプチフリするようになりました。サーバを見に行くとRAID 5のrebuildで頑張っていました。あれ？ディスク入れ替えてないのになんでrebuildが走ってるの？？

ひとまずdmesgを見るとHDDのリードエラーが記録されていました。ついでにSMARTもチェックすると、リードエラーだかシークエラーだかが記録されています。どうも故障寸前っぽいです。やばい。

ファイルサーバには、sdb, sdc, sdd, sde, sdfの5台HDDが繋がっていて、そのうちsdbが死にかけているようです。

俺の対応がやばい

本来であればやばくなったsdbを引っこ抜いて、新しいディスクに入れ替えればOKなのですが、間違ってsd"f" を引っこ抜いて再起動してしまいました。

5台縦に並んでいたのを見て、 sdbが一番「下」で、sdfが一番「上」だとは思わなかったのよね。マズったね、どうするね、これ…。

何がやばい？

何を言ってるかわからねーｔ（略）なので、実際どうやばいのか図示します。


[本来の対処]
1. やばいディスクを取って、元気なディスク4台の縮退モードで動かす
   sdb, sdc, sdd, sde, sdf→ [sdb], sdc, sdd, sde, sdf
   ↑やばいディスク
2. 元気なディスクを足す（ただし足しただけではスペア状態なので、
   読み書きには使えない）
   [sdb'], sdc, sdd, sde, sdf
   ↑元気なディスクと入れ替え（スペア状態）
3. rebuildしてRAID復活
   sdb', sdc, sdd, sde, sdf
   ↑rebuildによりRAIDの仲間入り

以上が本来の対処なのですが、間違って下記のようにしてしまいました。


[俺の対処]
1. 元気なディスクを取って、やばい＋元気なディスク4台の
   縮退モードで動かしてしまった（！）
   sdb, sdc, sdd, sde, sdf→sdb, sdc, sdd, sde, [sdf]
   ↑やばいディスク
   （... 再起動 ...）
   sdb, sdc, sdd, sde, [sdf]
   ~~~~~~~~~~~~~~~~~~~
   ↑再起動によりRAIDが書き換わり、sdfの内容と食い違うため、
     sdfは元のRAIDには戻せない！

ここから5台構成に戻すには、何食わぬ顔でsdfを戻しrebuildする方法がありますが、壊れかけのsdbを酷使するため危険です…。もしrebuild中にsdbが壊れるとsdb, sdfの2台が故障したことになり、RAID 5のデータが消滅します。


2-1. 何食わぬ顔でsdfを戻す（sdfはスペアになる）
     sdb, sdc, sdd, sde, [sdf]
                         ↑スペア状態
3-1. rebuildしてRAID復活？
     sdb, sdc, sdd, sde, sdf
     ↑rebuildにより負荷かかって故障→RAIDデータ消滅の可能性大

この方法はリスクがでかすぎるだろってことで、新たにHDDを買ってきてちまちまコピーしています。データが1.5TBもあって面倒くさい…。まあ、全部俺のせいだけどな！ちくしょー…orz

編集者:すずき(2011/12/04 20:26)

コメント一覧

コメントはありません。

この記事にコメントする

もっと前

2011年12月7日 >>> 2011年11月24日

もっと後

管理用メニュー

記事を新規作成

RSSを更新

<	2011					>
<<	<	12			>	>>
日	月	火	水	木	金	土
-	-	-	-	1	2	3
4	5	6	7	8	9	10
11	12	13	14	15	16	17
18	19	20	21	22	23	24
25	26	27	28	29	30	31

本日の日記へ

最近のコメント5件

24年10月1日
hdkさん (10/03 19:05)
「GNOMEをお使いでしたら今はWayla...」
24年10月1日
すずきさん (10/03 10:12)
「私は逆にVNCサーバーに繋ぐ使い方をした...」
24年10月1日
hdkさん (10/03 08:30)
「おー、面白いですね。xrdpはすでに立ち...」
14年6月13日
2048player...さん (09/26 01:04)
「最後に、この式を出すのに紙4枚(A4)も...」
14年6月13日
2048playerさん (09/26 01:00)
「今のところ最も簡略化した式です。\n--...」

もっとみる

最近の記事20件

24年10月1日
すずき (10/03 10:16)
「[Ubuntuのxrdpに接続できない病] 目次: LinuxWindowsからUbuntu 22.04 LTSのxrdpに接...」
24年9月28日
すずき (10/03 01:07)
「[TAS動画をニコニコ動画にアップロードできない] クラッキングでぶっ壊されてしまったニコニコ動画が復活し、シン・ニコニコ動画...」
23年4月10日
すずき (10/03 00:38)
「[Linux - まとめリンク] 目次: Linux関係の深いまとめリンク。目次: RISC-V目次: ROCK64/ROCK...」
24年9月14日
すずき (09/22 11:23)
「[OpenSBIを調べる - scratch領域の詳細] 目次: Linux今回はOpenSBIのコード内に頻出するscrat...」
21年8月11日
すずき (09/22 00:15)
「[Kindle - まとめリンク] 目次: Kindle初代Kindle Fire HDの話。Kindle Fire HDのカ...」
24年8月11日
すずき (09/22 00:14)
「[Amazonマイリストへの問い合わせの返事がきた] 目次: Kindle先日（2024年8月4日の日記参照）Amazonへ問...」
24年5月19日
すずき (09/21 23:23)
「[Yocto - まとめリンク] 目次: YoctoHello YoctoYoctoのセットアップスクリプトとビルドディレクト...」
24年9月17日
すずき (09/21 23:22)
「[Yoctoの並列Fetchでエラーが起きるとき] 目次: YoctoYoctoは特に何も指定せずにビルドすると全スレッドを使...」
23年4月24日
すずき (09/19 22:25)
「[Arty A7のFPGAを書き換える方法] 目次: RISC-VいつもArty A7-100を書き換えるときSPI Flas...」
24年9月13日
すずき (09/17 19:26)
「[OpenSBIを調べる - OpenSBIとRISC-V ISA extensions] 目次: Linux今回はOpenS...」
24年8月31日
すずき (09/01 15:01)
「[Microsoftマウスが壊れた] 3年前くらいに購入した（2021年3月6日の日記参照）Microsoft Basic O...」
23年5月15日
すずき (09/01 15:00)
「[車 - まとめリンク] 目次: 車三菱FTOの話。群馬県へのドライブ将来車を買い替えるとしたら？FTOのオイル交換とオイル漏...」
24年8月25日
すずき (09/01 14:59)
「[レガシィの7回目の車検完了] 目次: 車ディーラーまで車検の車を取りに行きました。外は非常に暑くて辛いです…&...」
21年3月6日
すずき (09/01 14:14)
「[気に入るマウスはどれ？] 手に合うワイヤレスマウスを探し続け、高級製品、小さい製品、お手ごろ製品と買いまくり、一時は家に5個...」
24年8月27日
すずき (08/28 23:42)
「[Milk-V Jupiterが届いた] 目次: RISC-VMilk-V Jupiterが届きました。お値段が非常に安かった...」
21年6月18日
すずき (08/28 23:29)
「[RISC-V - まとめリンク] 目次: RISC-V関係の深いまとめリンク。目次: LinuxSiFive社ボードの話、C...」
22年12月22日
すずき (08/28 22:05)
「[x86とARMとRISC-VでCoreMark対決] 目次: RISC-VCoreMarkを以前（2019年7月5日の日記参...」
22年5月26日
すずき (08/27 12:39)
「[glibcのスレッドとスタック] 目次: C言語とlibc誰も興味ないglibcの話シリーズ、スレッドのスタックはどうやって...」
22年8月29日
すずき (08/21 16:22)
「[マンガ紹介] 目次: マンガ紹介久しぶりにお気に入りのマンガ紹介シリーズ。短めの完結作品を2つ。赤髪の女商人（全3巻、202...」
22年7月8日
すずき (08/21 14:21)
「[マンガ紹介 - まとめリンク] 目次: マンガ紹介一覧が欲しくなったので作りました。5作品乙女ゲームの破滅フラグしかない悪役...」