ファイルシステム総合スレ その14

1 名前： 忍法帖【Lv=29,xxxPT】 mailto:sage [2012/01/15(日) 16:38:33.83 ID:OMF5PJgt] ●前スレ ファイルシステム総合スレ その13 engawa.2ch.net/test/read.cgi/linux/1311812102/ ●関連スレ ジャーナリングファイルシステム ttp://hibari.2ch.net/test/read.cgi/unix/979408065/ OpenSolaris/Illumos (OpenIndiana, etc.) 5 hibari.2ch.net/test/read.cgi/unix/1285876800/ 過去スレ、関連リンクは >>2-10 あたりで。 668 名前：login:Penguin mailto:sage [2012/05/20(日) 23:25:07.01 ID:ELQ5/TDV] >>657 www.atmarkit.co.jp/flinux/rensai/watch2010/watch03b.html ＞Martin K. Petersen（OracleのLinuxエンジニアで、IDEMAの内部事情に詳しい）は、 ＞「もともと512bytesでも保証はなかった。 ＞ベンダは努力はしていたが、実際には、例えば書き込みセクタを調整することでホットスポットを分散させたりしてたから、 ＞そういう処理が原因でアトミックに処理できなかった。 ＞そういう訳で、非揮発性キャッシュ付きのRAIDをみんな使っていたのさ」と説明。 ＞これについては、「アトミック書き込み保証問題は、サーバ業界が4KiB論理セクタ長に向かっている理由の1つである」とコメントが付きました。 669 名前：login:Penguin mailto:sage [2012/05/21(月) 08:26:04.95 ID:0vaQ/+dW] 家のnilfs は、全部ext4に戻しました。長期間使った時のパフォーマンスの著しい低下が我慢できなかった。 670 名前：login:Penguin mailto:sage [2012/05/21(月) 08:52:31.83 ID:ibgDvpSH] ところで、linuxの次期FSとして一番有力なのはどれなの？ 1)btrfs 2)ZFS 3)ReiserFSもしくはそのフォーク？ 4)EXT4もしくはその拡張 5)その他 671 名前：login:Penguin mailto:sage [2012/05/21(月) 09:31:16.61 ID:xHaR64QJ] そもそも1セクタ分がアトミックに書き込めることにfs的にどんだけの意義があんのかな。 複数セクタの書き込み単位でアトミックになっていないと整合性が判断できないんであればあまり意味ない気もするし。 672 名前：login:Penguin mailto:sage [2012/05/21(月) 09:54:20.81 ID:w3v01jDq] 1セクタアトミックに書けるなら 任意の複数セクタをアトミックに書けるようにソフトウェアだけで実装できる 673 名前：login:Penguin mailto:sage [2012/05/21(月) 09:57:25.79 ID:PP15/LMj] >>670 1)btrfs→オラクルからはエンジニアが既に去った。 2)ZFS→ケチケチサポートに突入。 3)ReiserFSもしくはそのフォーク？→そんな気配は無い？  4)EXT4もしくはその拡張→結局これだろう。誰かが知恵絞って、多くの人間にたたき上げられてext5とか出るのが想像つきすぎる。 5)その他→ZFSの人が何か作るんじゃないかと個人的には思ってる。 674 名前：login:Penguin mailto:sage [2012/05/21(月) 09:58:33.96 ID:PP15/LMj] > 1)btrfs→オラクルからはエンジニアが既に去った。  去ったのはZFSの人か。スマソ。 675 名前：login:Penguin mailto:sage [2012/05/21(月) 10:04:58.51 ID:2/Hjj9MT] >>670 4 676 名前：login:Penguin [2012/05/21(月) 10:11:32.22 ID:VzIf2jh+] やっぱり4だよね。 677 名前：login:Penguin mailto:sage [2012/05/21(月) 10:49:59.19 ID:Ms9i3XwP] ４だと思う。 で、アマノジャクな人が２か５のZFSもどきを使う。 （だって面白いからな。） 678 名前：login:Penguin mailto:sage [2012/05/21(月) 12:15:28.09 ID:bVL44HWG] DragonflyBSDのHammer移植の方が現実的かもなぁ 679 名前：login:Penguin mailto:sage [2012/05/21(月) 14:23:23.29 ID:ibgDvpSH] やっぱりext4の系譜かー。そうだよね。 680 名前：login:Penguin mailto:sage [2012/05/21(月) 14:58:35.07 ID:ocjJ24me] >>679 機能的にZFS以降のfsとは差がつきすぎているし、 代替は欲しいんだけどねい… 681 名前：login:Penguin [2012/05/22(火) 07:50:09.39 ID:7a68CDWm] japan.cnet.com/news/business/35017280/ 　来日中の米Microsoftの最高経営責任者（CEO）Steve Ballmer氏が5月21日、東京・渋谷区のホテルで開催されたパートナー向けのイベント「Windows Partner Executive Summit」で講演した。 　Ballmer氏が米国外を公式に訪問するのは、2012年に入ってから初めてのことだ。次期OS「Windows 8」の開発が最終段階に入った今、最初の訪問国・日本のパートナーに「今年はMicrosoftの歴史の中でも、 もっともワクワクする1年」とメッセージを発し、Windows 8の登場によって大きな変化が訪れると強調した。 Windowsを再創造する マイクロソフトCEOのスティーブ・バルマー氏。明日から韓国、中国、インドを歴訪する。 マイクロソフトCEOのスティーブ・バルマー氏。明日から韓国、中国、インドを歴訪する。 ※クリックで拡大画像を表示 　Windows 8は、今年後半の登場が予定されているMicrosoftの次期OS。従来に比べて機能を追加しただけでなく、新たなUIを投入する点が特徴だ。より高速で滑らかに動作し、 スマートでモダンなデザインを実現させることを目標としている。既存のWindows 7の機能もさらに強化し、「新たなレベルに引き上げ」（Ballmer氏）たものの提供を目指して開発が行われている。 　Ballmer氏が繰り返したのは「再創造（Re-Imagine）」だ。Microsoftは、Windows 8で「再創造の1年であり、チャンスの1年」（同）にしたい考え。 この1年で、3億5000万台のWindows搭載PCが出荷されているとの調査を引きながら、「競合他社はPCとタブレットをあわせて6000万?7000万台の出荷」（同）と、その差を強調。 Windowsという強力なプラットフォームが「再創造」されることで、パートナー企業にとっても新たなチャンスが生まれるとした。 んなもんより時代遅れのNTFSよか新しいファイルシステム作れや！！！！！！！！！１１１１１１ 682 名前：login:Penguin mailto:sage [2012/05/22(火) 09:32:07.35 ID:In5wan4s] 初歩的な質問ですまないけど一つ教えて。 ext4であるファイルの内容を修正（ファイル全体のサイズは変わらないような変更）をした時、 該当箇所を格納したブロックの内容を変更して、書き戻す位置はHDDに対して元あったLBAと同じ位置を指示するの？ それとも別の空いてる場所に書くの？ さらに修正箇所が複数ブロックに含まれる場合はどうなるのでしょうか？ 683 名前：login:Penguin mailto:sage [2012/05/22(火) 10:29:12.17 ID:xdP67uUV] >>672 んなことない。 それは書き込み順序が保証される場合で、バリア張れなければセクタアトミックでマルチセクタアトミックは実現無理。 684 名前：login:Penguin mailto:sage [2012/05/22(火) 10:53:33.83 ID:1cxhPa0y] >>682 今時のファイルシステムは、ファイルの内容を書き換える場合に、 データブロックをそのまま使って中身だけ書き換えるなんてことはしない。 理由はトランザクション処理におけるクリティカルセクションが長くなるから。 1. 古いデータだけしかない状態 2. 新しいデータを空いているブロックに書き込む 3. 古いデータも新しいデータも共存していて、ただしメタ情報は古いデータを指している状態 4. 新しいデータを指すようににメタ情報を書き換える (メタ情報はすごく小さいのでクリティカルセクションを小さく出来る) 3(または2)の段階でクラッシュしても、古い状態は完全に残っている。 実際にはさらにインテントリストを使って、再起動後に更新をリプレーする工夫がある。 データベースのトランザクション処理を勉強すると良い。 685 名前：682 mailto:sage [2012/05/22(火) 11:07:12.35 ID:lf9QnnI6] 分かりやすい解説、ありがとうございます 686 名前：login:Penguin [2012/05/22(火) 16:06:03.57 ID:YPS563wb] >>684 そうすると、空き容量が書き換えようとするファイルのファイルサイズより小さい場合、 書き換えに失敗するということですね 687 名前：login:Penguin mailto:sage [2012/05/22(火) 16:23:56.66 ID:1cxhPa0y] トランザクション単位は通常ブロックだよ。 ファイルのバージョン管理しているファイルシステムには、 さらにopen/close単位でもトランザクション管理しているのもあるけど。 688 名前：login:Penguin mailto:sage [2012/05/22(火) 17:52:40.29 ID:LU/paeRW] mbrを消したら完全に読めなくなるFSってあるんですか？EROIひと 689 名前：login:Penguin mailto:sage [2012/05/22(火) 18:26:05.86 ID:A1CjT9vU] MBRってどういうものか、ググればわかるような 690 名前：login:Penguin mailto:sage [2012/05/22(火) 18:30:33.55 ID:OmWdc1HW] MBRってFS関係あるんですかね・・・？ 691 名前：login:Penguin mailto:sage [2012/05/22(火) 18:34:53.53 ID:1cxhPa0y] wikipediaくらいは読んでるの? 692 名前：login:Penguin mailto:sage [2012/05/22(火) 20:10:19.29 ID:LU/paeRW] >>690 mbr消してもtestdiskつかったりdumpすれば 先頭のデータみたらどこからどのパーティション始まるかわかるから mbr修復できるけど、それができないFSはあるのかなと・・・ 693 名前：login:Penguin mailto:sage [2012/05/22(火) 21:33:06.53 ID:rvtR6o93] >>668 ＞＞これについては、「アトミック書き込み保証問題は、サーバ業界が4KiB論理セクタ長に向かっている理由の1つである」とコメントが付きました。 この引用だけ読むと、ん？セクタ長が長くなる方がアトミク保証キツそうだがと思ったが、AFTのRMWを問題視してるのかな？ 確かにアラインがあってない状態でブロックライトしたときたまたまそれがトラックまたがりだったりしたら、 電源供給たたれた状況ではRMW完遂キツそうかも。 694 名前：login:Penguin mailto:sage [2012/05/22(火) 21:39:10.48 ID:rvtR6o93] ごめん、FSのブロックとHDDの物理セクタは直接の関係はないからアラインうんぬんはミスリードね 695 名前：login:Penguin mailto:sage [2012/05/22(火) 21:47:16.05 ID:Gee1IVDc] >>690 ディスクだ 696 名前：login:Penguin mailto:sage [2012/05/22(火) 22:28:52.43 ID:UDqTDYqA] >>682 >>684 簡単な検証をしてみたが次のようになった。 1. dd で 1GB のファイル(disk.raw)を作成、mkfs.ext4 でファイルをフォーマット 2. loop オプションでマウント 3. 64KB のファイルを作成。 中身は全部 0xC1 (00とかFFでなければ何でも良かった) 4. 一旦アンマウント。 5. disk.raw を 16進ダンプして C1 が 16個 並ぶ行をカウント → 4096 行 5. fseek と fwrite(C言語) 使って 7000(0x15B8)番地から 12000バイト適当なパターンを書き込み 6. アンマウント 7. disk.raw を 16進ダンプして C1 が 16個 並ぶ行をカウント → 3345 行 (4096-3345)*16(１行16バイトでダンプ)=12016 (12000 バイト + 16の倍数では無いところから開始分) 1GBを32MBにするとブロックサイズは 4KB から 1KB になるけど結果は同じ。 このとき 16進ダンプ自体を比較したが変更されたのは 832 行 (13376 Byte) だけ。 # diff -u pre.txt post.txt | egrep -e '^[+]' | wc -l --> 832 diff の結果を詳しく見ると書き込んだパターンの前のデータはすべて C1 の行で、 どう好意的に解釈しても >>684 の言う動作をしているとはいえない結果だった。 697 名前：login:Penguin mailto:sage [2012/05/22(火) 23:21:43.39 ID:rvtR6o93] ext4のmountオプション 698 名前：番組の途中ですがアフィサイトへの転載は禁止です [2012/05/22(火) 23:40:12.43 ID:tlYG6Oak] 684さんはDBか何かの話をしているのだろう、普通のファイルシステムは セクタ単位に上書きして済ませ面倒な操作は回避する。 電源が落ちると、HDDは一番外側のトラックに緊急書込みしてDRAMの イメージを保存する、SSDもDRAM上に保持していた更新データは急遽 特定のページに書込む、HDDもSSDもDRAM上のデータは電源が落ちても 維持するから書込み応答があれば書込めたと考えていいはず。 ただ、SSDで電源の落ちる速度が速いと飛んでしまうSSDがあって、 それでWindowsの休止が使えないSSDを掴まされた。 699 名前：login:Penguin mailto:sage [2012/05/22(火) 23:45:08.80 ID:R0N4pj0/] 彼の言う「今時のファイルシステム」にext4やntfsは含まれていないのですよ 700 名前：login:Penguin mailto:sage [2012/05/23(水) 00:20:02.34 ID:0eIoicZI] 5の処理はひとつの操作じゃないから、 5の間に解放されたブロックが最利用されてるんじゃないの? 701 名前：696 mailto:sage [2012/05/23(水) 00:47:46.11 ID:9NniJAVU] >>700 すいません、次のとおりです。 1. dd で 1GB のファイル(disk.raw)を作成、mkfs.ext4 でファイルをフォーマット 2. loop オプションでマウント 3. 64KB のファイルを作成。 中身は全部 0xC1 (00とかFFでなければ何でも良かった) 4. 一旦アンマウント。 5. disk.raw を 16進ダンプして C1 が 16個 並ぶ行をカウント → 4096 行 6. マウント 7. fseek と fwrite(C言語) 使って 3. のファイルの 7000(0x15B8)番地から 12000バイト適当なパターンを書き込み 8. アンマウント 9. disk.raw を 16進ダンプして C1 が 16個 並ぶ行をカウント → 3345 行 > 5の間に解放されたブロックが最利用されてるんじゃないの? 再利用されていれば 1KB(1ブロック) 以上 C1 じゃ無いところが発生するはずだが実際は すべて上書きだった。 ここまでだとデフラグされた可能性はあるけど、 ext3/4 のジャーナルがメタ情報しかジャーナリングで保護されないと知っていれば >>684 の言う動作はしていない(していればメタ情報しか保護しない理由がなくなる) と解るはず。 702 名前：login:Penguin mailto:sage [2012/05/23(水) 20:08:33.34 ID:53GntL47] >>684はそこまで的外れなことは言ってないんじゃないの。 手元のext4のファイルシステムで試してみたけど openにO_TRUNCを付けて開く→別のブロックアドレスに新規の内容が書き込まれる。元のブロックアドレスにはファイルの内容は残存。(>>684の言う動作をしてる?) openにO_TRUNCなしで開く→同じブロックアドレスに上書きで書き込まれる。(>>701のやった実験) どっちの場合でもinode番号は保持されている。 当たり前だけど一つの巨大なファイルをO_TRUNCなしで開いて何回もlseekとか使って読み書きする場合は 同じブロックに書き込まないと断片化しまくりんぐなんだよね。 んで>>682の質問は多分O_TRUNCなしの場合の疑問だから多分元あったLBAにそのまま上書きってことでいいと思われ。 まあ、俺もあんましファイルシステムに詳しい訳じゃないから間違ってたら指摘頼む。 703 名前：login:Penguin mailto:sage [2012/05/23(水) 20:14:35.20 ID:Uvt1kmUp] >>684 それ、Copy-On-Write を実装したファイルシステムの典型的な挙動で それでbrtfsやZFSが注目されてるけど、まだまだ一般的じゃないよ 今普通に使われてるファイルシステムは 未だに停電時のデータ保全は保証されてなくて だからデータベースソフトは凝った制御をわざわざしてる 704 名前：login:Penguin mailto:sage [2012/05/23(水) 20:46:06.35 ID:zTpk22Ks] >>703 ZFSやbtrfsやHAMMERはモダンなfsと言われている由縁ですな。 あと、機能的にはボリュームマネージャとfsとの統合もしているのが モダンなfsの特徴。 705 名前：login:Penguin mailto:sage [2012/05/23(水) 21:47:33.19 ID:HiaPoJkG] >>702 truncしたら ＞1. 古いデータだけしかない状態 ここが無いだろ 706 名前：login:Penguin mailto:sage [2012/05/24(木) 09:35:00.94 ID:8W5aSkeX] nilfsもモダン 707 名前：login:Penguin mailto:sage [2012/05/24(木) 09:48:16.92 ID:fjuo8JDB] lfsはモダンすぎた 708 名前：login:Penguin mailto:sage [2012/05/24(木) 14:12:40.50 ID:R1zT/wP2] 仮想環境のマシンをカーネルのアップデートで再起動が発生した際にext4でfsckが走った 開発が予定されているext5でも一定間隔毎にマウントする際はfsckが走る仕様は残るのかな？ 709 名前：login:Penguin mailto:sage [2012/05/24(木) 16:00:44.85 ID:8W5aSkeX] >>708 ジャーナル処理以外もやってる? 710 名前：login:Penguin mailto:sage [2012/05/24(木) 20:35:01.03 ID:k3/BwS7U] ext5ってどんなのが出るとかって話もうあるの？ 711 名前：login:Penguin mailto:sage [2012/05/24(木) 20:52:51.51 ID:iuQ7Cd5b] >>708 デフォルトでmkfsすれば走るようになるけど、mkfsにオプションつけたりtune2fsでオプション変更すれば走らない、というはなしではなくて？ 712 名前：login:Penguin mailto:sage [2012/05/24(木) 21:14:44.01 ID:R1zT/wP2] >>711 仮想環境だったので“tune2fs”で間隔の設定変更してなかったの ww で、密かにウワサされているext5はやはり間隔の設定変更は必要なのかなぁ〜 って、ふと思っただけです (__) (何せ、xfsやbtrfsにはマウント時に定期的にfsckが走る事なんて無いですしね) ちなみに実環境は“tune2fs -i0 -c0”でマウント時にfsck走らない設定にしていますよ 713 名前：login:Penguin mailto:sage [2012/05/24(木) 22:03:00.77 ID:ht+qoeDE] やっぱりreiserfs最強 714 名前：login:Penguin mailto:sage [2012/05/24(木) 22:04:29.38 ID:Y0DkWNpb] >>710 冗談の範囲を超える話はまだ出てないと思うけど、 私のアンテナが低いだけかもしれない 715 名前：login:Penguin mailto:sage [2012/05/25(金) 01:04:56.40 ID:fyfyFUcy] >>713 reiserfsのどのあたりが最強なの？ 716 名前：login:Penguin mailto:sage [2012/05/25(金) 01:08:43.89 ID:Zj6mI5wX] 数年間使ってるけどfsckとは無縁 717 名前：login:Penguin mailto:sage [2012/05/25(金) 01:31:43.18 ID:lsrc3vra] >>715 開発元締めの犯罪歴 718 名前：login:Penguin mailto:sage [2012/05/25(金) 09:56:47.79 ID:msN7LA9T] いまのlinuxのfs開発状況だと、ハンスが出所して開発再開したら、それなりに歓迎されそうだなぁ 719 名前：login:Penguin mailto:sage [2012/05/25(金) 10:15:49.59 ID:bpVgjmYh] 出てくるの１０年以上後だぞ？ 720 名前：login:Penguin mailto:sage [2012/05/25(金) 10:25:38.42 ID:Cmbh75Oe] 10年後ならext5くらい 721 名前：login:Penguin mailto:sage [2012/05/25(金) 10:29:51.31 ID:ub3nzNZQ] ハンスはいまも開発を続けているよ。 紙の上でハンドアセンブル、イメージデバッグ、、、 長期間念入りにチューニング＆デバッグされた高速＆堅牢な夢のfs 出所してからそ実機でテスト 722 名前：login:Penguin mailto:sage [2012/05/25(金) 11:04:00.31 ID:F5a9ntXy] >>721 時間タップリあるだろうし、 他にすることもなさそうだから、 クオリティ恐ろしいかもしれんなｗ 723 名前：login:Penguin mailto:sage [2012/05/25(金) 12:06:17.83 ID:AqUnLL1K] btrfsのstableリリースとハンス出所してreiser4完成はどっちが早いのかもうわからないレベル 724 名前：login:Penguin mailto:sage [2012/05/25(金) 12:32:56.42 ID:bpVgjmYh] 減刑のための法律勉強で忙しかったはず。 725 名前：login:Penguin mailto:sage [2012/05/25(金) 19:26:34.42 ID:FQfoOI8B] 向こうって模範囚なら殺人犯でも3年で出られるんだろ 726 名前：login:Penguin mailto:sage [2012/05/26(土) 01:13:07.17 ID:rgPUb8eJ] >>725 う〜ん、どうなんだろ? 以前と違い、今は模範囚での刑期短縮って 1年で50日程度とかいう話を聞いたおぼえが。 あと、そういや、こんな記事が。 Linux Guru Hans Reiser Demands New Murder Trial www.wired.com/threatlevel/2011/09/reiser-seeks-new-trial/ 727 名前：login:Penguin mailto:sage [2012/05/26(土) 01:14:20.75 ID:rgPUb8eJ] って、fsから話が外れまくったな。Btrfsが標準fsになるFedora 17のリリースが そろそろだけど、これでようやっとBtrfsの開発速度が上がってくれるかな… 728 名前：login:Penguin [2012/05/26(土) 02:30:10.12 ID:I/wUNAvd] なんでバターFSは主力FSになれないの？ 修正されない致命バグが残っているとか？ 729 名前：login:Penguin mailto:sage [2012/05/26(土) 03:21:44.82 ID:SttHiOpI] 3.2.xを使ってるがファイルが壊れることが時々ある。 730 名前：login:Penguin mailto:sage [2012/05/26(土) 05:48:13.77 ID:iTBNDko3] そら、ファイルが壊れちゃうようなfsをメインになんか使いたくないよな 731 名前：login:Penguin mailto:sage [2012/05/26(土) 08:56:56.81 ID:NFmM9fUH] >>727 それは取りやめになったはず 732 名前：login:Penguin mailto:sage [2012/05/26(土) 10:58:03.65 ID:BURK7wai] >>728 ttp://d.hatena.ne.jp/fixme/20101030/1288433811 733 名前：デムパゆんゆんネトウヨ特攻兵＠５月病　 【関電 69.0 %】 mailto:はげ [2012/05/26(土) 11:12:30.66 ID:fGtrXgPT] じゃぁブログでブツブツ言ってないでバグ出し協力すればいいじゃないか 734 名前：login:Penguin mailto:sage [2012/05/26(土) 12:15:49.73 ID:BURK7wai] そのブログの新しい方の記事でまさにそういう展開になっている 735 名前：login:Penguin mailto:sage [2012/05/26(土) 12:54:30.76 ID:VoHyanHK] >>728 地道にバージョンアップしてきてるじゃん。 おまえはまさかすぐにでも実用化になると思ってるの？ 736 名前：login:Penguin mailto:sage [2012/05/26(土) 13:38:33.15 ID:SttHiOpI] >>732 これはそうなんだが時々BUG_ONから適切なエラー処理に変更するパッチが流れているのでちと古い話。 737 名前：login:Penguin mailto:sage [2012/05/26(土) 14:04:15.08 ID:mAVYiROr] アンドリューモートンが2.36頃にはraiser4がマージされるよとか言ってた矢先のタイホだったからな。 しばらくカーネルに毎回パッチあててraiser4を使いつづけてたけど、さすがにマージの見込みが無さそうなので諦めてext4へ乗り換えた。 738 名前：login:Penguin [2012/05/26(土) 16:15:11.36 ID:I/wUNAvd] そんな話を聞くと、ここはReiser4の無いパラレルワールドなんだなって気がしてくる Reiser4がマージされているもう一つのパラレルワールドのこのスレでは、 逆にBtrfs、NILFS、ZFSの話題が消えてたりするんだろうか 739 名前：login:Penguin mailto:sage [2012/05/26(土) 16:27:41.13 ID:MUdvZwhX] 誰か開発を引き継ごうって人はいなかったのかいな。 740 名前：login:Penguin mailto:sage [2012/05/26(土) 17:21:56.83 ID:NFmM9fUH] 会社組織だったんだから、社長がﾀｲｰﾎされたからといって、会社がなくなったわけじゃないはず。 父親が引き継いで開発を続けるとか言ってたが、元々カーネルメンテナーの多くに良く思われてなかった のと（特にプラグイン構造が）、スポンサーが見つからなくてﾎﾟｼｬったのではないかと。 741 名前：login:Penguin mailto:sage [2012/05/26(土) 18:37:05.68 ID:YjIi9L7U] 会社の絶不調なUbuntuデスクトップ機（タワー型）の OSをCentos 6.2（派手なメディア系のソフトは無いけど仕事で使うには 十分なソフト環境）に変え、ファイルシステムはZFSに変えてみた。 ジャンク品の500GのSATA HDDを3本Raidzにして、全部homeにあてて みた。ジャンク品だが経年劣化で壊れたら、それはそれでおもしろいと思っている。 ベンチマークとかファイルのコピー時間とか見てるけど、マザーボードが 読み書き合わせて150MB/secが限界のしょぼいヤツなんで、 まだZFSの恩恵は判らない。 日々のバックアップとか、ランダムアクセスを多用する処理がどれぐらい 良くなるか、来週の業務が楽しみです。 742 名前：login:Penguin mailto:sage [2012/05/26(土) 21:11:33.51 ID:7HdLZpM3] >>741 山中幸盛みたいでかっこういいな 743 名前：login:Penguin mailto:sage [2012/05/27(日) 19:29:51.15 ID:sFUG4pgM] 何をしたいかわからんw 744 名前：login:Penguin mailto:sage [2012/05/27(日) 20:13:08.68 ID:BMpUzC+a] LinuxサーバーにSSDを使うための情報メモ oopsops.hatenablog.com/entry/2012/05/24/164941 745 名前：login:Penguin mailto:sage [2012/05/27(日) 20:20:49.29 ID:T8Ff12Rn] みんなバリア無効にしている？ ext3も今度からバリア有効設定がデフォになるらしいけど。 746 名前：login:Penguin mailto:sage [2012/05/27(日) 23:25:49.50 ID:RpQeUUxd] >>745 当然即無効 有効設定不要 747 名前：login:Penguin mailto:sage [2012/05/27(日) 23:40:59.37 ID:fcmbTsZx] 我感謝君迅速回答 謝謝参考情報 748 名前：login:Penguin mailto:sage [2012/05/28(月) 01:30:27.57 ID:v3fn9Bax] >>747 IDがずれてるぞw 749 名前：login:Penguin mailto:sage [2012/05/28(月) 13:41:54.41 ID:06aQcVRA] >>745 「ext3も今度からバリア有効設定がデフォになるらしい」ってまじか？ ソースきぼん 750 名前：login:Penguin mailto:sage [2012/05/28(月) 13:50:44.83 ID:p/RNWQpE] >>749 Linuxカーネル3.1 からだからもうとっくに有効になってますね。 sourceforge.jp/magazine/11/10/25/0437213 751 名前：741 mailto:sage [2012/05/28(月) 14:43:01.77 ID:4B9wts/1] >>743 会社のデスクトップ機は、Linuxのサーバとソフトの評価のために 仮想イメージが20個ぐらい入っているんだけど、同じような ディスクブロックだったようで、dedupで1.30という数字が 出ています。ディスクの節約ができたのはまず嬉しい。 あと実際に使ってわかったのは１本ずつのHDD30MB/secの読み 書きが出来る場合、３本のディスクによる読み書きの速度は Raid0の場合は90MB/secになるのだが、RAIDz1の場合は書き込みは 60MB/sec、読み込みは90MB/secになることです。という事は ZFSはRAIDでタマ数を増やすと読み込みはRAID0のように、 HDDの数の倍数になるってことかな？ 752 名前：login:Penguin mailto:sage [2012/05/28(月) 15:13:40.13 ID:lYrJmZJf] >>751 ディスクのうち一台にはパリティを書き込むので、台数-1倍になりますな。 753 名前：741 mailto:sage [2012/05/28(月) 19:22:51.86 ID:4B9wts/1] 楽しみにしていたZFS化のメリットだが、仮想環境のファイルの アクセスには効果がなかったようだ。 /home以下のディレクトリに、Raidz1で３本の500G HDDを束ねて、 さらにSSDディスクを2Gと20Gに分けて、ZILとL2ARCとした。 Windowsのイメージの入った仮想イメージを、ZFSのディスクと EXT4のファイルシステムのディスクにそれぞれ置いて、起動時間を 測った見たところ、 ZFS　　60秒 EXT4 20秒 .... 玉砕です。 メモリーが8Gなのが悪いのか、ディスクがSATAの古いモデルで、 マザーボードに接続しているのが悪いのか、よくわからない。 もう少し使ってみて、速度が耐えられないようなら、EXT4に戻します。 754 名前：login:Penguin mailto:sage [2012/05/28(月) 21:39:28.11 ID:pfdxoNCT] 正直 ZFS/RAID-Z は座学程度なんで以下は話半分ぐらいで。 ZFS ってストライプ幅を可変にする事でファイルサイズに適した読み書きが 出来るから速いんじゃないのか？ 仮想マシンの方がＦＳのブロックサイズ単位で読み書きするから意味がないし、 それどころか、細かいストライプサイズで足を引っ張りまくりの気がするんだが 実際のところはどうなん？ 755 名前：login:Penguin mailto:sage [2012/05/28(月) 22:21:11.05 ID:JoD8MIsl] REGZAの録画用ファイルサーバをLinux ext4からFreeBSD Raid Z1 4台にしたら、時々再生引っかかるようになった。 ディスクの読み書きの速度は同等だし、CPUが足引っ張ってるわけでもなさそう。 大ファイルの連続読み出しのパフォーマンスが悪いのか… 756 名前：login:Penguin mailto:sage [2012/05/28(月) 22:34:42.33 ID:pfdxoNCT] >>755 ストライプサイズが大きいとサイズの大きなファイルを処理するときに有利で、 動画編集系の業務システムではそうなっていると聞いたことがある。 その理屈で言うとストライプサイズの小さめの RAID-Z は不利なのかも。 「引っかかるようになった」のが使い続けていくうちにどんどん悪化してそうなった のか ZFS にしたからそうなったのかが気になるんですけどどっちですか？ # RAID-Z って大きいファイルだとフラグメンテーションしまくりな気が。 757 名前：login:Penguin mailto:sage [2012/05/28(月) 22:55:18.32 ID:bomq/PUE] どうせ社内個人用なんでしょう raidに飽きたらcronでバックアップ 安定と速さ、コスト重視ならraidなんかいらない 758 名前：login:Penguin mailto:sage [2012/05/28(月) 22:57:56.77 ID:JoD8MIsl] >>756 最初からそうでした。 まだまだ容量余ってるし、メモリも8GBあるんだけどなー。 録画置き場だけじゃなく、mac用ファイルサーバにもしてるので、映画見てるときにTimemachine のバックアップ走ると飛びまくり… 759 名前：login:Penguin mailto:sage [2012/05/28(月) 23:46:36.39 ID:pfdxoNCT] >>758 返信ありがとうございます。 でかいファイルの扱いそんなに不得意なの？ JAIST かどっかでＦＴＰサーバに使ってる話もあったからちょっと眉唾。 CPU の性能／コア数が足りないだけの気がするけど TCP/IP の実装が Linux と FreeBSD で違ってるせいで MAC との通信ばかり優先されるとかあるのかも。 760 名前：login:Penguin mailto:sage [2012/05/29(火) 00:13:01.84 ID:So0/YmwI] ハード要因もあるだろうし、ZFSに限らずI/Oの特性にあわせて ファイルサーバの設定をチューニングするんじゃないの？ 761 名前：login:Penguin mailto:sage [2012/05/29(火) 00:54:24.48 ID:qjgx8ugW] FreeBSDならsysctlでパラメータ調整も視野に入れた方が良いかもね 2chサーバーもblog見るとパラメータ調整を相当数してるし 762 名前：デムパゆんゆんネトウヨ特攻兵＠５月病　 【関電 62.1 %】 mailto:はげ [2012/05/29(火) 01:50:54.77 ID:U5WNEXG6] ふりBSDのバージョンと zfsのバージョンが気になる zfs -V zpool -Vの結果見せなさい 763 名前：login:Penguin mailto:sage [2012/05/29(火) 03:14:57.97 ID:LxrSwIcU] ZFSのうまみは、多くのプロセス/スレッドから同時かつ大量に読み書き したときの、性能のスケーラビリティやキャッシュの利用効率にあるので、 自宅サーバーで利用するメリットは少ない。 ZFSはチューンナップが必要ないように設計されているので、 パラメータをいじるとほとんどの場合裏目に出る。 ただ、先読みキャッシュを切るのは試す価値がある。 zfs:zfs_prefetch_disable=1 764 名前：login:Penguin mailto:sage [2012/05/29(火) 03:17:54.40 ID:v6wCq4A9] >>750 ありがとー Ubuntu 12.04（kernel 3.2）のext3では実際にバリアが有効になっているか調べてみるよ 765 名前：login:Penguin [2012/05/30(水) 00:03:32.90 ID:eFfiskua] >>762 FreeBSD 9.0-RELEASE zpool upgrade -v This system is currently running ZFS pool version 28. 略 zfs upgrade -v The following filesystem versions are supported: VER DESCRIPTION --- -------------------------------------------------------- 1 Initial ZFS filesystem version 2 Enhanced directory entries 3 Case insensitive and File system unique identifier (FUID) 4 userquota, groupquota properties 5 System attributes For more information on a particular version, including supported releases, see the ZFS Administration Guide. てな雰囲気です。 766 名前：login:Penguin mailto:sage [2012/05/30(水) 08:28:42.10 ID:Hg7I9VUi] ZFSがWindowsに搭載される可能性について（Microsoftではなく第三者によって） 767 名前：login:Penguin mailto:sage [2012/05/30(水) 10:35:10.06 ID:Fem8Gu/g] すでにあるだろ https://code.google.com/p/zfs-win/ 768 名前：login:Penguin mailto:sage [2012/05/30(水) 10:53:11.42 ID:BMjgTba5] read onlyじゃねえ

---

---

[ 続きを読む ] / [ 携帯版 ]

read.cgi ver5.27 [feat.BBS2 +1.6] / e.0.2 (02/09/03) / eucaly.net products.
担当:undef