1 名前: 忍法帖【Lv=29,xxxPT】 mailto:sage [2012/01/15(日) 16:38:33.83 ID:OMF5PJgt] ●前スレ ファイルシステム総合スレ その13 engawa.2ch.net/test/read.cgi/linux/1311812102/ ●関連スレ ジャーナリングファイルシステム ttp://hibari.2ch.net/test/read.cgi/unix/979408065/ OpenSolaris/Illumos (OpenIndiana, etc.) 5 hibari.2ch.net/test/read.cgi/unix/1285876800/ 過去スレ、関連リンクは >>2-10 あたりで。
741 名前:login:Penguin mailto:sage [2012/05/26(土) 18:37:05.68 ID:YjIi9L7U] 会社の絶不調なUbuntuデスクトップ機(タワー型)の OSをCentos 6.2(派手なメディア系のソフトは無いけど仕事で使うには 十分なソフト環境)に変え、ファイルシステムはZFSに変えてみた。 ジャンク品の500GのSATA HDDを3本Raidzにして、全部homeにあてて みた。ジャンク品だが経年劣化で壊れたら、それはそれでおもしろいと思っている。 ベンチマークとかファイルのコピー時間とか見てるけど、マザーボードが 読み書き合わせて150MB/secが限界のしょぼいヤツなんで、 まだZFSの恩恵は判らない。 日々のバックアップとか、ランダムアクセスを多用する処理がどれぐらい 良くなるか、来週の業務が楽しみです。
742 名前:login:Penguin mailto:sage [2012/05/26(土) 21:11:33.51 ID:7HdLZpM3] >>741 山中幸盛みたいでかっこういいな
743 名前:login:Penguin mailto:sage [2012/05/27(日) 19:29:51.15 ID:sFUG4pgM] 何をしたいかわからんw
744 名前:login:Penguin mailto:sage [2012/05/27(日) 20:13:08.68 ID:BMpUzC+a] LinuxサーバーにSSDを使うための情報メモ oopsops.hatenablog.com/entry/2012/05/24/164941
745 名前:login:Penguin mailto:sage [2012/05/27(日) 20:20:49.29 ID:T8Ff12Rn] みんなバリア無効にしている? ext3も今度からバリア有効設定がデフォになるらしいけど。
746 名前:login:Penguin mailto:sage [2012/05/27(日) 23:25:49.50 ID:RpQeUUxd] >>745 当然即無効 有効設定不要
747 名前:login:Penguin mailto:sage [2012/05/27(日) 23:40:59.37 ID:fcmbTsZx] 我感謝君迅速回答 謝謝参考情報
748 名前:login:Penguin mailto:sage [2012/05/28(月) 01:30:27.57 ID:v3fn9Bax] >>747 IDがずれてるぞw
749 名前:login:Penguin mailto:sage [2012/05/28(月) 13:41:54.41 ID:06aQcVRA] >>745 「ext3も今度からバリア有効設定がデフォになるらしい」ってまじか? ソースきぼん
750 名前:login:Penguin mailto:sage [2012/05/28(月) 13:50:44.83 ID:p/RNWQpE] >>749 Linuxカーネル3.1 からだからもうとっくに有効になってますね。 sourceforge.jp/magazine/11/10/25/0437213
751 名前:741 mailto:sage [2012/05/28(月) 14:43:01.77 ID:4B9wts/1] >>743 会社のデスクトップ機は、Linuxのサーバとソフトの評価のために 仮想イメージが20個ぐらい入っているんだけど、同じような ディスクブロックだったようで、dedupで1.30という数字が 出ています。ディスクの節約ができたのはまず嬉しい。 あと実際に使ってわかったのは1本ずつのHDD30MB/secの読み 書きが出来る場合、3本のディスクによる読み書きの速度は Raid0の場合は90MB/secになるのだが、RAIDz1の場合は書き込みは 60MB/sec、読み込みは90MB/secになることです。という事は ZFSはRAIDでタマ数を増やすと読み込みはRAID0のように、 HDDの数の倍数になるってことかな?
752 名前:login:Penguin mailto:sage [2012/05/28(月) 15:13:40.13 ID:lYrJmZJf] >>751 ディスクのうち一台にはパリティを書き込むので、台数-1倍になりますな。
753 名前:741 mailto:sage [2012/05/28(月) 19:22:51.86 ID:4B9wts/1] 楽しみにしていたZFS化のメリットだが、仮想環境のファイルの アクセスには効果がなかったようだ。 /home以下のディレクトリに、Raidz1で3本の500G HDDを束ねて、 さらにSSDディスクを2Gと20Gに分けて、ZILとL2ARCとした。 Windowsのイメージの入った仮想イメージを、ZFSのディスクと EXT4のファイルシステムのディスクにそれぞれ置いて、起動時間を 測った見たところ、 ZFS 60秒 EXT4 20秒 .... 玉砕です。 メモリーが8Gなのが悪いのか、ディスクがSATAの古いモデルで、 マザーボードに接続しているのが悪いのか、よくわからない。 もう少し使ってみて、速度が耐えられないようなら、EXT4に戻します。
754 名前:login:Penguin mailto:sage [2012/05/28(月) 21:39:28.11 ID:pfdxoNCT] 正直 ZFS/RAID-Z は座学程度なんで以下は話半分ぐらいで。 ZFS ってストライプ幅を可変にする事でファイルサイズに適した読み書きが 出来るから速いんじゃないのか? 仮想マシンの方がFSのブロックサイズ単位で読み書きするから意味がないし、 それどころか、細かいストライプサイズで足を引っ張りまくりの気がするんだが 実際のところはどうなん?
755 名前:login:Penguin mailto:sage [2012/05/28(月) 22:21:11.05 ID:JoD8MIsl] REGZAの録画用ファイルサーバをLinux ext4からFreeBSD Raid Z1 4台にしたら、時々再生引っかかるようになった。 ディスクの読み書きの速度は同等だし、CPUが足引っ張ってるわけでもなさそう。 大ファイルの連続読み出しのパフォーマンスが悪いのか…
756 名前:login:Penguin mailto:sage [2012/05/28(月) 22:34:42.33 ID:pfdxoNCT] >>755 ストライプサイズが大きいとサイズの大きなファイルを処理するときに有利で、 動画編集系の業務システムではそうなっていると聞いたことがある。 その理屈で言うとストライプサイズの小さめの RAID-Z は不利なのかも。 「引っかかるようになった」のが使い続けていくうちにどんどん悪化してそうなった のか ZFS にしたからそうなったのかが気になるんですけどどっちですか? # RAID-Z って大きいファイルだとフラグメンテーションしまくりな気が。
757 名前:login:Penguin mailto:sage [2012/05/28(月) 22:55:18.32 ID:bomq/PUE] どうせ社内個人用なんでしょう raidに飽きたらcronでバックアップ 安定と速さ、コスト重視ならraidなんかいらない
758 名前:login:Penguin mailto:sage [2012/05/28(月) 22:57:56.77 ID:JoD8MIsl] >>756 最初からそうでした。 まだまだ容量余ってるし、メモリも8GBあるんだけどなー。 録画置き場だけじゃなく、mac用ファイルサーバにもしてるので、映画見てるときにTimemachine のバックアップ走ると飛びまくり…
759 名前:login:Penguin mailto:sage [2012/05/28(月) 23:46:36.39 ID:pfdxoNCT] >>758 返信ありがとうございます。 でかいファイルの扱いそんなに不得意なの? JAIST かどっかでFTPサーバに使ってる話もあったからちょっと眉唾。 CPU の性能/コア数が足りないだけの気がするけど TCP/IP の実装が Linux と FreeBSD で違ってるせいで MAC との通信ばかり優先されるとかあるのかも。
760 名前:login:Penguin mailto:sage [2012/05/29(火) 00:13:01.84 ID:So0/YmwI] ハード要因もあるだろうし、ZFSに限らずI/Oの特性にあわせて ファイルサーバの設定をチューニングするんじゃないの?
761 名前:login:Penguin mailto:sage [2012/05/29(火) 00:54:24.48 ID:qjgx8ugW] FreeBSDならsysctlでパラメータ調整も視野に入れた方が良いかもね 2chサーバーもblog見るとパラメータ調整を相当数してるし
762 名前:デムパゆんゆんネトウヨ特攻兵@5月病 【関電 62.1 %】 mailto:はげ [2012/05/29(火) 01:50:54.77 ID:U5WNEXG6] ふりBSDのバージョンと zfsのバージョンが気になる zfs -V zpool -Vの結果見せなさい
763 名前:login:Penguin mailto:sage [2012/05/29(火) 03:14:57.97 ID:LxrSwIcU] ZFSのうまみは、多くのプロセス/スレッドから同時かつ大量に読み書き したときの、性能のスケーラビリティやキャッシュの利用効率にあるので、 自宅サーバーで利用するメリットは少ない。 ZFSはチューンナップが必要ないように設計されているので、 パラメータをいじるとほとんどの場合裏目に出る。 ただ、先読みキャッシュを切るのは試す価値がある。 zfs:zfs_prefetch_disable=1
764 名前:login:Penguin mailto:sage [2012/05/29(火) 03:17:54.40 ID:v6wCq4A9] >>750 ありがとー Ubuntu 12.04(kernel 3.2)のext3では実際にバリアが有効になっているか調べてみるよ
765 名前:login:Penguin [2012/05/30(水) 00:03:32.90 ID:eFfiskua] >>762 FreeBSD 9.0-RELEASE zpool upgrade -v This system is currently running ZFS pool version 28. 略 zfs upgrade -v The following filesystem versions are supported: VER DESCRIPTION --- -------------------------------------------------------- 1 Initial ZFS filesystem version 2 Enhanced directory entries 3 Case insensitive and File system unique identifier (FUID) 4 userquota, groupquota properties 5 System attributes For more information on a particular version, including supported releases, see the ZFS Administration Guide. てな雰囲気です。
766 名前:login:Penguin mailto:sage [2012/05/30(水) 08:28:42.10 ID:Hg7I9VUi] ZFSがWindowsに搭載される可能性について(Microsoftではなく第三者によって)
767 名前:login:Penguin mailto:sage [2012/05/30(水) 10:35:10.06 ID:Fem8Gu/g] すでにあるだろ https://code.google.com/p/zfs-win/
768 名前:login:Penguin mailto:sage [2012/05/30(水) 10:53:11.42 ID:BMjgTba5] read onlyじゃねえ
769 名前:login:Penguin mailto:sage [2012/05/30(水) 12:29:51.28 ID:kpTDIFzh] warata
770 名前:login:Penguin mailto:sage [2012/05/31(木) 02:15:57.62 ID:0QtNiaVt] >>753 ZFSで仮想マシン動かしてヒャッハーしたいならイメージじゃなくzvolにOS突っ込んだら?それでどんだけパフォーマンスに影響するかは知らんが。 それにL2ARCなんてしばらく埋まらんからとりあえず設定だけして仮想マシン起動時間測ってみました、なんて言ってもねぇ。
771 名前:login:Penguin mailto:sage [2012/05/31(木) 11:27:30.83 ID:CrxYKJgI] >>753 Nexentastor3.1.3がリリースされたから、Solarisカーネル環境でのパフォーマンスも見てみたらいいんじゃないか?
772 名前:login:Penguin mailto:sage [2012/05/31(木) 15:26:50.04 ID:xWRvQh87] ubuntu 12.04 の stat で birth time 欄が出来てた。 touch foobar してみても設定はされなかった。
773 名前:741 mailto:sage [2012/05/31(木) 21:48:05.00 ID:a1oDG+L0] >>770 ZFSでヒャッハーしてます。 一般のファイルの作成、Nautilusなんかでファイルの整理するには 全く問題なく使えてますが、なんとVirtualboxで深刻な問題が 発生しました。仮想イメージをZFSに置いて動かすと、仮想イメージが 壊れてしまいます。イメージを最初に小さく作っておいて、データが 増えるとディスクイメージも大きくなる設定です。 ヒントを頂いたZvolで100Gぐらいのボリュームを切り出して、 Ext3で初期化してそちらに置いたら解決しました。 目的に合わせて柔軟に使えるのも、面白いですね。
774 名前:login:Penguin mailto:sage [2012/06/01(金) 02:36:39.43 ID:CGIW/EB2] >>773 データが壊れるなんて最低じゃね〜の?
775 名前:741 mailto:sage [2012/06/01(金) 09:12:37.53 ID:SXtJZzRy] テストしてみたら、Fixed size storage形式でZFS上に Virtualboxの仮想ディスクを確保しておくと、問題ないようです。 まとめると次のとおりです。 Dynamic allocated size ZFS上でCentOS 5.8インストール中 2回/2回 ディスクエラー発生 ZvolでCentOS 5.8インストール 1回/1回 正常終了 Fixed size storage ZFS上でCentOS 5.8インストール 1回/1回 正常終了
776 名前:login:Penguin mailto:sage [2012/06/01(金) 11:56:12.20 ID:GcMrQfvt] 前にSunのZFSのページにヘルメットとゴーグルしたおっさんが 稼働中のHDDをハンマーでぶん殴って壊して 縮退→交換→リカバリーやってる動画あったな
777 名前:login:Penguin mailto:sage [2012/06/01(金) 17:27:29.04 ID:J3dtdgCS] >>773 動かしたらイカンだろw
778 名前:login:Penguin mailto:sage [2012/06/02(土) 09:17:25.99 ID:XDNKPOnJ] は?