1 名前:login:Penguin mailto:sage [2007/09/14(金) 15:13:49 ID:+fo3Eq3t] 貧乏人でもiSCSIが使用可能なLinux-iSCSIについて語ろう。 FreeNASよりも高速、クラスタ対応のファイルシステムを使えば共有も可能。 NFSよりも圧倒的に高速です。 The iSCSI Enterprise Target Project iscsitarget.sourceforge.net/
313 名前:login:Penguin mailto:sage [2008/10/22(水) 23:51:33 ID:etJ7OgyK] slackwareで1から作るとか
314 名前:login:Penguin mailto:sage [2008/10/29(水) 04:13:40 ID:rSTzb4Vt] そこで颯爽とOpenFilerが登場
315 名前:login:Penguin mailto:sage [2008/10/29(水) 22:09:01 ID:ph0eK3Be] インターネット経由のiSCSIってありなの? 認証だけちゃんとしてたらおk?
316 名前:login:Penguin mailto:sage [2008/10/29(水) 22:16:49 ID:+eQ3jXaA] >>315 ありってどのレベル? 技術レベルならできるかもってことになるが、 グローバルIP割り当てたiSCSIをそのまんま公開するのが セキュリティ的にありかって聞かれればなし せめてVPNを通すかってことになるが、敷居も若干高くなるね パフォーマンス的には知らん
317 名前:login:Penguin mailto:sage [2008/10/30(木) 10:09:46 ID:Qk23tguj] iSCSIを使った遠隔バックアップなんかには使えるの、、か?
318 名前:login:Penguin mailto:sage [2008/10/30(木) 11:29:44 ID:IOEi3uq8] ノートパソコンで使えるHBAってありますか? 普通のNICでやれってこと?
319 名前:login:Penguin mailto:sage [2008/10/30(木) 12:59:32 ID:G2QBr0kK] ブートさせなきゃ普通のNICでできる ブートさせる場合でも、DHCP/tftp立てれるなら、PXE使えればできる linux板なので、あえてwindowsは無視してみた 遠隔はVPNか、速度出そうと思ったら広域LAN(カネカカルー) 通常のダイアルアップ回線でもできないことはないけど、まぁ常識的に無い。
320 名前:login:Penguin mailto:sage [2008/10/30(木) 13:16:09 ID:Mz+eiN+n] ギガビットで専用のネットワーク組むの薦められるくらいだし やって出来なくはない程度じゃないかな>広域iSCSI
321 名前:login:Penguin mailto:sage [2008/10/30(木) 13:22:13 ID:IOEi3uq8] さらに質問ですまないのだが iSCSIターゲットでおすすめのRAIDありませんか? 予算は30万円ぐらいまで バッファローは対象外です
322 名前:login:Penguin mailto:sage [2008/10/30(木) 15:33:30 ID:uLio1pQU] ふと、百円をやったら次は一万円をよこせと言い出す、みたいな話を思い出した。
323 名前:login:Penguin mailto:sage [2008/11/03(月) 04:22:01 ID:3pAPQy02] >>321 ML115(\13000)+WD1T(\11000)*4にCentOS5.2のRAID0にして4T近くをiscsi enter prise targetにして使ってる私がとおりますよっと。クライアントがwindowsなもんでMBR制約内の2Tに分けてるけど。 Cent(というかLinux)素人だったけど、OS標準インストールして yum update yum install gcc yum install kernel-devel yum install openssl-devel (iet落としてきて)make install だけで動いたような。ちなみにiptablesは当然編集、SElinuxはPermissive(無効だっけ?あと、つづりあってる?)で使ってる。 それにしても今でもCentOSでRAID5(mdadm)の使い方がわかんねぇ。。。勉強中に作ってそのままなもんで。今じゃデータ入れちゃって壊せんし・・orz CentOSでRAID5できるなら、最低6万ちょいあれば3Tぐらい(実質2.7Tぐらい?)の『iSCSIターゲットでおすすめのRAID』ができんじゃないかな? 速度やメンテ性で”おすすめ”に見合うかはわからんけど。 正直、初心者でiSCSI-SAN手をだして、今はひどいめにあっている。 このスレ(住人さんも多分)は私には敷居たかすぎです。。。
324 名前:login:Penguin mailto:sage [2008/11/03(月) 08:59:52 ID:HgXDMZQV] >>323 ひどいめって何? それだけじゃわかんないぜ。
325 名前:login:Penguin mailto:sage [2008/11/03(月) 09:18:02 ID:vwp6K2hl] RAID0がつくれるのにRAID5が作れないなんて・・・
326 名前:login:Penguin mailto:sage [2008/11/03(月) 13:41:39 ID:3pAPQy02] >>324 んー iSCSI鯖をトイレで動かそうとしてるんだけどndiswrapperとかlsusbとかinsmodとかiwconfigとか苦労してるとか。 【Wireless】Linuxで無線LAN【IEEE802.11】 pc11.2ch.net/test/read.cgi/linux/1214318174/l50 とか見て参考にしてるけどダメダ… >>325 ちなみにML115のBIOSでRAID5つくれるよん。多分Centからは2.7Tのボリュームで認識できるんじゃない? >速度やメンテ性で”おすすめ”に見合うかはわからんけど。 ってのは”オンボードRAID5でメンテしやすいか?”って言いたかった。うまく言えてなかったですわぁ それにしてもRAIDに30万とかだせる人がウラヤマシス…orz
327 名前:login:Penguin mailto:sage [2008/11/05(水) 03:34:31 ID:brJ7574v] 30万って仕事で使うってことだろ。 あんたみたいに遊びじゃない。
328 名前:login:Penguin mailto:sage [2008/11/05(水) 03:41:30 ID:6U4mUtJu] 遊んでok 仕事が遊びより偉いわけじゃない うらやましいなら遊びで30万突っ込んじゃおうぜ
329 名前:login:Penguin mailto:sage [2008/11/07(金) 10:50:09 ID:y9WMTrKh] 遊びだから30万って考え方も。 仕事だったら500万とかに・・・・
330 名前:login:Penguin mailto:sage [2008/11/07(金) 16:36:50 ID:xbJoAEJt] 金あるエンプラさんならNetAppとか買うだろう。
331 名前:login:Penguin mailto:sage [2008/11/08(土) 13:35:49 ID:tDnEYIdI] 俺はEMC のほうが好き。
332 名前:login:Penguin mailto:sage [2008/11/08(土) 14:03:09 ID:iFvyZLdv] 金の無いテンプラ屋さんはどうすれば?
333 名前:login:Penguin mailto:sage [2008/11/08(土) 22:09:26 ID:mpOynZUD] 安い胡麻油を探す
334 名前:login:Penguin mailto:sage [2008/11/08(土) 22:28:21 ID:LzTrZNn3] OpenSolarisでZFSや、LinuxでBtrfs、DragonflyBSDでhammerfsでがんばる(`・ω・)
335 名前:login:Penguin mailto:sage [2008/11/09(日) 04:51:16 ID:LZ+hsest] Openfilerを余っていたServerで試してみた。 ServerはPowerEdge750でPen4 2.8G、メモリ2G、HDD Samsung SP2504C、SAS HBA SAS3442X クライアントはThinkCentre A51でDELLのGigabit HUB使用 Read/Writeはシーケンシャルで40Mbytes/45Mbytes程度出た事を確認しますた。 iSCSIしか試してないけど古いServerでも有効に活用出来そうですね。
336 名前:login:Penguin mailto:sage [2008/11/09(日) 09:48:16 ID:/dK0CHmz] LinkStationのiSCSIなんかはUSBと変わらんぜ。
337 名前:login:Penguin mailto:sage [2008/11/09(日) 23:59:29 ID:HvZp0jYb] >>335 Writeの方がいいってw 360Mbpsだとネットワークはボトルネックでないよね? NFSで計測した値も気になる
338 名前:login:Penguin mailto:sage [2008/11/14(金) 15:03:25 ID:y/TtvOvy] fedora9-terget [root@localhost ~]# yum install kernel-debel Loaded plugins: refresh-packagekit Setting up Install Process Parsing package install arguments No package kernel-debel available. Nothing to do [root@localhost iscsitarget-0.4.16]# make; make install make -C usr make[1]: ディレクトリ `/root/iscsitarget-0.4.16/usr' に入ります cc -O2 -fno-inline -Wall -Wstrict-prototypes -g -I../include -c -o message.o message.c message.c: In function ‘ietadm_request_handle’: message.c:130: error: storage size of ‘cred’ isn’t known message.c:130: 警告: unused variable ‘cred’ make[1]: *** [message.o] エラー 1 make[1]: ディレクトリ `/root/iscsitarget-0.4.16/usr' から出ます make: *** [usr] エラー 2 cc usr/ietd.o -o usr/ietd /usr/lib/gcc/i386-redhat-linux/4.3.0/../../../crt1.o: In function `_start': (.text+0x18): undefined reference to `main' collect2: ld はステータス 1 で終了しました make: *** [usr/ietd] エラー 1 iscsiの勉強する為にインスコしたばっかなので足りないものがあるのかも? 教えてエロイ人!! 使ってるfedora6は設定できてるんだけど…
339 名前:login:Penguin mailto:sage [2008/11/14(金) 23:08:53 ID:T4biSjwn] >>338 yum info iscsitarget Loaded plugins: refresh-packagekit Available Packages Name : iscsitarget Arch : i386 Epoch : 1 Version : 0.4.15 Release : 11.svn142.fc9 Size : 64 k Repo : rpmfusion-free-updates Summary : Utilities for iSCSI Enterprise Target URL : sourceforge.net/projects/iscsitarget/ License : GPLv2 Description: An open source iSCSI target with professional features, works well : in enterprise environment under real workload, and is scalable and : versatile enough to meet the challenge of future storage needs.
340 名前:login:Penguin mailto:sage [2008/11/15(土) 14:10:45 ID:JQAOg4Qu] Linux - Windows 間でひとつのボリュームを 共有しようと思って、OCFS を入れてみようと しているんだけど、Windows版の OCFS って RAC とか買わないと入手できないのかな? 誰か上記以外の方法も含めて Linux - Windows 間で ボリュームを共有してる人っている?
341 名前:login:Penguin mailto:sage [2008/11/20(木) 06:05:51 ID:t5RZoOBJ] >>338 オハヨー >[root@localhost ~]# yum install kernel-debel debel? develじゃね? >Loaded plugins: refresh-packagekit リフレッシュすりゃいいんじゃね?
342 名前:login:Penguin mailto:sage [2008/12/06(土) 22:50:38 ID:7U1OGtgO] カーネルの起動オプション拾って、ネットワーク設定とiSCSI設定して、 iSCSIにswitchrootして起動するinitrd作ったんだが・・・・ 調べてみると、起動オプションって255文字の制限があるらしいじゃないですか vlanまで対応したおかげで、起動オプション600文字超えてしまって・・・orz おまえら、どうしてる? dhcpで取得して、dhcpホストに対してinitrd埋め込み名で接続? と、寂しげなスレで言ってみる
343 名前:login:Penguin mailto:sage [2008/12/07(日) 00:07:02 ID:Vw2x9PEj] >>342 大半はカーネルじゃなくてinitから先で使う変数だろうから、 /initの先頭にでも埋めとけば?
344 名前:login:Penguin mailto:sage [2008/12/07(日) 10:03:22 ID:3xc5bxTO] >>342 試してないけど、x86 アーキなら 2048 までいけるんじゃないか? $ grep COMMAND_LINE_SIZE arch/x86/include/asm/setup.h #define COMMAND_LINE_SIZE 2048 ブートローダがしょぼいんなら、カーネルコンフィグレーションの Processor type and features -> Built-in kernel command line あたりで 埋め込めばいいんじゃない?
345 名前:login:Penguin mailto:sage [2008/12/07(日) 23:47:58 ID:SbqOCI93] あー ソース見てみたら確かに2048になってた。 過去何回かパッチが却下されたって聞いたけど、いつの間にか採用になってたのか。 もう土日終わっちゃったんで、またこんどやってみるよ。サンクス。 誰も見ていないスレかと思ったけど、結構見てる人いるのかな
346 名前:login:Penguin [2008/12/18(木) 03:45:07 ID:uySgWMbd] iSCSIでPC1でtgtdで公開して、PC2でiscsiでアクセスまではできるんだが、両方のPCでアクセスするにはどうするの?CentOSでやってるんだが。 ぐぐってcman+clvmd+GNBD+LVM+GFS/GFS2で共有は試してできたんだが、iSCSI経由で動いていないみたいでパフォーマンスが出ない。(10MB/sぐらい) clvmdまで動かして、iscsiデバイスをmkfs -t gfsでやっても、もう片方ではまったく検知されていない。 cmanのfailover domainやresources, fencing, servicesの設定も具体的に書いているのがなくてあきらめようかなと。 PV,LV,VG,sdaのどれを公開して、やるのかすら・・・イニシエータ側は増やしたり、減っても大丈夫なようにしたいのだが。
347 名前:login:Penguin [2008/12/18(木) 07:24:25 ID:lOMk7OIG] >>346 2台からの書き込みとか、不整合でデータ消滅するんじゃ
348 名前:login:Penguin mailto:sage [2008/12/18(木) 08:03:42 ID:hi2MJDme] >>347 そのためのgfsじゃないか。
349 名前:login:Penguin [2009/01/25(日) 14:56:03 ID:E+6Hg5js] AoEとiSCSIで自宅LANで遊ぶ場合にはどっちがパフォーマンスはいいの?
350 名前:login:Penguin mailto:sage [2009/01/26(月) 22:53:14 ID:jUEOfc0E] NFS
351 名前:login:Penguin mailto:sage [2009/01/27(火) 02:07:49 ID:2/EhlXoZ] AoEかな?
352 名前:login:Penguin mailto:sage [2009/01/28(水) 00:55:43 ID:8pYiKLHx] ESXiのディスク領域にlinuxでiSCSIなサーバを作ってみようと思うのですが、 ATOMとかの安いCPU/MBでもそれりの性能は出ますか?
353 名前:login:Penguin mailto:sage [2009/01/28(水) 01:03:11 ID:f4epv+eM] ATOMはどうだろう。 でもまぁ多分、先にiSCSIターゲット側のディスクが足引っ張ると思うよ。
354 名前:login:Penguin mailto:sage [2009/01/28(水) 01:59:40 ID:EBRSmL2d] 家庭用NASのCPUはAtomよりもはるかにプアーなARM系の石で、 高級NASでCeleron 2GHzとかなので、Atomでもパワーは十分にある罠。
355 名前:login:Penguin mailto:sage [2009/01/28(水) 07:15:34 ID:8xg/uAKp] それは相対的な話だろ。 もっとも、AtomはCeleron2Gより下だが。
356 名前:login:Penguin mailto:sage [2009/01/28(水) 10:20:38 ID:VnWIOtyn] そのCeleronがNetburstなCeleronなら、下手するとATOMのほうが上かも
357 名前:login:Penguin mailto:sage [2009/01/28(水) 11:33:20 ID:KR6YaGs0] 結局、CPU通らないとHDD→ネットワークの転送できないからな CPUのクロックよりも、メモリバス速度の方が重要かも
358 名前:login:Penguin mailto:sage [2009/01/28(水) 16:33:52 ID:XGDj7l8x] 以前、三省PC item.rakuten.co.jp/assist-pc/c/0000000100/ で、CentOS 5.2+IETのターゲット作ったときのベンチデータがあるよ。 CrystalDiskMark 2.2 -------------------------------------------------- Sequential Read : 54.071 MB/s Sequential Write : 39.400 MB/s Random Read 512KB : 52.726 MB/s Random Write 512KB : 30.645 MB/s Random Read 4KB : 14.803 MB/s Random Write 4KB : 1.151 MB/s Test Size : 100 MB HDDは2.5インチSATA 5400rpmの160GB このベンチは物理パーティションを使った場合だけど、LVMから切り出すと2割くらい遅かった。 同一マシンでOpenSolaris2008.11でzvolでターゲットを切り出したときのベンチも取ったけど 今見つからないな。あまり速度出なかったと思う。 C7 1GHzでもこの程度出るんだからAtomでもそれなりに出るんじゃないかな?
359 名前:352 mailto:sage [2009/01/28(水) 22:53:40 ID:8pYiKLHx] >>353-358 ありがとうございました。とても参考になりました。 趣味のサーバ用なので30MB/s出れば問題なさそうです。 週末に作ってみます。
360 名前:login:Penguin mailto:sage [2009/01/29(木) 00:00:04 ID:vMUa3Ho1] せっかくなので貼り付けておく server:linux2.6.24-x86_64 X3360 hwRAID6 client:linux2.6.24-x86_64 X3360 iSCSI # dd if=/dev/sda bs=65536 count=15258 of=/dev/null 15258+0 records in 15258+0 records out 999948288 bytes (1.0 GB) copied, 39.6692 s, 25.2 MB/s # dd if=/dev/sda bs=65536 count=15259 of=/dev/null 15259+0 records in 15259+0 records out 1000013824 bytes (1.0 GB) copied, 10.6491 s, 93.9 MB/s # dd if=/dev/sda bs=65536 count=15259 of=/dev/null 15259+0 records in 15259+0 records out 1000013824 bytes (1.0 GB) copied, 0.279964 s, 3.6 GB/s # dd if=/dev/sda bs=65536 count=15259 of=/dev/null 15259+0 records in 15259+0 records out 1000013824 bytes (1.0 GB) copied, 0.273612 s, 3.7 GB/s # dd if=/dev/sda bs=65536 count=15259 of=/dev/null 15259+0 records in 15259+0 records out 1000013824 bytes (1.0 GB) copied, 0.270295 s, 3.7 GB/s 1GBでもキャッシュに載っちまうようで
361 名前:login:Penguin mailto:sage [2009/01/29(木) 01:35:51 ID:O59olY7E] AoEを使ってみた。 Target: Linux(Debian lenny, Memory 8GB) Initiator: Windows XP + WinAoE driver で、Linuxの方で1GBのファイルを作ってそれをAoEでドライブとした。 接続は1Gigabit Ethernetで、安物ハブ経由。 -------------------------------------------------- CrystalDiskMark 2.2 (C) 2007-2008 hiyohiyo Crystal Dew World : crystalmark.info/ -------------------------------------------------- Sequential Read : 76.216 MB/s Sequential Write : 59.867 MB/s Random Read 512KB : 65.129 MB/s Random Write 512KB : 76.348 MB/s Random Read 4KB : 23.841 MB/s Random Write 4KB : 17.450 MB/s 何故か、512KBのランダムライトが逆転してるけど…
362 名前:login:Penguin mailto:sage [2009/01/29(木) 09:05:24 ID:dR/fL2Y3] ついでにnbdも頼む。
363 名前:login:Penguin mailto:sage [2009/01/29(木) 14:54:39 ID:PVPkXTqr] >>359 商品だけど、 QNAPとか調べてみるといいかも。 汎用CPU(セレロン、ATOM)によるNAS/iSCSI箱。 409、509あたりが汎用CPUです。 ATOMだったらMINI-ITXだけど、小型のリムーバブル付きITXケースって ES34069くらいしかないから、できあい買った方が安いかも。 RAID無くていいなら何でもいいかもしれんけど。
364 名前:login:Penguin mailto:sage [2009/01/29(木) 14:58:57 ID:PVPkXTqr] ああそうだ、 3wareの9550で、RAID5のSeqRead400MBくらい出るやつあるんだけど、 GbE飽和する。 FCも10GbEも高いんだけど速くしたいときは何でつなげばいい? Bondingはセッション多数張らないと意味ないよね?(モードによるけど、 2本束ねても、2倍速度が出る訳じゃなくて2セッションの時にスケジューリングで 交互にGbEを使うから遅くなりにくいってだけだよね?)
365 名前:login:Penguin mailto:sage [2009/01/29(木) 20:02:43 ID:O59olY7E] >>364 iSCSIに拘らなければ、NFSはbondingで速くなるらしいぞ。
366 名前:login:Penguin mailto:sage [2009/02/06(金) 09:30:18 ID:c9/isYeD] iSCSIって1つのターゲットに複数のイニシエータが接続できるのが普通ですか?
367 名前:login:Penguin mailto:sage [2009/02/07(土) 06:27:54 ID:eOdWVrz8] 普通
368 名前:login:Penguin mailto:sage [2009/02/09(月) 12:45:44 ID:Pj1HerQF] vista標準のイニシエータで複数のターゲットに接続できないのですが 方法ありましたら教えてください。
369 名前:login:Penguin mailto:sage [2009/02/09(月) 13:26:41 ID:vOWoa08b] >>368 板違い
370 名前:login:Penguin mailto:sage [2009/02/09(月) 23:14:23 ID:U7Fdtnp+] >>366-367 と >>368 は方向が違う
371 名前:login:Penguin mailto:sage [2009/02/19(木) 01:53:08 ID:N/Gri4je] 初日にして沼にはまっているド素人にHELP ----------------------------------- Lun 0 Path=/dev/hdc,Type=fileio Lun 1 Path=/dev/sda9,Type=fileio ----------------------------------- ↓ ----------------------------------- Feb 15 00:21:58 aohdev kernel: iSCSI Enterprise Target Software - version 0.4.17 Feb 15 00:21:58 aovdev kernel: iscsi_trgt: Registered io type fileio Feb 15 00:21:58 aohdev kernel: iscsi_trgt: Registered io type blockio Feb 15 00:21:58 aohdev kernel: iscsi_trgt: Registered io type nullio Feb 15 00:21:58 aohdev kernel: iscsi_trgt: open_path(119) Can't open /dev/hdc -30 Feb 15 00:21:58 aohdev kernel: iscsi_trgt: fileio_attach(283) -30 Feb 15 00:21:58 aohdev ietd: Can't create a logical unit 30 1 0 Path=/dev/hdc,Type=fileio ----------------------------------- HDDはあっさり認識するのですが、物理CDドライブをTargetにするばあいどうすりゃいいのでしょうか? コマンドラインから/dev/hdcはmount可能なんですが・・・
372 名前:login:Penguin mailto:sage [2009/02/19(木) 09:58:33 ID:HzVOSgLU] blockioにする必要があるんじゃないか?
373 名前:login:Penguin mailto:sage [2009/02/19(木) 22:00:21 ID:N/Gri4je] >>372 変わらず・・・ こんなところで躓くやつはオランようで、類似事例が出てこないでつ
374 名前:login:Penguin mailto:sage [2009/02/19(木) 22:51:02 ID:HzVOSgLU] ということは、removableに起因する問題かな 未対応ってオチがあるかも・・・・・
375 名前:login:Penguin mailto:sage [2009/02/20(金) 01:40:14 ID:GfdMwF3M] >>374 よろしければ、removable問題について一席。 それと未対応というのは、ドライブが?OSが? IETのバージョンが新しすぎる? などでしょうか いまのところFC4とFC10でやってますIETは同じverであります
376 名前:login:Penguin mailto:sage [2009/02/20(金) 09:55:13 ID:R/5CAks1] removableだと、対応必要なSCSIコマンドが増えるし、処理も増える。 なので、IETが未対応ってオチがあるんじゃないかな と。 確か、HDDとremovableで対応必須なコマンドが違ってた筈 google様に聞いてみても、removableは非対応っぽい雰囲気が・・・・ 自分の所では、iSCSIbootさせてしまっているので、全部止めないと試せないんだ。ゴメン
377 名前:login:Penguin mailto:sage [2009/02/20(金) 23:14:59 ID:GfdMwF3M] >>376 いやいや感謝 removableという概念がなかったので目から鱗でした で、そこらへんのキーワードで調べてみたのですが ttp://plaza.rakuten.co.jp/ftechworks/diary/200712250000/ これを参考に0.4.17のソースを書き換えてみたのですが WindowsXPのディスクの管理でリムーバブルとして「正常」認識されるも エクスプローラーからアクセスすると「ディスク構造が壊れています」と・・・(DVD-Rの場合) IETじゃないやつで対応しているのを探してしまった方がはやいのかもしれませんが、駆け出しなので気長にやってみます
378 名前:login:Penguin mailto:sage [2009/02/24(火) 03:32:48 ID:l7yDtBV+] イニシエータにWindowsは鬼門か…('A`)
379 名前:login:Penguin mailto:sage [2009/03/09(月) 20:53:51 ID:4l6k7cz9] DELL鯖でwindows2003のiSCSIbootやってみた(BCM5708、iBFT使用) 結論から言うと、「できるにはできるが、素直にintelNIC買うのが楽」 手順通りにやっても何か問題が残ってるようでうまくいかない。 設定いじりながら何回もインストールやりなおしてやっと成功。 intelNICだと、インストール時にSCSIアダプタとしてドライバの追加ができるらしく たぶん、苦労することはない。対応OSなら。 iSCSIとVLAN併用する方法もわかんないし、windows鬼門すぎる linuxだと簡単なのに・・・・
380 名前:login:Penguin mailto:sage [2009/03/09(月) 21:09:58 ID:5q3iUpy5] Windowsで安価に使えるクラスターファイルシステム マダー(・∀・ )っ/凵 ⌒☆チン
381 名前:login:Penguin mailto:sage [2009/03/09(月) 21:44:04 ID:XIs5NKxj] クラスターFSってどんなのがあります?
382 名前:login:Penguin mailto:sage [2009/03/09(月) 22:40:00 ID:T/NEb4lO] ocfs
383 名前:login:Penguin mailto:sage [2009/03/09(月) 23:03:33 ID:XIs5NKxj] >>382 THX ocfs2とかgfsというのがあるのは分かった。 インスコ方法まとまっているのがあまりないなぁ・・・・ コツコツやってみるか
384 名前:login:Penguin mailto:sage [2009/03/11(水) 00:19:58 ID:4/oImeap] >>383 OCFS2はインストールとかほとんど考えることがない位に簡単。 GFSルートは艱難辛苦を乗り越える人生の苦い思い出を作るのに最適。
385 名前:login:Penguin mailto:sage [2009/03/11(水) 13:35:35 ID:aQ3LTct5] WindowsからもOCFS2読めるといいんだがなぁ
386 名前:login:Penguin mailto:sage [2009/03/11(水) 18:00:03 ID:P1GvtV0h] Linux、BSD、Mac、Winで共通して使える オープンソースのクラスタファイルシステム出ないかねー。 そこからブート可能となると、いろいろ各OSの都合があって難しいだろうけど、 データ用としてなら十分に可能だと思うんだけどなー。 ZFSあたりがクラスタファイルシステムに対応してくれると一番良さそうだけど。
387 名前:login:Penguin mailto:sage [2009/03/12(木) 23:44:46 ID:g8ruAVvI] GFSだとLinux、BSD、MacOSXまでは使える…のか…? やっぱWindowsが難しいか…
388 名前:login:Penguin mailto:sage [2009/03/19(木) 04:38:20 ID:DhtM+0dB] ocfs2 簡単だったけど、その上に vmware server 2 の vm 置いて立ち上げたらなぜか panic 起こすんだよなぁ...
389 名前:login:Penguin mailto:sage [2009/03/19(木) 08:24:40 ID:kKnzxfeJ] >>388 つ communities.vmware.com/thread/76811
390 名前:login:Penguin mailto:sage [2009/03/21(土) 11:59:14 ID:SUGg/a1o] ocfs2を使うときに、o2cbを設定しなかったらどうなるの?
391 名前:login:Penguin mailto:sage [2009/03/22(日) 00:30:28 ID:NELPS9Fg] >>388 まあ、その手のことをしたいのならESXiでVMFS使えって感じだしなぁ
392 名前:login:Penguin mailto:sage [2009/04/30(木) 13:29:16 ID:mvK9OSam] iscsiのイニシエーターが壊れた場合、iscsiで運用していたSATAのディスクを 取り外してUSBの外付けHDDケースに入れ替えて接続したりすると、 そのまま問題なく読めるのかな?
393 名前:login:Penguin mailto:sage [2009/04/30(木) 14:08:41 ID:5uo44M6O] ターゲット側の実装によるだろうけど、open-iscsiなら読めたかな。
394 名前:login:Penguin mailto:sage [2009/04/30(木) 21:20:12 ID:mvK9OSam] それはすごい便利だね。 iSCSI Enterprize でも出来るかな?
395 名前:login:Penguin mailto:sage [2009/05/13(水) 00:18:17 ID:1KY35FPl] SunOS sxce113 5.11 snv_113 i86pc i386 i86pc でiSCSI Targetやってるんですが、 同じハードでCIFSだと40MB/sくらい出るんですが iSCSIだと10MB/sくらいしか出ません。 どなたかチューニングのやり方などご教授いただけませんか?
396 名前:login:Penguin mailto:sage [2009/05/13(水) 12:17:47 ID:MZPW4xdH] Linux側をtargetにしてクライアントPCにWin7を入れたんだけど、 NICのBIOSでtargetを認識さえさせておけば、 その後はOSメディア1枚だけで何一つ問題なく入った。 便利な時代ですな。
397 名前:login:Penguin mailto:sage [2009/05/13(水) 12:26:51 ID:T/QXs0iy] そんなのvistaのころからできてますけど
398 名前:login:Penguin mailto:sage [2009/05/13(水) 21:58:40 ID:hHoDwZkO] vistaなんてつかうわけないじゃんw
399 名前:login:Penguin mailto:sage [2009/05/14(木) 03:20:48 ID:Kn+gMczG] 買ってないんだろ?必死だな 頼むからRC拾ってきて目新しいことできたように言わないでくれw
400 名前:login:Penguin mailto:sage [2009/05/14(木) 09:53:49 ID:uvSSbw0D] 情シスなら評価くらいしてるだろ。 開発者とかならMSDNあるし、運用でもTechnetとかあるし。 ノートPC買えばVista入ってるし。 ここは安鯖で遊んでる人間が多そうだから自作板みたいな 煽りも出てくるんだろうな。
401 名前:login:Penguin mailto:sage [2009/05/14(木) 09:54:42 ID:uvSSbw0D] というか、そもそもここLinux板だから、Windowsなんか使わねえよ、ってことか。 そりゃごもっとも。
402 名前:login:Penguin mailto:sage [2009/05/14(木) 10:08:00 ID:eFdqhiA9] ほう、Win7をiSCSIインストールできるのか XPとか2003とか、一度HDDに入れてイメージ作ってとか面倒だったからなぁ
403 名前:login:Penguin mailto:sage [2009/05/15(金) 22:37:46 ID:3/qG6p/W] 7はVHDからブートできるようになったのが面白くて
404 名前:login:Penguin mailto:sage [2009/05/16(土) 11:43:35 ID:ADenNnzH] >>403 LDのライバルだったあれか!
405 名前:login:Penguin mailto:sage [2009/05/21(木) 23:33:03 ID:N+B2R2kY] Fedoraのnetbsd-iscsi試したら2TB制限有ったわ
406 名前:login:Penguin mailto:sage [2009/05/23(土) 03:37:51 ID:SA615vmK] >403-404 むかし展示品のVHDプレイヤーを電気屋からタダで貰ったけど、ソフトなくて捨てたの思い出した
407 名前:login:Penguin mailto:sage [2009/05/27(水) 10:09:48 ID:CRi/AU+3] VHD=バンテック・グループ・ホールディングス LD=ライブドア 特にライバルではなかった。
408 名前:login:Penguin mailto:sage [2009/05/27(水) 10:15:07 ID:qVf/PbNq] ツマンネ
409 名前:login:Penguin mailto:sage [2009/05/27(水) 10:39:31 ID:5W33QR0o] >>407 ここまで拾いようのない真面目ボケは初めて見た
410 名前:login:Penguin mailto:sage [2009/05/30(土) 08:39:38 ID:A4mI6s1R] iSCSIの利点って何なんでしょ。 WikiPedia見てきたけどいまいちわからんす…。 iSCSI - Wikipedia ja.wikipedia.org/wiki/ISCSI 昔、PC98時代は、外付けHDDでSCSI使ってましたが、 外付けHDDみたいに使えるだけなのでしょうか? >>1 でFreeNASより高速とありますが、スレ読む限りファイル共有のプロトコル(といかNAS)というわけではないようですし…。 また、eSATAじゃなくて、iSCSI使う理由は何なのでしょうか? こちらでiSCSIでサーバー構築とかやっておられる方みて気になってはいるのですが…。 ゆーすけべー日記: 「ボケて」ガンマ版リリース - 技術的新しい試みまとめ yusukebe.com/archives/09/05/02/212113.html
411 名前:login:Penguin mailto:sage [2009/05/30(土) 10:01:06 ID:7JM4Se98] ぶっちゃけ、劣化・安価なファイバチャネル
412 名前:login:Penguin mailto:sage [2009/05/30(土) 10:32:29 ID:RHRSsyAh] >410 イーサを纏めてボンディングしたり VPN越しにストレージを置いたら災害対策とか
413 名前:login:Penguin mailto:sage [2009/05/30(土) 10:51:26 ID:xjygD1bY] iSCSI越しにテープが使えるのがよかったなぁ。 あと、Linux関係ないけどWindowsでMSCSが簡単・安価に組める。 まぁ、安価なファイバーチャネルって意見は同意。
414 名前:login:Penguin mailto:sage [2009/05/30(土) 11:02:20 ID:A2I/ky0r] Windowsでネットワークドライブだと制限かかるような時とか。 ネットワーク越しにハードウェアとして認識してくれるのは助かる。 まあ、スイッチがへぼかったらあんまり業務で使いたいと思わないけど。
415 名前:login:Penguin mailto:sage [2009/05/30(土) 11:07:10 ID:NBjCw2ME] VMware ESXi用のストレージとして活躍してます。
416 名前:login:Penguin mailto:sage [2009/05/30(土) 11:41:30 ID:SSD94aIh] 安価なFCというより、FCが高価すぎるというか。だからFCoEとか出てくるわけで。
417 名前:login:Penguin mailto:sage [2009/05/30(土) 11:51:52 ID:o1651IqM] NASと違ってブートできる eSATAと違って共有ディスクでも使える うちの場合、常時稼動ファイルサーバが既にあるから、 それをターゲットにしてクライアントPCをディスクレスにしたよ。
418 名前:login:Penguin mailto:sage [2009/05/30(土) 13:32:09 ID:YommlIRZ] そもそもSANの利点がわからないって事じゃない? iSCSIはIP-SANとか言われてたような気がするが、SANについて調べてくれれば利点はわかると思う。
419 名前:login:Penguin mailto:sage [2009/05/30(土) 16:59:57 ID:p8GY99Zn] まだクラスタfsが弱いというのもありそう。
420 名前:login:Penguin mailto:sage [2009/05/31(日) 09:33:54 ID:TG5TYsp7] >>415 >>410 のリンク先の人と同じですね
421 名前:login:Penguin mailto:sage [2009/05/31(日) 09:35:10 ID:TG5TYsp7] > eSATAと違って共有ディスクでも使える マジ?何かWindowsだとダメダメみたいな情報しかないんだけど。 サーバーはLinuxなんだが、クライアントは全部Windowsなんだよね・・・
422 名前:login:Penguin mailto:sage [2009/05/31(日) 13:49:54 ID:sMil8acg] >>421 俺の書き方が悪かったかもしれないが、 eSATAみたいに「それ専用のディスクドライブ」を1本用意しなくてもいいって意味だよ。 俺はLinuxでファイルシステム上に置いたイメージファイルを iSCSI越しにクライアントPCのディスクとして使わせてる。 なんとか.img みたいなやつをね。 Win7を入れて1ヶ月ぐらい、ほぼ毎日起動して使ってるけど、まったく問題ないよ。
423 名前:login:Penguin mailto:sage [2009/06/04(木) 21:22:54 ID:ZBNhVIyy] > eSATAみたいに「それ専用のディスクドライブ」を1本用意しなくてもいいって意味だよ。 ああ!なるほど、それはなかなかにいい利点ですね。 >>410 のサイトの人も、VMのイメージにしてますよね。合点がいきました。
424 名前:login:Penguin mailto:sage [2009/06/07(日) 11:19:04 ID:btNynufd] コンソリとかVMに興味が無い奴は使わない方がいい
425 名前:login:Penguin mailto:sage [2009/06/18(木) 06:49:28 ID:SVvaKw60] 理想を言えばiSCSIドライブからOSごと起動+データもiSCSIドライブへ保存 ローカルはディスクレス・・・ だけどGbE以上必須になるだろうし、Winは起動もファイルシステムも厳しい('A`)
426 名前:login:Penguin mailto:sage [2009/06/18(木) 10:15:33 ID:QfhrprKq] 早く10GbEにな〜ぁれ
427 名前:login:Penguin mailto:sage [2009/07/10(金) 13:52:23 ID:wMuS9JQC] こんんにちは。 iSCSIストレージをDASのように単体サーバのみへの接続で使用する場合、 iSCSI@1Gポートx3なバスはUltra320SCSIバスの代替えになりますでしょうか? EquallogicPS5000VX検討中なんですが、Dellの営業担当者の 歯切れが異様に悪いです。単体だと全然性能でないとか、なんか問題あるんでしょうか? データはサーバ上のPhotoshop画像データ動画の編集や3Dレンダリング用途がメインです。 クライアントは普通にGbのワークステーションが40台くらいで接続です。
428 名前:login:Penguin mailto:sage [2009/07/10(金) 20:05:00 ID:AEUURNrT] こんにちわ
429 名前:login:Penguin mailto:sage [2009/07/10(金) 20:08:25 ID:gv6mFvuV] >>428 ゆとり乙
430 名前:login:Penguin [2009/07/11(土) 13:39:18 ID:0ACm/dO6] PS5000X使ってる。複数サーバだけど。 ランダムアクセスだとGbEx3 で十分すぎる感じ。 心配なら PS6500 にするか、10Gのが出るのを待つか。 PS4000 で十分じゃないかって気がするけど。
431 名前:login:Penguin mailto:sage [2009/07/11(土) 19:35:30 ID:sFdjIgdy] いいなぁ 16Tで100万以内くらいになれば即買うんだけどなぁ >>427 DELLがEqualLogicを買ったわけだけど、今のところは「EqualLogic事業部」になってて 製造・セールス・サポート等全て鯖部署と別だという話だった。 なので、鯖部署に聞いても情報持ってないオチ。 何年かかけて統合だそうで。
432 名前:427 mailto:sage [2009/07/19(日) 07:26:55 ID:xI+IEfZ3] >430、>431 アク規制でレスが(ryでしたm_ _m >ランダムアクセスだとGbEx3 で十分すぎる感じ。 結果報告ですが、PS5000XVx2にしました。6Gbpsあれば当面は十二分です。 ちなみに、もう少しするとPS6000系は10Gbpsコントローラがでるそうで、 更に少し間をおいてPS5000系でも使えるようになるとの事でした…あと10年戦える。 >16Tで100万以内くらいになれば即買うんだけどなぁ 私なら、SAS15kx16で1x0万くらいのキャンペーンなら即買います。 10Gbpsコントローラで将来の帯域も安堵されたりしたら 2台目以降、標準価格への特例割引で2x0万であっても 買っておいて損はないと判断しました。
433 名前:login:Penguin mailto:sage [2009/07/19(日) 07:31:21 ID:xI+IEfZ3] >何年かかけて統合だそうで。 ぁぁああ、なんか近くでそんなお話を聞いたことがwwww
434 名前:login:Penguin [2009/08/19(水) 17:26:07 ID:c1hIae3l] >>432 EqualLogiciいいなあ。 うちは金がないからMD3000iさ。ファイルサーバーと軽めのVMメインだからそんなに問題ないけど。
435 名前:login:Penguin mailto:sage [2009/08/21(金) 06:25:02 ID:NCboOpgc] 陰茎が硬くなって上を向いたよ
436 名前:login:Penguin [2009/08/25(火) 13:21:25 ID:s/g+LA/b] ほ
437 名前:login:Penguin mailto:sage [2009/08/27(木) 21:19:25 ID:B8RLVv9X] そ
438 名前:login:Penguin mailto:sage [2009/08/27(木) 21:34:34 ID:5I7Zy1ic] く
439 名前:login:Penguin [2009/08/28(金) 09:21:01 ID:VfPf8aBA] ないもんっ!
440 名前:login:Penguin mailto:sage [2009/08/28(金) 23:30:21 ID:JlBV/NE8] 細くないから恥ずかしくないもん!
441 名前:login:Penguin mailto:sage [2009/08/29(土) 00:57:07 ID:Eiy6GSGw] えーっと、"ほしゅ"したかったんじゃね? 結果all rightだが。。
442 名前:login:Penguin mailto:sage [2009/09/05(土) 18:44:46 ID:+v3cGFAD] iSCSIのターゲットって何を使ってる?? iSCSI Enterprise Target使うのが普通なのかな?
443 名前:login:Penguin mailto:sage [2009/09/05(土) 21:49:38 ID:z3HRCwUR] Windows Storage Server
444 名前:login:Penguin mailto:sage [2009/09/06(日) 08:10:58 ID:coYB01oA] CentOSのyumで入るtgtdって、MS iSCSI Boot イニシエータでマウント出来無くね? 起動出来ないイニシエータは出来るけど。
445 名前:login:Penguin mailto:sage [2009/10/07(水) 00:57:26 ID:N8PvBtWP] iSCSI Enterprise Target 1.4.18出てた。 sourceforge.net/projects/iscsitarget/files/
446 名前:login:Penguin mailto:sage [2009/10/07(水) 01:48:49 ID:HYyFfSO4] IETでiSER出来ている人いる?
447 名前:login:Penguin mailto:sage [2009/10/07(水) 06:58:07 ID:A/Sbe5Wo] IB?
448 名前:login:Penguin mailto:sage [2009/10/07(水) 11:35:56 ID:HYyFfSO4] Infinibandで
449 名前:login:Penguin mailto:sage [2009/10/07(水) 13:09:10 ID:HjsTrvmj] それにしても、LinuxのiSCSIっていまいち盛り上がっていない気が。 FreeBSDのiSCSIはFreeNASのiSCSI対応だとか、Solarisのように ZFSとiSCSIとの連動とかで、それなりに盛り上がっているのに。
450 名前:login:Penguin mailto:sage [2009/10/07(水) 15:12:47 ID:PQV9Z7uO] 環境がイマイチだからじゃないか。 俺もFreeNASとかSolarisは弄ったけど、Linuxはやる気しない。 って、スレ違いか。
451 名前:login:Penguin mailto:sage [2009/10/07(水) 18:48:26 ID:3lUx5WNe] >>449 OpenFilerというiSCSIのターゲットになれるNASアプライアンスな ディストロがあるけど、たしかにあまり話題に上らない。 俺も一度ダウンロードしてみたけど、仮想マシンでターゲットを作ったら満足してしまった。 個人的にはDebianベースで似たようなのないかな〜と思ってるんだけど。
452 名前:login:Penguin mailto:sage [2009/10/07(水) 19:43:25 ID:4pJ2lphP] 個人だけど、NASはvmachineのbackup用という位置づけなので 必要なときだけNASを立ち上げNFSでつなげている 個人でどのようにiSCSIを有効活用しているのか教えて欲しい
453 名前:login:Penguin mailto:sage [2009/10/07(水) 21:34:02 ID:LDxMp8oU] 鯖にSASでHDD30本接続 接続したHDDをiSCSIで開放 他の子鯖がiSCSIbootで起動 Windows含め、ディスクレスクライアント化 vmwareとかだと、hddをイメージファイル化するけど、 仮想マシン使わずに、リアルマシンでイメージファイル化したhddが使える
454 名前:login:Penguin mailto:sage [2009/10/08(木) 11:56:00 ID:ZGDk7ba9] >>452 PCのケースを変えたらスロットの位置関係で使ってたRAIDカードが入らなくなってしまった。 仕方なく別のPCにそのRAIDカードを挿し、 そっちをiSCSIターゲットにして iSCSI経由で接続することにした。 こりゃ便利。 同じようなパターンで、家の中に一台だけ大きいのがあれば 他の小型orノートPCで簡単に大容量ストレージが使用可能になるってのは 個人レベルでも大きなメリットになるのでは。 設置コストが安いしWinからでも使えるし。
455 名前:login:Penguin mailto:sage [2009/10/08(木) 12:05:44 ID:vwJMLS+G] ただ、便利だけど速くはないんだよなー サーバがLinuxに7200rpmの1.5Tx4でRAID5、クライアントがWin7RTMだけど クライアントから見たディスクの速度はほぼローカルディスク単発程度。 可もなく不可もなく。
456 名前:login:Penguin mailto:sage [2009/10/08(木) 12:21:33 ID:8pajwaJH] まあそんなもんだろ。 ギガイーサとコアオンリーなdebianにietdのみのサーバーなら結構いけるけどな。
457 名前:login:Penguin mailto:sage [2009/10/08(木) 12:22:07 ID:8R1jQwj5] GbEの理論最大値で125MB/secだから、そういう点では速くない それ以上望むなら10GbEかFCかな 体感ではターゲット側のキャッシュの量でシークタイムが結構相殺されるので HDD単発を直接繋ぐよりはいいと思うけど。
458 名前:login:Penguin mailto:sage [2009/10/08(木) 14:03:31 ID:bUNj30df] >>452 クラスタの共有ディスクに使ってる。 検証環境作る時には非常に便利。 SANは高くて買えないし、NASはSCSI Diskとして認識しないので使えない。
459 名前:login:Penguin mailto:sage [2009/10/08(木) 14:04:42 ID:fz30u8ss] 10GbE高いばっかりでレイテンシ大きくて遅いから そこそこ安くなりつつあるInfinibandのがいいんじゃないかな。 ターゲット1台にイニシエータ2〜4台位なら、スイッチレス で構成すれば高いスイッチ買わないで済む。 >>446 にある、IETでiSERだけど、サポートはされている みたいだけど実際にやったことはない。
460 名前:login:Penguin mailto:sage [2009/10/08(木) 15:04:56 ID:G9xFT93X] Intel CT DesktopAdapter をESXi4用と思って買ってきたんだけど iSCSIutilというのでNIC firmwareを書き換えると、tftp、DHCPを用意しなくても 直接パラメータ指定で iSCSI boot可能って書いてあった またどうせiSCSI化するなら、使わなくなった100MBのHUBもあるので OnBoard NIC = internet 接続 (100MB) / Intel NIC = iSCSI用 (GB) に分離しようかなと思い調査中 これは今NFSでも同時に2台に転送するとGBの帯域を使い切ってしまい ほかのPC等に影響を与えるため
461 名前:login:Penguin mailto:sage [2009/10/08(木) 15:21:09 ID:3X3opqH8] >>460 それiBFTの設定だよ。 www.microsoft.com/japan/whdc/system/platform/firmware/ibft.mspx
462 名前:login:Penguin mailto:sage [2009/10/08(木) 17:38:16 ID:/y2CvV6G] ターゲット側の構成二種類でbonnie++でベンチマークを取ってみたのだけど速度がエラく違う。 TargetPC Seq.R Seq.W Ran.Sk Seq.Cre Ran.Cre Pentium4 630/512MB 33840 22642 110 310 282 Opteron 2376×2/8GB 96621 98760 11550 22978 23062 項目は TargetPC - ターゲットに使用してるPCのCPUとRAM Seq.R ---- Sequential Output(block) 単位: K/sec Seq.W ---- Sequential Input(block) 単位: K/sec Ran.Sk --- Random Seek 単位: /sec Seq.Cre -- Sequential Create 単位: /sec Ran.Cre -- Random Create 単位: /sec iSCSIターゲットはのドライバは ietd。 いずれもクライアント - ターゲット間の接続は GbEでクロスケーブル直結。 クライアント側は P4 3.0GHz/2GBなPC。 クライアント側PCもいくつか変えてみたけれど、ターゲット側ほどの大きな差は出なかった。 項目によってはモロに二桁違う結果が。つーことで、 ターゲット側のデバイスの能力によって天地ほども速度に差が出ることは分かったけれど、 速度に一番影響する要素って何でしょう? CPU速度? CPUのコア数? メモリ量? これ以上コマゴマと条件変えてテストするのも面倒w なんで、どこかに調査した文献とかないでしょうかね。
463 名前:login:Penguin mailto:sage [2009/10/08(木) 17:44:46 ID:/y2CvV6G] >>455 ということで、ターゲット側の能力次第で速度はかなり変わる。 本当に「遅い」のかはいろいろ実験してみないとよく分からんと思う。 ターゲットPCローカルで取ったベンチマークより速い数字が出てしまったりw つか、そもそもRAID5は速くないと思うが。 仕組みからして、特に書き込みは単体ドライブよりも遅くなるはず。
464 名前:login:Penguin mailto:sage [2009/10/08(木) 19:39:21 ID:FK4Oe6Rv] >>462 iet.confで、type= を fileio, blockio どっちにした? fileio にすると、OSのバッファキャッシュのフラッシュの 影響を受けるのか、ベンチマーク値が安定せずに それこそ測定の度に2桁位ふらふらした記憶がある。
465 名前:login:Penguin mailto:sage [2009/10/10(土) 20:25:12 ID:+Jwo1/oB] >462 興味深いです 再度調査して報告していただけると嬉しいです
466 名前:login:Penguin mailto:sage [2009/10/10(土) 22:47:17 ID:q9tms2BH] スレチですまんが、MPIOターゲットになれるモジュールってある?
467 名前:login:Penguin mailto:sage [2009/10/11(日) 08:07:09 ID:QfEOf+JT] >>464 ベンチマークのためにキャッシュ切ってどうするww fileioで安定しないのは、OSのファイルキャッシュ使うからだよ
468 名前:login:Penguin mailto:sage [2009/10/11(日) 20:51:31 ID:9+tePb7m] 実際fileioは遅い。てかblockioがデフォルトではない理由が判らん。
469 名前:login:Penguin mailto:sage [2009/10/12(月) 00:28:25 ID:EpF7h3p5] VMwareのストレージとして使うときにfileioに変えたら 速くなったんだけど、どうなんだろうな。 メモリ多めに積んだからキャッシュがよく効いただけかも
470 名前:login:Penguin mailto:sage [2009/10/12(月) 11:05:26 ID:p+L4egqf] >>468 逆だろ デフォがblockio キャッシュ使うfileioが遅いって言うならメモリ買え
471 名前:login:Penguin mailto:sage [2009/10/12(月) 16:13:02 ID:/5O7rsxx] >>466 そもそもMPIO不可のiSCSIターゲットなんてあんの? MC/Sなら対応してないのは多いけど。
472 名前:login:Penguin mailto:sage [2009/10/12(月) 19:51:26 ID:3dsgjc6H] マルチパス実装が中途半端でクソ扱いされてるのはイニシエータ側だっけか
473 名前:login:Penguin mailto:sage [2009/10/14(水) 22:14:02 ID:CDgM3BwZ] ietdでblockio使ったらsambaよりは断然早いけど、CPUがプアだと まだまだ遅いですね。
474 名前:login:Penguin [2009/10/14(水) 22:28:26 ID:vmv5MAGQ] 亀レスだけど infinibandはスイッチが必須じゃない? subnet managerが存在するスイッチネットワークが必要だと思った でもIBスイッチ安いよ。10GEより全然コスパいい ちなみにiSERはメモリにアクセスしてるうちは速い 前試したときは500MBpsは出てた リード、ライトともにね
475 名前:login:Penguin mailto:sage [2009/10/16(金) 00:58:51 ID:mQNvovOU] >>474 OpenIBに含まれるopensmを起動しておけばOK。 switchless infinibandでぐぐると幾つか出てくるよ。 現状は低遅延広帯域ネットワークはInfinibandがベストだね。 CEEが複数ベンダから安いアダプタとスイッチが出てくるようなら、 将来は次点になるかもしれないけど、ちょっと難しそう。
476 名前:login:Penguin mailto:sage [2009/10/16(金) 11:28:38 ID:f/BQ9Mf5] >>475 スイッチレスで組めるんだ 知らなかったよ、ありがとう RDMAoCEEが動くようになれば10GEて選択も出てくるね RDMAエンジン搭載のCEE NICがまだ無いけど でもTCPベースのiSCSIにも言えることだけど、 キャッシュ同期が取れる冗長が組めないと 危なくてテンポラリな空間にしか使えないよね 商用はそこ解決してるわけだけどさ
477 名前:login:Penguin mailto:sage [2009/10/17(土) 02:43:55 ID:j9nQlXrE] Infinibandって10GbEより圧倒的に安いんだね 超ハイエンドかと思ったが、いつの間にか部署内のサーバ間接続用なんかに ちょっとした経費で買えそうな位まで安くなってるので驚いた とりあえずスイッチレスで試すのに2枚買ってみようかな iSERってiSCSIとワイヤレベルでのプロトコルが違うんだよね? ターゲットもイニシエータも対応した奴を用意しないとパフォーマンスが出る出ない 以前に通信できないってことでおk?
478 名前:login:Penguin mailto:sage [2009/10/17(土) 08:54:07 ID:E2DiCTRI] >>477 > ターゲットもイニシエータも対応した奴を用意しないとパフォーマンスが出る出ない > 以前に通信できないってことでおk? Yes、TCPは使わないです リモートホストのメモリに直接アクセス(RDMA)するんだけど、 RDMAのRead/WriteがSCSIのRead/Writeに相当する iSERに対応してるのは今のところ、LinuxとOpenSolarisくらいかなあ けどiSER評価するなら、NFS/RDMA使ったほうがいいかもよ? そろそろLinux版がGAになるし、一番簡単 RDMA使ったストレージアクセスって、iSERもSRPもNFS/RDMAも 大してパフォーマンス変わらないもの あと、日本語ドキュメントが皆無だから頑張ってね How toだけなら公式wikiとかバンドルされてるドキュメントで何とかなると思う IBの日本人エンジニアなんてほんとレアだしさ FCと同じで案件(金)が絡まないと情報出てこないのよ
479 名前:login:Penguin mailto:sage [2009/10/17(土) 10:32:48 ID:rx/kYc3S] 情報が少なすぎて、 「試しに買ってやってみるか」にはならないんだよな FCなら、繋いで、インターフェースのBOOTROMで設定すれば、 あとは/dev/sd?で見えるようになって使えると思ったけど。
480 名前:login:Penguin mailto:sage [2009/10/17(土) 10:57:04 ID:29d+cIdh] 9割がクラスタ案件だからね 入札出来るベンダも限られるし 飯のタネのノウハウは漏らさないだろうね でもオープンな情報も多いから 英語読む気があれば色々ためせるよ スレの本スジから外れてきちゃったね 他に行くところも無いんだけど
481 名前:login:Penguin mailto:sage [2009/10/17(土) 22:51:09 ID:qYCt/TXA] InfiniBandでスレ立てていいと思う。 情報が分断する気もするけど、 iSCSIとは直接関係ないしw
482 名前:login:Penguin mailto:sage [2009/10/17(土) 23:20:03 ID:9cTcAdGM] やっとiSCSIのスレを見つけた… 普通のPC、またはサーバ用のOS(?)で、 そのインストールしたPCをiSCSI用のストレージとして 認識させることの出来る奴の名称、誰か知ってたら教えてくださいorz 先月くらいにちょろっと見て、後で検証してみようと思ったんだが、 名前ど忘れ+ググっても出てこないorz
483 名前:login:Penguin mailto:sage [2009/10/17(土) 23:21:05 ID:qYCt/TXA] >>482 >>1 ?
484 名前:login:Penguin mailto:sage [2009/10/17(土) 23:31:30 ID:9cTcAdGM] >>483 ありがとう。 確かにコレでも同じ事出来るな、どこ見てんだ俺はorz でも名前が違ったような気がするんだよなぁ… 仕様見に行ったときもっとグラフィカルなサイトだった気がするし とりあえず>>1 を試してみる、ありがとう!
485 名前:login:Penguin mailto:sage [2009/10/18(日) 00:00:23 ID:/Qo2jBjR] >>484 Openfilerかな? ttp://pc11.2ch.net/test/read.cgi/mysv/1231469122/
486 名前:login:Penguin mailto:sage [2009/10/18(日) 01:33:29 ID:b+V3NSIx] Windowsで気軽に使えるクラスタファイルシステムマダー(・∀・ )っ/凵 ⌒☆チン
487 名前:login:Penguin mailto:sage [2009/10/18(日) 03:21:13 ID:DffD1WZE] >>484 sstorageかな? storage.isp.jp/
488 名前:login:Penguin mailto:sage [2009/10/25(日) 15:33:40 ID:qTGYyK7q] 次は10GbEが欲しくなる。
489 名前:login:Penguin mailto:sage [2009/10/25(日) 21:26:23 ID:DdsJmjpm] 飽き足らずにInfinibandが欲しくなる
490 名前:login:Penguin mailto:sage [2009/10/28(水) 20:15:47 ID:/CZ6VZy0] 10GbEは意外と安くならないね
491 名前:login:Penguin mailto:sage [2009/10/28(水) 20:44:55 ID:uXsj3Jvl] 来年からIntelはオンボ10Gにするらしいけどね。 問題はL2スイッチが直ぐには安くなりそうもないこと。
492 名前:login:Penguin mailto:sage [2009/11/02(月) 16:35:14 ID:KNufd3Mp] iSCSI用途に限らないんだけど、今のLinuxで10Gのカードって ノウハウ的にどこがおすすめ? Intel,Broadcom,Chelsio,MallaoxあたりとBladeNetworksの 24portスイッチをつなげてみようかと思うんだけど。
493 名前:login:Penguin mailto:sage [2009/11/02(月) 16:41:12 ID:BWYuO9b/] ノウハウ的って意味が正確には判らないけど、 自分とこではChelsio買った部署があるな。 HPC屋が推してたらしい。
494 名前:login:Penguin mailto:sage [2009/11/02(月) 17:56:11 ID:KNufd3Mp] >>493 39s。阿鼻叫喚はとりあえず聞こえてきていないということですね。
495 名前:login:Penguin mailto:sage [2009/11/02(月) 21:01:05 ID:BWYuO9b/] とりあえず阿鼻叫喚は聞こえて来ないから、マトモに動かないと いうことは無いんじゃない? ただし、ToEはカード上で処理できるセッション数を超えた途端に ホストCPU処理になってしまうため、用途によってはトラフィックごとに アダプタを別けざるを得ず、ケーブリングでハマると聞いたことが あるので、その辺は実際のワークロードをかけて幾つかの製品を 試したほうがいいと思う。 最近はCEEだ何だと言われる位なので、各社問題無くなってるのかも しれないけど。
496 名前:login:Penguin mailto:sage [2009/11/03(火) 18:20:41 ID:hEI0AGsP] ToEってなに?
497 名前:login:Penguin mailto:sage [2009/11/03(火) 18:34:26 ID:0lf5dDD8] TOE == TCP Offloading Engine 単に"o"にツッコミたかった?
498 名前:login:Penguin mailto:sage [2009/11/03(火) 19:26:31 ID:hEI0AGsP] なんだTOEのことかよ
499 名前:login:Penguin mailto:sage [2009/11/04(水) 19:33:51 ID:pPw0VwW9] 安NASでもtargetサービス有になってきてるんか bb.watch.impress.co.jp/docs/news/20091104_326288.html
500 名前:login:Penguin mailto:sage [2009/11/05(木) 00:29:03 ID:eTYM/A9G] >>499 こんな信頼性もパフォーマンスも無さそうなTargetの 使いどころが正直判らん。 VMwareとかHyper-Vとかのライブマイグレーションの練習用?
501 名前:login:Penguin mailto:sage [2009/11/05(木) 08:59:28 ID:8YM/bsDi] >>500 練習だったら自分で組んだ方が早いわな。
502 名前:login:Penguin mailto:sage [2009/11/05(木) 12:52:00 ID:uAt1KcU0] ソフトウェアによるイニシエータ/ターゲットの存在を 知らない人も世の中にはいるんだよw いや、マジで。
503 名前:login:Penguin mailto:sage [2009/11/06(金) 00:12:16 ID:a7mq1JSi] >>502 そんな人がVMwareとかHyper-Vでシステムを仮想化とか、無茶じゃないか? 一人でVMware Player使うとかいうのとはわけが違う。
504 名前:login:Penguin mailto:sage [2009/11/06(金) 03:27:31 ID:xbeOQXg2] >>503 > そんな人がVMwareとかHyper-Vでシステムを仮想化とか、無茶じゃないか? > 一人でVMware Player使うとかいうのとはわけが違う。 そんなに違うか? 所詮単なる道具だぜ?
505 名前:login:Penguin [2009/11/06(金) 08:57:28 ID:qWrsNhC4] >>504 の意見に賛同 >>503 は勘違い選民思想チビデブハゲってことでおk?
506 名前:login:Penguin mailto:sage [2009/11/06(金) 13:09:44 ID:ER2qYO7r] >>503 文章読解力がないようだが、>>502 は>>500-501 に対するresだ。 つまり「信頼性もパフォーマンスもなさそうなTarget」の存在意味。 仮想化云々はまったく関係ない。 iSCSIは従来のSCSI同様 専用のHBAと専用の機器の組み合わせで使うものだ と思い込んでる人もいる、とゆー話。 # いや、某中古サーバ専門店の店員が。 # マジ驚いたよw
507 名前:login:Penguin mailto:sage [2009/11/06(金) 20:56:28 ID:TNWw1idW] ぉっと
508 名前:login:Penguin mailto:sage [2009/11/07(土) 13:51:56 ID:y30cOxiX] iSCSI HBA使うメリットって今あんのかな? 8GFCのスイッチとHBAの価格が4GFCと大して変わらんくらいまで落ちてきてんだよね
509 名前:login:Penguin mailto:sage [2009/11/13(金) 11:39:49 ID:N9FS5vq1] あるPC(Windows7)からiSCSIでマウントしてるディスクを 別PC(XP)からSambaでファイル共有して同時に読み書きってできるのかな
510 名前:login:Penguin mailto:sage [2009/11/13(金) 23:11:58 ID:WRG9kpVK] iSCSIは、SCSIであって、使い方はSATAやSASとほぼ一緒 なので、iSCSIをマウントしたPC/鯖とsambaで共有すればいい。
511 名前:login:Penguin mailto:sage [2009/11/13(金) 23:52:51 ID:f6I0Q3Z0] >>510 レスありがとうございます この例はあぼーんするが [PC1:Win7/NTFS] <---iSCSI---> [NAS鯖:Linux/EXT3] <---iSCSI---> [PC2:Win7/NTFS] この例は大丈夫ってことですね [PC1:Win7/NTFS] <---Samba---> [PC3:XP/NTFS] <---Samba---> [NAS鯖:Linux/EXT3] <---iSCSI---> [PC2:Win7/NTFS] [PC4:XP/NTFS] <---Samba--->
512 名前:login:Penguin mailto:sage [2009/11/14(土) 00:21:38 ID:+VAB2Vbe] どっちがどっちだ? iSCSIはブロックデバイス、sambaはファイルシステム ブロックデバイス(HDD)を適当なファイルシステムでフォーマットして sambaで共有させれば、結果的にiSCSIの中にあるファイルを共有したことになる。 iSCSIのイメージをsambaで共有しても、HDDイメージファイルを共有したことにしかならない。
513 名前:login:Penguin mailto:sage [2009/11/14(土) 01:43:55 ID:VYhG1dBU] >>512 NAS鯖 ・24h常時稼動 ・iSCSI Target(物理ストレージ側) ・Sambaファイル共有サーバー PC1〜4 ・電源ON/OFFのある完全なクライアントPC ・iSCSI Initiator ・Windowsファイル共有クライアント(Windowsファイル共有サーバーの設定はせず) 他PCがマウント中のHDDイメージの中身を、NAS鯖自信ならば読み書きできると勘違いしました あくまでHDDイメージなんですね
514 名前:login:Penguin mailto:sage [2009/11/14(土) 01:49:18 ID:VYhG1dBU] >>511 の上の例では、 NAS鯖内に複数の異なるHDDイメージを作成して、 それぞれマウントすればあぼーんすることはないが、 同一のHDDイメージをマウントするとあぼーんするわけですね >>511 の下の例では PC2がマウント中のHDDイメージを、NAS鯖がマウントするとあぼーんするから、 PC2をWindowsファイル共有サーバーにする方法しかないと理解しました 経路も迂回するし、PC2が電源OFFの時は読み書きできずとうまくいかないもんですね
515 名前:login:Penguin mailto:sage [2009/11/14(土) 02:28:02 ID:BeeV1uH3] クラスタファイルシステムでも使えばよろし。
516 名前:login:Penguin mailto:sage [2009/11/14(土) 11:14:06 ID:uNeLWaHl] クラスタファイルシステム何種類かあるけど一番有力なのはどれだろう Windowsでも一つくらいサポートしてもいいような
517 名前:login:Penguin mailto:sage [2009/11/15(日) 15:16:24 ID:ePzVhxKF] iSCSIをocfs2で使うのと、 iSCSIをサーバのどれかがNASになってNFS/SMBで共有するのは どちらが性能いいのかな。Linuxのみで使うとして。
518 名前:login:Penguin mailto:sage [2009/11/17(火) 06:14:39 ID:a96ySKqK] ん?HDDイメージの場合、Targetとしてマウント中でも HDDイメージそのものはそれがおいてある物理HDD上で コピーしたりすることはできるよね?
519 名前:login:Penguin mailto:sage [2009/11/17(火) 06:45:30 ID:Pxf5jnD2] できるけど・・・・ イメージの前半と後半でコピーした時間が違うなんてことになるぜ >>517 ocfs2は、CPU負荷が高くなると、同期・調停信号が遅れて、 ファイル壊れるとか消えるとか色々変な事が起きる。 ので、smbで済むような用途ならsmbの方が良い。 タイムスタンプの精度が必要とか、 inodeの値まで揃える必要があるような場合だとocfs2
520 名前:login:Penguin mailto:sage [2009/11/17(火) 19:05:11 ID:1HFYnidh] >>516 Windowsで使えるクラスタファイルシステムだとOCFSくらいじゃね?
521 名前:login:Penguin mailto:sage [2009/11/18(水) 00:58:59 ID:rJYbboFq] 認識があってるかも分からんが linuxのkernel-stageに /fs/dst つ〜ブロックデバイスのネットワークプロトコルが入ってた nfsの替わりもあってpohmelfsというらしい 5年後に名前が残ってるかさえわからんが…
522 名前:login:Penguin mailto:sage [2009/11/18(水) 07:54:19 ID:FFt/LoHq] >>518 それがやりたい人はSolaris使ってZFS pool上にiSCSI targetを構築しましょう。
523 名前:login:Penguin mailto:sage [2009/12/09(水) 13:10:23 ID:9E8Tibsd] LVMじゃ駄目なの?
524 名前:login:Penguin mailto:sage [2009/12/09(水) 16:29:39 ID:mfbKKGPQ] ハァ?
525 名前:login:Penguin mailto:sage [2009/12/09(水) 20:11:48 ID:6+62WSPY] >>523 とりあえず、SolarisのZFS + iSCSIがどう動作しているのか お勉強してきた方がいい
526 名前:login:Penguin mailto:sage [2010/01/12(火) 16:36:58 ID:w40rcvma] ターゲットの0.4.16と1.4.19を比べて 特に高負荷時のパフォーマンス上がってますか?
527 名前:login:Penguin mailto:sage [2010/01/23(土) 18:41:25 ID:QbcguuY2] CentOS5.4(2.6.18-164.11.1.el5) + iet(1.4.19) でターゲット構築してるんですがローカルで iscsiam -m discovery -t sendtargets -p hogehoge とやってもタイムアウトしてしまって、ターゲット名が表示 されません。 iscsiadm: socket 3 header read timed out iscsiadm: Login I/O error, failed to receive a PDU とあるので、iscsi-targetが接続要求に反応していないのではないかと 思うのです。ietd.confはデフォルトのLun 0 Path=の部分のみ書き換えて 後はそのままです。 #cat /proc/net/iet/session tid:1 name:iqn.2001-04.com.example:storage.disk2.sys1.xyz #cat /proc/net/iet/volume tid:1 name:iqn.2001-04.com.example:storage.disk2.sys1.xyz lun:0 state:0 iotype:fileio iomode:wt path:/dev/VG00/test と出るので、IETの起動も一見正常に行われているように見えます。 ただ、この状態でservice iscsi-target stopとやると正常に停止できず、 psで見るとietadm --op deleteがうまくいっていなくて止まっているようです。 何かヒントだけでも頂けませんでしょうか?
528 名前:login:Penguin mailto:sage [2010/01/25(月) 19:49:44 ID:aSKgaJKw] 3260番ポートを開けてない、とか? ところで、単なる好奇心ですが CentOS標準の tgtd ではなく ietd を選んだのは何故でしょう?
529 名前:login:Penguin mailto:sage [2010/01/25(月) 20:56:40 ID:hFoz9GXq] CDNって分散fsって言っていい物?
530 名前:login:Penguin mailto:sage [2010/01/26(火) 01:12:07 ID:a1BNkstq] >>528 iptablesではローカルホスト、ローカルネットワークからは全部開けてて、 一応telnetで接続するとコネクションまでは出来てるっぽいです。 わざわざietを使う理由ですけど、クライアントでMacを使ってて、 GlobalSAN iSCSI initiatorとの相性が悪くてマウントは出来るけど 書き込みが出来ないんですね。Windowsでは普通に使えるんですけど。 で、仕方なくietを使おうとしている次第でした。 まぁ、バックアップ用途なので最悪NetatalkかSAMBAで代替とします。
531 名前:login:Penguin mailto:sage [2010/02/09(火) 00:24:52 ID:1/aTaa6E] VMware vSphere 4を試す【第三回】 iSCSIストレージをESXiサーバーに接続する enterprise.watch.impress.co.jp/docs/series/virtual/20100209_346829.html
532 名前:login:Penguin mailto:sage [2010/02/18(木) 18:12:57 ID:S4o+jKbV] tgtd でターゲットを作成する際、 過去に使った(既に消された) tid ってのは再利用不能なんでしょうか? tgtadm --lld iscsi -m target -o show で何も表示されない (ターゲットが一つも存在しない)状態でも --tid=0 などと既に削除した ID を指定して新規作成しようとすると tgtadm: 'tid' option is necessary と断られてしまいます。 もちろんまだ一度も使ってない ID を指定すれば作成可能なのですが、 これでは「どこまで使ったか」を別途記録しておかないといけないことになり テストで作成/削除を繰り返した後など、非常に不便です。 これは「そういうもの」なんでしょうか? また「既に使ったもの」はどこを見れば確認できるのでしょう? 使用 OSは CentOS 5.4です。
533 名前:login:Penguin mailto:sage [2010/02/18(木) 21:36:17 ID:ZSkw0RMa] ietdとscstは使ったけどietdは使ったこと無いな
534 名前:login:Penguin mailto:sage [2010/02/25(木) 20:36:04 ID:xfOpcbwI] kernel-2.6.33 で iscsitargetを利用したいのですがpatchなどありましたら教えてください
535 名前:login:Penguin mailto:sage [2010/02/26(金) 13:02:46 ID:3V2vXHVf] 2.6.14以降なら普通に使えると思うが 何かパッチが必要なの?
536 名前:login:Penguin mailto:sage [2010/02/26(金) 21:08:41 ID:bdyWSyHq] ietdの場合は一応モジュール作らないとならないんじゃなかったかな パッチが大量に当たっているディストリのkernelだとconflictすることもあるだろう。 そういう場合はディストリ配布のパッケージ使えばいいわけだけど。
537 名前:login:Penguin mailto:sage [2010/03/03(水) 01:38:04 ID:AYjFbTBQ] iscsitarget-1.4.19で、writeよりreadの方が圧倒的に遅いんだけど、こういうもの? イメージではwriteの方が遅くなるよな気がしてたんだけどなぁ。 fileioでもblockioでも同じ結果。 >>534 RH系なら、rpmbuildでkmod出来るから、それを先にインスコすればおk
538 名前:login:Penguin mailto:sage [2010/03/03(水) 01:57:01 ID:6BwB45aL] 以前動かしていたietdでは、read/writeによる速度差は感じなかった。 どちらかのNICが送信に弱い/受信に弱いとか、なんかあるんじゃね? そもそも、ietdも動作おかしい点がいくつもあるけど。
539 名前:login:Penguin mailto:sage [2010/03/06(土) 04:01:44 ID:r/V4APzv] NICそのものかドライバが原因てのはあるかもね。 iperfだとワイヤースピード出るのに、 iometerでブロック流すとリードだけ安定しないってのは遭遇したことある。 その時はドライバ変えたら改善した。 とりあえずオフロード無効にしてみ?
540 名前:login:Penguin mailto:sage [2010/03/06(土) 12:34:55 ID:g68idANf] >>538-539 tgtdにしてみたら嘘みたいに解消した…。 負荷的にもtgtdの方がかなり有利みたい。 Cent雄5.4 x86_64環境。 まだ詳しく検証してないから、はっきりしたことは分からんけど、 NICドライバ周りも含めて色々調べてみる予定。 今のところ、 > そもそも、ietdも動作おかしい点がいくつもあるけど。 これには同意せざるを得ない感じ。
541 名前:login:Penguin mailto:sage [2010/03/26(金) 00:27:05 ID:H69kQD6z] ho
542 名前:login:Penguin mailto:sage [2010/04/08(木) 00:57:57 ID:I4A2fDWU] ze
543 名前:login:Penguin [2010/04/15(木) 01:57:24 ID:5j98vEiw] Hyper-V2.0 Live-Migration 用に、WSFC構築時のiSCSIとして、 ietdとtgtdを使ってみました。 すったもんだあって、結局・・・OpenSolarisのZFSでiSCSI-Targetを 使って、何となくWSFCを構成していますが、クラスタ検証テストはNG、 でも、Hyper-Vのクイックマイグレーション程度なら使えるっぽいです。 最初、dladmとか使ってNICチーミングしていた時は、ごまかしごまかしで クラスタ検証テストも警告状態でスルーしたのですが、MPIOに切り替えると クラスタ検証テストは完全にNGで終了しました。(涙 なお、NICはIntel系×4ポート、Mem16GB、Xeon3440、SATA1TB×4:Raid-5 構成の同一ハード仕様サーバを複数台使って検証しました。 #金出して、StoregeServerStandard以上を使えって事でしょうか? まぁ、・・・ご参考まで。
544 名前:527 mailto:sage [2010/05/12(水) 23:33:11 ID:5KXCICkg] 超亀報告ですが、ietdのバグだったようで 正常に動作してなかったみたいです。1.4.20.1で rpmパッケージを作成してインストールしてみたら、 あっさりつながった…。
545 名前:login:Penguin mailto:sage [2010/05/28(金) 03:30:19 ID:t2OL57fu] IETでBlockSize使うとWindowsからまともに使えないな
546 名前:545 mailto:sage [2010/06/06(日) 19:41:12 ID:083/OJg7] 冤罪だった WindowsもIETも悪くない VirtualBoxだ
547 名前:login:Penguin mailto:sage [2010/06/07(月) 16:10:36 ID:uzQTf5Qz] 乙