Debian GNU/Linux スレッド Ver. 52

1 名前：login:Penguin [2008/03/08(土) 21:56:28 ID:lwlKT0Yc] 過去ログは多分>>2あたり Debian GNU/Linux スレッド過去ログ検索 (namazuTamer 氏提供) debian.dtdns.net/2ch-debian/ Debian のよくある質問や関連サイトはこちら (namazuTamer 氏提供) スレ立て時のテンプレも以下にあります。 debian.fam.cx/ 　　　　　* 質問の前には必ず参照の事 * 511 名前：login:Penguin mailto:sage [2008/04/05(土) 17:52:00 ID:5qIlLJQH] だから標準って何？ 他人をアホ呼ばわりできるくらいの人物ならぜひご教授願いたい。 512 名前：login:Penguin mailto:sage [2008/04/05(土) 17:55:44 ID:km1mB25t] >>511 インストール時のデフォ、のつもりだったんだけどね。 意味不明だったらごめんなさいよ。 まぁDebは、わかりやすいところでブラウザが標準的ではないし くだ質やスクリプトスレでいろいろみるけど いろいろ「独自拡張」が多いようで、ユニークだよね。 513 名前：login:Penguin mailto:sage [2008/04/05(土) 18:46:56 ID:DliEBhSn] >>511 ご教授　→　ご教示　だそうだ。（笑） 514 名前：login:Penguin mailto:sage [2008/04/05(土) 18:51:46 ID:5qIlLJQH] インストール時のデフォ？ハァ？ まさに意味不明ですな。 >>513 流せ(笑 515 名前：login:Penguin mailto:sage [2008/04/05(土) 19:28:52 ID:PAfpij3c] 俺ベースシステムから育てるからそれが標準。 なので、samba関係のパッケージなんぞ入ってるほうがおかしい。 516 名前：login:Penguin mailto:sage [2008/04/05(土) 19:32:43 ID:9QdMCaqr] いんすとーるじのでふぉってなあに？Base Systemのこと？ 最近のDebianちゃんには標準とかあんの？ おいちゃんまだSarge使ってるからわからんちん(´・ω・`) 517 名前：login:Penguin mailto:sage [2008/04/05(土) 19:33:32 ID:z9V/9CkK] >>515 俺もcolinuxでしか使ったことないから多分そんな感じ。 ・Debian GNU/Linux 4.0 ・ソフトウェア選択時初期画面でチェックされているもの だとどうなるの？ 518 名前：login:Penguin mailto:sage [2008/04/05(土) 20:05:04 ID:Lz1cLdKM] >ブラウザが標準的ではないし 中身一緒だぜ 名前を変えたら標準外かい 519 名前：login:Penguin mailto:sage [2008/04/05(土) 20:06:38 ID:ZbWX4YQI] Firefoxっていつから標準になったの 520 名前：login:Penguin mailto:sage [2008/04/05(土) 20:15:36 ID:EoLx0o2z] Debian etch stableでsamba経由での転送速度がやたら遅い問題に直面しました。 以下のスレッドでアドバイスを受けながらいろいろ試してみましたが、改善しませんでした。 【IBM,NEC】激安・格安サーバ総合 7台目【HP】 ttp://pc11.2ch.net/test/read.cgi/hard/1206453318/152- 【鯖・サーバ】NEC Express5800シリーズ【110Gd】 ttp://pc11.2ch.net/test/read.cgi/hard/1206450081/903- 以上のスレッドで、ディストリビューションによって Netperfでの転送速度が違うことに気がつきました。 Debian etchだとNetperf時にCPU負荷が100%（vmstat のsyが100近くで、idが0）で 128Mbpsしか出ませんでした。 UbuntuのServer版だとNetperfでsyが10以下、idが90以上で、800Mbps出ました。 DebianでのEthernetの転送速度が遅く困っています。 ■PCのスペック 【名前】NECのサーバー　Express5800/110Gd 【CPU】 Celeron 420 1.6GHz 定格 【メモリ】 DDR2-5300, ECC付, MicronのD9GMHのチップ、512MB*2 【M/B】Gigabyte GA-5MMSV-RH (チップセット：Intel3000） 【VGA】オンボード XGI Volari Z9s 【HDD】HGSTの80GB 【Network】オンボード インテルR 82573L ギガビット イーサネット コントローラ CPUをCeleron420に換装し、同じメモリを追加しています。 （2台一緒に買ったのを移植したので。どちらもD9GMHでした。） 521 名前：login:Penguin mailto:sage [2008/04/05(土) 20:16:09 ID:EoLx0o2z] ■Netperfサーバー 　　XP SP2 Pro, Q6600 3GHz, NICがIntel1000PT, netserver-2.1pl1.exe ■Netperfクライエント 　　netperf-2.3.tar.gz 次のURLのようにmakefileを編集してコンパイル 　　ttp://whzat.minidns.net/shoko2/NetPerf/ ■UbuntuがNetperfクライエント、XPの1000PTをサーバー イメージ： 　ttp://ftp.jaist.ac.jp/pub/Linux/ubuntu-releases/gutsy/ubuntu-7.10-server-i386.iso 　apt-lineを公式の推奨通り、ftp.jaist.ac.jpに変更後、aptitude update, aptitude upgrade。 カーネル：2.6.22-14-server ドライバ：デフォルトで入ったもの、Intelから落としてきた7.6.15.4 結果：803Mbps（デフォ）と780Mbps（7.6.15.4） ■Debian etch stableがNetperfクライエント、XPの1000PTをサーバー イメージ： 　ttp://saimei.acc.umu.se/debian-cd/4.0_r3/i386/iso-cd/debian-40r3-i386-netinst.iso 　apt-lineからcd-romを消して、contribとnon-freeを追加。aptitude update, upgrade カーネル：2.6.18-6-686 ドライバ：デフォのもの（Version7.1.9-K4-NAPI）とIntelから落としてきた7.6.15.4 結果：どちらも128Mbps、netperf中にvmstat 1 5でアイドル0%を確認。 どちらもmake, gcc, ssh, linux-headers-2.6.xxxなどを入れています。 Debianはインストール時にftp.riken.jpを選択しapt-lineに追加されています。 インストール時のソフトウェアの選択は全てのチェックをはずしました。 CableはUbuntuのときもDebianのときも同じcat6のケーブルを使用しています。 DebianはethtoolにおいてSpeed: 1000Mb/s、Duplex: Fullを確認しています。 何か解決たりうる方法をご存じでしたら、ご教示いただければと思います。 どうぞよろしくお願いいたします。 522 名前：login:Penguin mailto:sage [2008/04/05(土) 20:50:30 ID:5i0BjwJ2] firefox3を入れるためにはgtk+2.10以上が必要。 以下の非公式etch-backportsで手に入ったので参考まで。 deb debian.geole.info/ etch-backports main contrib non-free 523 名前：login:Penguin mailto:sage [2008/04/05(土) 21:08:01 ID:5i0BjwJ2] >>521 kernelをlinux-image-2.6.22-4-686にするとどう？ 524 名前：login:Penguin mailto:sage [2008/04/05(土) 21:21:21 ID:5i0BjwJ2] >>521 あるいはkernelオプションの問題かもしれないから、ubuntu-serverから .configをもらってきてmake oldconfigするとか。 525 名前：login:Penguin mailto:sage [2008/04/05(土) 21:37:32 ID:EoLx0o2z] >>523-524 アドバイスどうもありがとうございます。 backportsは初めてで少してまどってしまいました。 /etc/apt/sources.listに以下を追加。 　deb エイチttp://www.jp.backports.org etch-backports main contrib non-free 　deb-src エイチttp://www.jp.backports.org etch-backports main contrib non-free aptitude install debian-backports-keyring aptitude update aptitude -t etch-backports install linux-image-2.6.22-4-686 Running postinst hook script /sbin/update-grub. You shouldn't call /sbin/update-grub. Please call /usr/sbin/update-grub instead! とメッセージが出てきたので/usr/sbin/update-grubを実行 shutdown -r nowして新しいカーネルのほうに入る。 uname -rで2.6.22-4-686を確認 /opt/netperf/netperf -H XPのIP Recv Send Send Socket Socket Message Elapsed Size Size Size Time Throughput bytes bytes bytes secs. 10^6bits/sec 65535 16384 16384 10.11 19.71 20Mbpsなのでどうもだめみたいです。ubuntu-serverは消してしまったので ubuntu-serverいれてきます。 526 名前：520 mailto:sage [2008/04/05(土) 21:49:58 ID:EoLx0o2z] >>525 はデフォルトで入っていたドライバの結果です。 modinfo e1000でversion:7.3.20-k2-NAPIでした。 intelから落としたドライバを入れてversion: 7.6.15.4-NAPIを確認して netperfした結果は下です。 Recv Send Send Socket Socket Message Elapsed Size Size Size Time Throughput bytes bytes bytes secs. 10^6bits/sec 65535 16384 16384 10.08 19.96 ドライバを新しくしてもダメなようです。 Ubuntu-server入れて.configとってきます。 527 名前：login:Penguin mailto:sage [2008/04/05(土) 22:07:26 ID:9QdMCaqr] 何がCPU食ってるのか判れば多少は助けになると思うけど。 topとかじゃ駄目なんかな。 528 名前：login:Penguin mailto:sage [2008/04/05(土) 22:25:05 ID:z9V/9CkK] >>527 ttp://pc11.2ch.net/test/read.cgi/hard/1206453318/209 prstatでsy=100のようだからkernelなんじゃない。 529 名前：login:Penguin mailto:sage [2008/04/05(土) 22:29:30 ID:z9V/9CkK] ごめん。prstatはvmstatの書き間違い。 530 名前：520 mailto:sage [2008/04/05(土) 22:54:13 ID:EoLx0o2z] UbuntuとDebianが両方使えるようにデュアルブートにしました。 37.3GB ubuntuの/ ext3 　　　（↑Debianのインストール時のpartitionerで使用しないになっていた 2.7GB スワップ 37.3GB Debianの/ ext3 Ubuntuのデフォルトのドライバは7.3.20-k2-NAPIでやっぱり795Mbps出ました。 そしてconfig-2.6.22-14-serverを採取してきました。 Debianではbackportsからlinux-image-2.6.22-4-686をおとして入れました。 uname -rして2.6.22-4-686を確認してまたnetperfしましたが相変わらず20Mbpsです。 ドライバはデフォの7.3.20-k2-NAPIです。 netperfが全然ダメでしたが、vmstat 1 8でCPUが働いていないことも確認しました。 stableのほうでは128MbpsでCPU100%だったので対照的です。 vmstat 1 8 procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu---- r b swpd free buff cache si so bi bo in cs us sy id wa 0 0 0 1005740 2728 10836 0 0 45 8 53 43 1 1 97 1 0 0 0 1005732 2728 10836 0 0 0 0 106 49 0 3 97 0 1 0 0 1005732 2728 10836 0 0 0 0 93 44 0 2 98 0 0 0 0 1005732 2736 10828 0 0 0 44 101 53 0 2 98 0 0 0 0 1005732 2736 10836 0 0 0 0 95 45 0 2 98 0 1 0 0 1005732 2736 10836 0 0 0 0 94 42 0 2 98 0 1 0 0 1005732 2736 10836 0 0 0 0 104 47 0 2 98 0 1 0 0 1005732 2736 10836 0 0 0 0 99 45 0 3 97 0 CPU使用率が少なすぎてTOPコマンドだとよくわからないと思うので、 stableのほうのカーネルでTOPコマンドを確認してきます。 531 名前：520 mailto:sage [2008/04/05(土) 23:06:45 ID:EoLx0o2z] Stableのほうのカーネルで入りました。 uname -rで2.6.18-6-686を確認。 netperf -H XPの1000PTのIPをすると以下の結果です。129Mbps Recv Send Send Socket Socket Message Elapsed Size Size Size Time Throughput bytes bytes bytes secs. 10^6bits/sec 65535 16384 16384 10.01 129.30 netperfしている間にvmstat 1 8 procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu---- r b swpd free buff cache si so bi bo in cs us sy id wa 0 0 0 1003276 3244 12904 0 0 38 9 291 64 0 14 85 1 0 0 0 1003152 3244 12904 0 0 0 0 524 260 0 100 0 0 0 0 0 1003152 3244 12904 0 0 0 0 509 254 0 100 0 0 0 0 0 1003152 3252 12904 0 0 0 48 511 264 0 100 0 0 0 0 0 1003152 3252 12904 0 0 0 0 523 258 0 100 0 0 0 0 0 1003152 3252 12904 0 0 0 0 571 273 0 100 0 0 0 0 0 1003152 3252 12904 0 0 0 0 505 257 0 100 0 0 0 0 0 1003152 3252 12904 0 0 0 0 506 257 0 100 0 0 [netperf中のtopコマンド] Cpu(s): 0.0%us, 0.0%sy, 0.0%ni, 0.0%id, 0.0%wa, 0.0%hi,100.0%si, 0.0%st [netperf終了後のtopコマンド] Cpu(s): 0.0%us, 0.0%sy, 0.0%ni, 99.7%id, 0.0%wa, 0.0%hi, 0.3%si, 0.0%st netperf中はsiが100%になっています。 今度はubuntuからもらったconfigを使って2.6.22-4-686のカーネルで入り直して make oldconfigしてカーネル再構築してきます。 532 名前：520 mailto:sage [2008/04/05(土) 23:17:40 ID:EoLx0o2z] ttp://www.debian.org/distrib/packages ここからlinux-source-2.6.22で検索してみましたが、backportのほうでよいでしょうか？ * etch-backports (devel): Linux kernel source for version 2.6.22 with Debian patches 2.6.22-6~bpo40+2 [backports]: all * lenny (testing) (devel): Linux kernel source for version 2.6.22 with Debian patches 2.6.22-6.lenny1 [security]: all コンパイルやってきます。 533 名前：520 mailto:sage [2008/04/05(土) 23:24:54 ID:EoLx0o2z] aptitude -t etch-backports install linux-source-2.6.22 aptitude install kernel-package tar xvfj /usr/src/linux-source-2.6.22.tar.bz2 cd /usr/src/linux-source-2.6.22 make mrproper cp /usr/src/config-2.6.22-14-server ./.config make oldconfig （質問が２つ出てきました） Fintek F75375S/SP and F75373 (SENSORS_F75375S) [N/m/?] (NEW) Noを選択 VESA VGA graphics support (FB_VESA) [N/y/?] (NEW) Yesを選択 make-kpkg --initrd kernel-image コンパイルしているので時間がかかりそうです。 534 名前：login:Penguin mailto:sage [2008/04/05(土) 23:34:06 ID:z9efKnx6] 両方のifoconfigでMTUの違いありますかね？ 535 名前：520 mailto:sage [2008/04/05(土) 23:39:12 ID:EoLx0o2z] >>534 uname -r で 2.6.22-4-686 で、ifconfig eth0 で MTU:1500 を確認しました。 Ubuntuや2.6.18のほうはコンパイル終わり次第みてみます。 ただ1000PTはジャンボフレームを設定でOFFにしてあります。 536 名前：login:Penguin mailto:sage [2008/04/05(土) 23:55:17 ID:iFHH/vZT] すごい。頑張ってますね。 537 名前：login:Penguin mailto:sage [2008/04/06(日) 00:40:22 ID:vMSBIKVq] nForce4 チップセットで Core 2 Duo の amd64 なんだけど irqbalance 入れない方が安定してるな irqbalance 入れてるとたまに固まる nvidia のディスプレイドライバも怪しい気がするが 根本的な原因究明は俺のスキルじゃ無理そうだ ちなみに noapic は指定していない 538 名前：520 mailto:sage [2008/04/06(日) 00:43:19 ID:s268Zkut] puttyでコマンドうって待ってたら 接続が切れてコンパイル止まっちゃったorz ネットワーク経由でなく解凍からやり直して make-kpkgしましたが、終わるの1時過ぎになりそうです・・ >>536 Ubuntuが速くて、Debianがやたらと遅いのが気になるので なんとかしたいと思っています。 539 名前：login:Penguin mailto:sage [2008/04/06(日) 00:44:54 ID:hsW0OqPy] がんばれよ 向こうから見にきたｗ 540 名前：520 mailto:sage [2008/04/06(日) 02:01:09 ID:s268Zkut] 一時間かかってやっとカーネル構築おわりました。 dpkg -i linux-image-2.6.22_2.6.22-10.00.Custom_i386.deb shutdown -r now ちなみにDebian2.6.22-4-686、2.6.18-6-686、2.6.22（自分でコンパイル）と Ubuntuの2.6.22-14-serverとでMTU:1500、Speed: 1000Mb/s、Duplex: Full を ifconfigとethtoolで確認しています。 Ubuntu-serverのconfigを受け継いだカーネルを選択。 uname -r で2.6.22 netperfする。 TCP STREAM TEST to 192.168.0.7 Recv Send Send Socket Socket Message Elapsed Size Size Size Time Throughput bytes bytes bytes secs. 10^6bits/sec 65535 16384 16384 10.08 20.62 541 名前：520 mailto:sage [2008/04/06(日) 02:02:27 ID:s268Zkut] netperf中のvmstat vmstat 1 8 procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu---- r b swpd free buff cache si so bi bo in cs us sy id wa 0 0 0 991516 2812 21008 0 0 187 22 65 284 2 6 89 4 0 0 0 991524 2812 21016 0 0 0 0 103 45 0 8 92 0 0 0 0 991524 2812 21016 0 0 0 0 96 44 0 4 96 0 1 0 0 991524 2812 21016 0 0 0 0 88 44 0 5 95 0 0 0 0 991524 2812 21016 0 0 0 0 94 43 0 4 96 0 1 0 0 991524 2812 21016 0 0 0 0 90 44 0 4 96 0 1 0 0 991524 2812 21016 0 0 0 0 90 42 0 4 96 0 0 0 0 991524 2812 21016 0 0 0 0 95 45 0 4 96 0 >>539 また道が閉ざされてしまいました… ホントに手も足もでなくなってきちゃったorz 542 名前：520 mailto:sage [2008/04/06(日) 02:09:47 ID:s268Zkut] 自分でコンパイルしたカーネルのドライバは Ubuntuにデフォルトで入っていたバージョンと同じ 7.3.20-k2-NAPIでした。 543 名前：login:Penguin mailto:sage [2008/04/06(日) 02:59:40 ID:YENTNH60] >>542 詳しく中までソースを見てないからなんとも言えないけど、DebianやUbuntuが出している(正規 オフィシャルパッケージとして)からにはバージョンが同じでもまったく本家と同じじゃなくて ソースがちゃんと変えられててDebian仕様、Ubuntu仕様になっている可能性もあると思った。 それと、サーバーなんかでは/procの値を変えてパフォーマンス調整をしてあるディストリも あると聞きました。 www.atmarkit.co.jp/flinux/special/proctune/proctune01a.html www.atmarkit.co.jp/flinux/special/proctune/proctune02a.html でもその速度差だと、差というよりも何かがトラブって足をひっぱいるのかなあ。。。 ログとか見たら何かエラーが10秒おき毎に出ているw　なんてことはないですか? 544 名前：login:Penguin mailto:sage [2008/04/06(日) 03:14:01 ID:klJov381] >>542 Ubuntuのカーネルをバイナリで持ってきて立ち上げてみるとか (できるのか知りませんが...) 545 名前：login:Penguin mailto:sage [2008/04/06(日) 10:35:27 ID:bojfcba7] >>544 Debianなら、 /boot/config-2.6.18-6-amd64 にコンパイル時の設定があるけど、Ubuntuにもそういうのないのかな。 546 名前：544 mailto:sage [2008/04/06(日) 13:20:03 ID:klJov381] >>545 あるよ。質問の主旨は分からないけど。 547 名前：login:Penguin mailto:sage [2008/04/06(日) 13:20:29 ID:hR+Bd5uj] etchでMYSQL+SENNA+TRITONNでdebパッケージ作ってと思ったんだけど なかなかうまくいかね。 MYSQL+SENNA+TRITONNのバックポート版パッケージとかどっかにないすか。 548 名前：520 mailto:sage [2008/04/06(日) 14:01:42 ID:s268Zkut] linux-image-2.6-vserver-686はダメでした。 またドライバのFlowControlを0-3まで試しましたがダメでした。 /var/log 見てみましたがsyslogに kernel: intel_rng: FWH not detected くらいしか見つけられませんでした。 >>543 ディストリビューションでそれぞれパッチを当てていると思いますが スコアに2倍以上の開きがでるのが不思議です。 /procは今から読んでやってみますが、調整で数倍のスコアが出るかどうか… >>544 予期せぬエラーがおきそうで怖いので そのときはおとなしくUbuntu使うことになりそうです。 >>545 cp config-2.6.22-14-server←Ubuntuのやつ ./.config make oldconfig　で自分でコンパイルしたカーネルで入り直しましたがダメでした。 549 名前：520 mailto:sage [2008/04/06(日) 14:28:03 ID:s268Zkut] ttp://www.anarg.jp/~t-tugawa/note/linux/sockbuf.html ここを参考に比較しました。 上のURLの項目でDebian etch 2.6.18-6-686とUbuntu-serverと違うところ を探しましたが、そう大きな違いはないようです。 [Debian etch 2.6.18-6-686] net.ipv4.tcp_mem = 98304　　131072　　196608 net.core.rmem_default = 109568 net.core.wmem_default = 109568 [Ubuntu server] net.ipv4.tcp_mem = 97344　　129792　　194688 net.core.wmem_default = 110592 net.core.rmem_default = 110592 1%くらいしか違ってないのでこれではなさそうですね… 550 名前：login:Penguin mailto:sage [2008/04/06(日) 15:09:37 ID:cS3gOhhQ] NICを変えてみるとか testing、kernel.orgのやつを突っ込んでるみるとか 551 名前：login:Penguin mailto:sage [2008/04/06(日) 15:16:27 ID:JkfI3Q/q] なんでジャンボフレーム使わないの？ 552 名前：login:Penguin mailto:sage [2008/04/06(日) 15:21:34 ID:hsW0OqPy] 使わなくても性能出ている組み合わせがあるからテスト中なんじゃないの？ 553 名前：520 mailto:sage [2008/04/06(日) 16:24:05 ID:s268Zkut] testingは ttp://victoria.acc.umu.se/cdimage/lenny_di_beta1/i386/iso-cd/debian-testing-i386-netinst.iso を使ってやってみましたが、結果は以下のURLにあるように100Mbps出ませんでした。 ttp://pc11.2ch.net/test/read.cgi/hard/1206450081/915 今、kernel.orgから落としてきたものをコンパイルしています。 Ubuntuの2.6.22-14-serverに近いと思われるものです。 ttp://www.kernel.org/pub/linux/kernel/v2.6/linux-2.6.22.14.tar.bz2 Ubuntu-serverからconfigをコピーしてきて、make oldconfig しました。 質問は VESA VGA graphics support (FB_VESA) [N/y/?] (NEW) のみで Yesを選択しました。 ジャンボフレームの使用やNICを変えるのは Ubuntuだと速度が出てDebianだと速度が出ないってことを 認めることになりそうで… Distributionによってこんなにスコアが違うのが 未だに信じられないのですが、やはりダメでしょうか。 kernel.orgで速度がでないようならubuntuのカーネルソースもらって試してみます。 554 名前：login:Penguin mailto:sage [2008/04/06(日) 16:32:51 ID:JkfI3Q/q] >>553 なるほど。とは言うものの個人的には興味がなくなりました 気のすむまで頑張ってください 555 名前：520 mailto:sage [2008/04/06(日) 17:22:55 ID:s268Zkut] kernel.orgから落としてきたlinux-2.6.22.14.tar.bz2ですが、 20.93Mbpsでやはりダメでした。そろそろ諦めたほうがいいですかね。 556 名前：520 mailto:sage [2008/04/06(日) 17:31:38 ID:s268Zkut] Ubuntuのカーネルソースをコンパイルするより、 最初からUbuntu使うほうがいいような気がするので 今回は諦めることにします。 どうもありがとうございました。 557 名前：login:Penguin mailto:sage [2008/04/06(日) 17:33:37 ID:Hn5it4B6] >>553 基本的なことですまんが、Netperfのテスト結果は実際に使う sambaなりftpでデータ転送したときと同じ結果になると考えていいの？ それと、MTUの話が出てたけど、wiresharkなど入れて、 通信中のパケット（サイズ）や、やりとりの様子（パケット間の時間とか） みてみると何かわかったりしない？ 558 名前：login:Penguin mailto:sage [2008/04/06(日) 17:35:08 ID:Hn5it4B6] >それと、MTUの話が出てたけど、wiresharkなど入れて、 >通信中のパケット（サイズ）や、やりとりの様子（パケット間の時間とか） >みてみると何かわかったりしない？ あと、再送とか。 559 名前：520 mailto:sage [2008/04/06(日) 17:41:50 ID:s268Zkut] >>557 ttp://pc11.2ch.net/test/read.cgi/hard/1206453318/152- このスレッドで検証を行っていたときは XPのCristalDiskMarkやSamba経由のFirefilecopyでのテストも併用していましたが、 どちらもNetperf以上のシーケンシャルリード、ライトが出ないので、 Netperfだけで計測することにしました。ftpはわかりません。 wiresharkは初めて聞いたので今から試してみたいと思います。 560 名前：520 mailto:sage [2008/04/06(日) 17:46:41 ID:s268Zkut] aptitude install wireshark man wireshark Wireshark is a GUI network protocol analyzer. X入れないとダメってことですよね 561 名前：520 mailto:sage [2008/04/06(日) 18:30:42 ID:s268Zkut] カーネルだらけで勘違いしそうなので、 Debianはいったん消してデスクトップ環境、ファイルサーバ、標準システムを 選択してインストールし直しました。 netperfは130Mbpsで相変わらずです。 ようやくwiresharkのGUI画面を拝めました。 562 名前：login:Penguin mailto:sage [2008/04/06(日) 18:52:11 ID:iop3SbzP] Debianはstableで、Ubuntuは中身がunstableベースだから、カーネルだけの 問題じゃないかもしれないですなあ。 俺、そこまで使いこなせてないから何ともアドバイスできなくて申し訳ないけど。 563 名前：520 mailto:sage [2008/04/06(日) 18:58:10 ID:s268Zkut] [Capture] - [Interfaces...]でeth0でstartで、 netperfして終わったらstopして結果を見ています。 バイナリデータの中身っぽいやつとか、 マックアドレスが書いてあるのはわかりますが 他の部分が何を意味しているのか調べないとわからないみたいです。 >>562 DebianはtestingのCD焼いて入れてみたら、 余計ダメになっちゃったんですよね・・・ 564 名前：520 mailto:sage [2008/04/06(日) 19:22:54 ID:s268Zkut] 公式のPDFのマニュアルと一緒にみてますがよくわかりませんね… あきらめます、すいません。 565 名前：520 mailto:sage [2008/04/06(日) 19:23:40 ID:s268Zkut] どうもありがとうございました。 元のスレに報告してきます。 566 名前：login:Penguin mailto:sage [2008/04/06(日) 19:33:11 ID:Hn5it4B6] >>563 多量のパケットとるときは、「CaptureOptions」の「Display Options」の 「Update list of packet real time」と「Automatic scroll」はチェックを 外しておいた方がよいかと（それでも、取得漏れはするかも）。 view/TimeDisplayFormatで「Seconds Since Previous Displayed Packet」 を選ぶと、パケットの一覧表示のTimeが前のパケットからの時間に なるんで、そのあたりで時間がかかってるところがないか？ がわかることがあるよ。 Edit/PreferenceのColumnsで、PacketLengthの項目を追加しておくと、 パケットの一覧画面でパケットのサイズが確認しやすい。 LAN内だと、MTU1500が普通なのかな（小さい場合などもあるかも）。 で、大きいデータをTCPで流すときは、MTU1500だと、1500Byteの データのパケットが送付もと->送付先に送られるはずで、 その途中などに小さいパケットが多発しているようだと、 フラグメンテーション（パケット分割）が発生して、CPU負荷が あがってる可能性の確認ができるかも。 netperfがtcp使えるんなら、それで確認できるかも。sambaやftp使う方法も。 567 名前：login:Penguin mailto:sage [2008/04/06(日) 19:36:50 ID:Hn5it4B6] >>566 >LAN内だと、MTU1500が普通なのかな（小さい場合などもあるかも）。 >で、大きいデータをTCPで流すときは、MTU1500だと、1500Byteの >データのパケットが送付もと->送付先に送られるはずで、 >その途中などに小さいパケットが多発しているようだと、 >フラグメンテーション（パケット分割）が発生して、CPU負荷が >あがってる可能性の確認ができるかも。 １点、補足。 逆方向の応答パケットは普通、小さいんで、 送付もと->送付先方向のパケットのサイズが、大きいのと小さいのが 交互に並んでるとかないか？を確認という意味です。 568 名前：login:Penguin mailto:sage [2008/04/06(日) 19:44:26 ID:GIcYrAyH] >>548 > >>543 > ディストリビューションでそれぞれパッチを当てていると思いますが > スコアに2倍以上の開きがでるのが不思議です。 > /procは今から読んでやってみますが、調整で数倍のスコアが出るかどうか… 　特定のドライバなどで修正が入っていたりとかする場合は、不思議では 　ないです。 > >>544 > 予期せぬエラーがおきそうで怖いので > そのときはおとなしくUbuntu使うことになりそうです。 　grub で kernel イメージ切り替えられるでしょうから、テストとしてやってみる 　（kernel なのかそれ以外の要因なのかを切り分ける）のには必要でしょう。 　 569 名前：login:Penguin mailto:sage [2008/04/06(日) 21:23:05 ID:OL5fG8cB] ネットワークがネックなのは確定してるの？ HDD が PIO モードになってないことは確認した？ ちゃんと、細かく原因の切り分けしたほうが良いと思うんだけど。 570 名前：520 mailto:sage [2008/04/06(日) 22:05:15 ID:s268Zkut] Ubuntuにてaptitude search linux-source-2.6.22 で1件ヒット。 aptitude install linux-source-2.6.22して、 /usr/src/に linux-source-2.6.22.tar.bz2 が置かれました。 今までと同じように config-2.6.22-14-serverをコピーして make oldconfigで質問ゼロ。コンパイルしてそっちで入ると uname -r で 2.6.22.9を確認。netperfで794Mbpsを確認。 ubuntuからとってきたlinux-source-2.6.22.tar.bz2をDebianのほうに移したところです。 ubuntuは/boot/grub/menu.lstで ro quiet splash で、Debianはro でした。 splashを知らなかったのでDebianのほうにもいれてみましたが、 文字の映り方が少し変わるだけでnetperfしても変わらないので元に戻しました。 >>566-567 ありがとうございます。今から見てみます。 >>568 UbuntuとDebianとでIntelから落としてきた同じドライバをあててみましたが、 結果はどちらもあまり変わりませんでした。 wireshark終わり次第、ubuntuからとってきたlinux-source-2.6.22.tar.bz2を 解凍してコンパイルしてみたいと思います。 >>569 Debianで hdparm -t /dev/sda で74MB/sec出ました。 571 名前：login:Penguin mailto:sage [2008/04/06(日) 22:12:34 ID:GIcYrAyH] >>570 >UbuntuとDebianとでIntelから落としてきた同じドライバをあててみましたが、 >結果はどちらもあまり変わりませんでした。 　そうではなく、Ubuntu で使っている linux-image パッケージをそのまま　 　使うのではどうか、という話なのですが。 >wireshark終わり次第、ubuntuからとってきたlinux-source-2.6.22.tar.bz2を >解凍してコンパイルしてみたいと思います。 　linux-source パッケージではなく， linux-image パッケージの方を apt-get source 　しないと入れてるカーネルそのものではないのでは？ 572 名前：login:Penguin mailto:sage [2008/04/06(日) 22:28:31 ID:7BPZdrNX] 今のwiresharkは性能面に関してはあてにならんよ 573 名前：520 mailto:sage [2008/04/06(日) 23:15:00 ID:s268Zkut] >>566-567 SambaでXPのマシンから3.5GBのTS動画をFireFileCopyで Debianに移しながら、wiresharkしました。 PacketLength1514ド安定で、FireFileCopy読みで28MB/s出ました。 前に計ったときが15MB/sだったので理由のわからない改善が見られています。 逆に3.5GBのTS動画をFireFilecopyでsamba経由でXPのマシンへ移しました。 転送中に安定して10MB/sであることを確認してからwiresharkしました。 wireshark計測中も10MB/sで、計測STOPボタンを押して数秒たつと16MB/sになりました。 よくわからない現象なので、netperfでも調べてみました。 wiresharkの計測startをしてから2回netperfをすると2回とも300Mbpsでて、 計測stopをしてから2回netperfすると129Mbpsも確認しました。 TS動画をXPのマシンへ移すときのpacket lengthですが、 Protocol NBSS が 4434,4434,2974,4434,4434,4434,4434, 102,2974,4434,4434,4434,4434,2974という感じです。 そして今TS動画がまともに見れるかチェックしたら、まともに見れたので おかしいなと思ってFireFileCopyしましたが、50MB/secでて、 putty経由でnetperfしたら800Mbps近く出ました。 Recv Send Send Socket Socket Message Elapsed Size Size Size Time Throughput bytes bytes bytes secs. 10^6bits/sec 65535 16384 16384 10.01 799.26 574 名前：520 mailto:sage [2008/04/06(日) 23:16:13 ID:s268Zkut] puttyじゃなしに直接やろうと思い、 Debianのマークがくるくる回るスクリーンセーバーみたいなのに なっていたのでマウスを動かしてデスクトップ画面に戻し、 netperfしたら130Mbpsに戻ってしまい、putty経由でも128Mbpsでした。 FireFileCopyをそのあとにしましたがやはり10MB/secに戻ってしまいました。 他に800Mbps出るML115というsambaを入れたサーバーも持っていますが、 そちらのサーバーはユーザー名のフォルダにgnomeとかのフォルダがないので、 間違えていたということはないです。TS動画も今見たらカクカクになってしまいました。 無線EthernetBox--HUB---XPのマシン 　　　　　　　　　　　　　　　　--Debian/Ubuntuのマシン 　　　　　　　　　　　　　　　　 --ML115 XPのマシンにp2pのようなプログラムは入れていませんし、 ML115とDebian/ubuntuのマシンは外部からのポートを割り当てていません。 ほんの１，２分だけやたらとDebianがよかったのが不思議です。 575 名前：520 mailto:sage [2008/04/06(日) 23:22:53 ID:s268Zkut] >>571 linux-image ですね。2.6.22-14-serverのほうだとapt-lineを ubuntuのものに書き直して入れるということでしょうか。 ubuntuでコンパイルしたdebのバイナリでもubuntuでよいスコアが出てきたので、 まずこのdebファイルをDebianに持ってきてdpkg -iで入れてみたいとおもいます。 いまDebianマークが２つ黒い背景にくるくる動いているスクリーンセイバー？になったので netperfしてみましたがスコアがよくなりました。 ./netperf -H 192.168.0.7 TCP STREAM TEST to 192.168.0.7 Recv Send Send Socket Socket Message Elapsed Size Size Size Time Throughput bytes bytes bytes secs. 10^6bits/sec 65535 16384 16384 10.01 755.06 Debianマークがくるくるまわるとスコアがよくなるようです。 なにがなんだかわからなくなってきました。 576 名前：520 mailto:sage [2008/04/06(日) 23:27:33 ID:s268Zkut] Debianマークくるくる画面でnetperfをputty経由で3回行いましたが 3回とも750Mbps以上でました。 マウスを動かしてパスワードを入れてロック解除する画面になってから 実際にはパスワードを入れずにそのままにしてputtyでnetperfしましたが129Mbpsでした。 またしばらく待ってDebianくるくる画面に戻ったのを確認してから puttyでnetperfしましたが798Mbpsでました。 577 名前：520 mailto:sage [2008/04/06(日) 23:32:27 ID:s268Zkut] もう一度マウスを動かしてパスワード要求画面にして putty経由でnetperfで130Mbpsを2回確認し、 くるくる画面に戻ってたのを確認してからputty経由で netperfで750Mbps超えを2回確認しました。 私にとってまさに信じられない現象が 再現性を持って現れてしまったのですが、 何かこれをヒントに打開策ありますでしょうか。 578 名前：520 mailto:sage [2008/04/06(日) 23:40:00 ID:s268Zkut] ロック解除パスワード要求画面の状態で Samba経由でTS動画を再生してカクカクで視聴に耐え難い状態でしたが、 Debianマークくるくる画面になった途端スムーズ再生になったので ほぼ間違いないと思います。 579 名前：login:Penguin mailto:sage [2008/04/06(日) 23:50:13 ID:eZKd6E3a] そろそろUsers MLに投げたほうが良くない？あっちのほうが （悪く言うと）暇で長く付き合ってくれる達人さん多いし。 内容についてはスレのURL貼ればおkだと思う。 580 名前：login:Penguin mailto:sage [2008/04/06(日) 23:51:06 ID:mWlE71XD] ううむ・・・　きっとサーバーはGUIで使ってはいけないんだよw 581 名前：login:Penguin mailto:sage [2008/04/06(日) 23:51:24 ID:eZKd6E3a] ↑と、本日相談事があったのにこの流れで機会を逸した ヘタレが申し上げてみますた 582 名前：520 mailto:sage [2008/04/06(日) 23:56:35 ID:s268Zkut] 日記帳にしちゃってすいません。 DebianでXを入れたのは2年ぶりです。 サーバーは今までCUIで使ってきましたが インストール時にデスクトップ環境、ファイルサーバー、標準システムを選択してGUIでも大丈夫なようにして、 ログインしてしばらく放置してスクリーンセーバー画面になったときに速度がでるようです。 連投しまくって失礼しました。また、どうもありがとうございました。 変態的手法ではありますが無事速度を出す方法を見つけられました。 583 名前：login:Penguin mailto:sage [2008/04/07(月) 00:01:14 ID:9lT5OF9y] X上げてスクリーンセーバ放置が必須の鯖とはｗ 584 名前：login:Penguin mailto:sage [2008/04/07(月) 00:07:22 ID:3ErH3y9u] >>582 これからはCPU性能などが上がって何が何でもCUIって考えも古くなるんでしょうが、安定性という 面においてはやはりGUIだと何かしらの不安要素にはなるのでしょうか。。。 それにしてもおつかれです。GUIの部分でDebianとUbuntuで動きが違うのでしょうね。GUIに関しては 本当に各ディストリの苦労の後というか、工夫というか色々やってますものね。 585 名前：login:Penguin mailto:sage [2008/04/07(月) 00:10:05 ID:jKq37Ec4] 皆さんの独断と偏見でいいので、Debian etchで使う ノーマルPCIでオススメのGbE NICを教えて下さい。 いい加減、今使ってるGbE-PCI2(VT6122)が excessive work at interrupt. を吐きまくるんで、買い換えることにしました。 やっぱり、Intel PRO/1000GTあたりが無難ですかね？ 586 名前：login:Penguin mailto:sage [2008/04/07(月) 00:11:12 ID:9lT5OF9y] はい 587 名前：login:Penguin mailto:sage [2008/04/07(月) 00:17:15 ID:/4yTZprD] >>573 どういう比較をされてるか？よくみえてなく、すんませんが、 >TS動画をXPのマシンへ移すときのpacket lengthですが、 >Protocol NBSS が 4434,4434,2974,4434,4434,4434,4434, >102,2974,4434,4434,4434,4434,2974という感じです。 で、2974 や4434がpacet lengthだとすると、1518byteくらいの パケットサイズが普通なところ、かなり大きなパケットが流れてることに なってるのでしょうかね（jumbo frame など）。 たとえば、高速な通信できてるときは、このサイズも結構大きいとか。 （ubuntuはそういう設定なってるとか？そう単純な話ではない？） ttp://bb.watch.impress.co.jp/cda/bbword/11026.html 588 名前：login:Penguin mailto:sage [2008/04/07(月) 00:18:56 ID:/4yTZprD] >>582 debianの方にxサーバ入れたくない場合、xpにxming入れる方法も。 589 名前：login:Penguin mailto:sage [2008/04/07(月) 00:37:05 ID:/4yTZprD] >>587 >（jumbo frame など）。 ubuntuだと、こんなんがあった（debianでもこのまま使えるのかな？） Setting up Gigabit Networking in Ubuntu Breezy ubuntuforums.org/showthread.php?t=101117 MTU以外もいじってるよう。 590 名前：login:Penguin mailto:sage [2008/04/07(月) 00:40:22 ID:ozJI2Up7] ローカルからサーバーにファイル（450MB程度）をcopyしたのですが ファイル欠損が3回中2回おきました scp、samba両方で 対策とかあるのでしょうか？ 単純に設定の問題？ 591 名前：login:Penguin mailto:sage [2008/04/07(月) 00:47:03 ID:9lT5OF9y] サーバとローカルで使ってるNICは？ ケーブルとかハブとか経路はチェックした？ Windowsの方でネットワークとかレジストリ弄ってない？ 592 名前：login:Penguin mailto:sage [2008/04/07(月) 00:48:19 ID:xpDhcR2q] >>587-589 ethtoolで MTU:1500 はUbuntuでもDebianでも確認したんですが パケットがでかいのは僕も不思議に思っています。 またXPマシンの1000PTはジャンボフレームオフです。 wmem_maxとかは>>549のURLの項目にあったので確認しましたが Debianと同じでした。 xmingも初めて聞いたので説明みてみます。 おもしろそうなツールですね。 >>590 たぶん的外れな意見ですが、メモリでのデータ化けを疑って Memtest86+はどうでしょうか。 593 名前：login:Penguin mailto:sage [2008/04/07(月) 01:04:47 ID:ozJI2Up7] >>591 他のPCの転送は大丈夫でした Windowsでそれはやってません ただ、Debianのサーバーがvmwareですね >>592 ちょっとググって見ました 正直理解できません・・・ メモリテスト ソフトというところは理解できました その状態で使っても大丈夫ですか？ 594 名前：520 mailto:sage [2008/04/07(月) 01:17:16 ID:xpDhcR2q] 省電力モードになってモニタへのスクリーンセーバーが映らなくなると またnetperfが128Mbpsになることも確認できました。 スクリーンセーバーでDebianマークのご加護がないとダメらしいです。 >>593 フロッピーかCDにMemtest86+作って、PCの電源入れたときに フロッピーかCDのほうがHDDより先にブートするようにしておけば勝手にはじまります。 そのまま放っておくとメモリテスト一周目完了、二週目完了とずっと続きます。 たいてい3周（pass3）もすれば大丈夫だと思いますが、 熱でエラー吐くメモリもあるらしいので慎重な人は10pass以上したりします。 1passに30分くらいかかると思います。 中古でメモリをうっぱらうときはこういうのでメモリがまともかどうかチェックします。 エラーは赤く表示されるのでわかりやすいですが、 USB機器を抜き差しするとエラーが出るらしいのでさわらない方がいいとおもいます。 595 名前：login:Penguin mailto:sage [2008/04/07(月) 01:19:13 ID:gcflnUoa] MEMTESTならGRUBからアレすればいいんじゃない。 詳しくはぐぐれ。 596 名前：login:Penguin mailto:sage [2008/04/07(月) 02:10:07 ID:ozJI2Up7] >>594 了解しました 試してみます >>595 ググっときます 597 名前：login:Penguin mailto:sage [2008/04/07(月) 07:09:52 ID:W66GttVr] >>520 パワーマネジメントがらみの不具合らしいけれど関係ないか知らん? ttp://e1000.sourceforge.net/doku.php?id=known_issues#v_l_e_tx_unit_hang_messages 598 名前：login:Penguin mailto:sage [2008/04/07(月) 09:15:58 ID:PgVaTJES] >>594,595,596 memtest86だかmemtest86+のパッケージを入れたら、 勝手にgrubのメニューに追加されたな。 いつのバージョンからそうなんだろう。 599 名前：login:Penguin mailto:sage [2008/04/07(月) 13:16:17 ID:eOjTWBra] >>585 現在 Linux で使うにはそれが圧倒的におすすめでしょうな。 600 名前：login:Penguin mailto:sage [2008/04/07(月) 13:25:30 ID:eOjTWBra] >>520 まとめてくれ a. 2.6.18(debian) 低負荷時にネットワーク性能が落ちる b. 2.6.22(vanilla, ubuntu の config を流用) 低負荷時にネットワーク性能が落ちる c. 2.6.22(ubuntu) 低負荷時でもネットワーク性能が落ちない でおkなのか？ ということは b. と c. の diff を調べろってことになるんだろ？ 601 名前：login:Penguin mailto:sage [2008/04/07(月) 13:28:23 ID:QKbFG0Ov] 優秀な人材はUbuntuへ デスクトップはUbuntu、 鯖でもUbuntuな時代になりそう 保守期間長いし、有料サポートもあるし、 debian・・ 602 名前：login:Penguin mailto:sage [2008/04/07(月) 13:57:48 ID:eOjTWBra] まあ相対的には debian の存在感は縮小しつつあるのは否めない。 でもカスタマイズのしがいはまだ debian のほうに分があると思っている。 マイナーなパッケージは ubuntu にお下がりをあげている側だし、 マイナーなアーキテクチャをサポートしていなるし、 マイナーなロケール (euc-jp) とかにもすぐに変えられる。 603 名前：login:Penguin mailto:sage [2008/04/07(月) 13:59:42 ID:eOjTWBra] マイナー並べようと 3 つめで苦労したのは秘密 ubuntu でも /var/lib/locales/supported.d/local と /etc/environment を 弄って locale-gen だかすればできるかもしれん。 ubuntu 初心者なのであまり知らんが。 604 名前：login:Penguin mailto:sage [2008/04/07(月) 14:52:49 ID:3ErH3y9u] Ubuntu使ってて、Debianを入れてみようかと思案中。 両者は似ているようでまったくもって違う方向に進化をしていくらしい。読んだ記事をうろ覚えだけど Ubuntuは益々ユーザーフレンドリーになる、Debianはユーザーフレンドリーになりつつも必ずその場 その場で処理が選べるようになっている。その選べる内容は初心者からベテランまでカバーする。 よって初心者はその意味が解らないからその機能は使わないで飛ばしてしまうかもしれない、けど もし知りたければ常にそれの意味が解るように説明が見られるようになっている。 ほとんどのディストリがより使いやすくと下手をしたらWINDOWSの様になっていくと言っても過言でない 中、Debianだけは独自の進化、言い換えれば一番使用者を馬鹿にしていない作りになる方向へ進化する。 て書いてあった感じだけど、そうなの? 605 名前：login:Penguin mailto:sage [2008/04/07(月) 15:45:48 ID:EvjLGDpr] デスクトップはUbuntu サーバ(玄箱)はDebian PDA(zaurus)はchrootしてDebian 606 名前：520 mailto:sage [2008/04/07(月) 16:11:56 ID:xpDhcR2q] >>597 ethtool -e eth0 で 0x001e が df であることを確認しました。 パッチが必要かどうかをスクリプトが自動で判断してくれるらしいので あててみましたがやはり不要のようです。 # bash fixeep-82573-dspd.sh eth0 eth0: is a "82573L Gigabit Ethernet Controller" This fixup is applicable to your hardware Your eeprom is up to date, no changes were made memtest86+は最近versionあがって 対応ハードウェアが増えたかな？と思ったので。 >>600 以下CPUはceleron420でnetperfの話です。 a はCPU使用率が足を引っ張って速度が遅い感じ。 b はCPUをほとんど使ってなく、速度はさらにカス。 c はCPUにほとんど使ってないが好成績。 実際にsambaで転送してのCPU負荷もaとcについては計ってはいますが、 たしかbはnetperfがカスだった段階でsambaでの検証不要とした覚えがあり、 a,b,cでのsambaを使った比較は厳密にはできません。 また、HPのML115というサーバーはAthlon64 3500+にBroadcomチップですが etchいれて好成績でした。 ほんとにカーネルの差なのか確定はしていない気もします。 Ubuntuで落としたlinux-source-2.6.22をUbuntuでコンパイルして Ubuntuのほうに入れてそっちで入っても成績よかったんで、 いまからDebianのほうにdebファイルを移していれてみます。 607 名前：login:Penguin mailto:sage [2008/04/07(月) 17:05:53 ID:yCpjsHpx] >>605 サーバーはdebianって言ってられるのも今のうちだろうなあ Ubuntuサーバーでも、鯖用に最小構成に出来るし、LAMPの導入も簡単だし、保守期間が長いし 企業なら有償サポートも嬉しいだろうし 608 名前：login:Penguin mailto:sage [2008/04/07(月) 17:28:56 ID:zHPVBtME] >>607 保守期間が長いのは一部のパッケージだけでしょ？ 609 名前：login:Penguin mailto:sage [2008/04/07(月) 17:54:40 ID:rzIm2zQV] 通常のUbuntuを使う場合、安定したシステムを使えるのは、一年のうち、三分の一くらいかな。 バージョンがあがるとしばらくは、sid状態が続く。 ubuntuの正体は、debianをただ単に設定しただけ（多少はオリジナルもあるが）なので、Ubuntuから設定ファイルを持ってきて、debianを設定するのが良いみたい。 色々と知識もできるし、意味もよく分かる。 というわけで、Ubuntuにも存在価値はあるような気がする。 610 名前：login:Penguin [2008/04/07(月) 18:00:49 ID:hSdf6GtY] 初心者・入門者にはubuntu勧める 少し慣れたらDebian GNU/Linux勧める 理由はみんなもわかるだろ..... 611 名前：login:Penguin mailto:sage [2008/04/07(月) 18:01:30 ID:zHPVBtME] >>609 何が言いたいのか支離滅裂

---

---

[ 続きを読む ] / [ 携帯版 ]

read.cgi ver5.27 [feat.BBS2 +1.6] / e.0.2 (02/09/03) / eucaly.net products.
担当:undef