シェルスクリプト総合 その25

1 名前：名無しさん＠お腹いっぱい。 mailto:sageteoff [2015/08/14(金) 23:42:01.51 .net] シェルスクリプトの総合スレです。 □お約束 ・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。 　bash/zsh/ksh/ashなどに依存する場合は明示しましょう。 　Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。 　FreeBSDユーザは/bin/shの正体がashなので注意。 　v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。 　 src.illumos.org/source/xref/illumos-gate/usr/src/cmd/sh/ 　 heirloom.sourceforge.net/sh.html ・csh/tcshのシェルスクリプトは推奨されません。 　(理由は「csh-whynot」でググれ) ・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。 　manや参考リンクを見ましょう。 　aproposないしはman -kでそれらしい単語による簡単な検索もできます。 ・シェルで使えるワイルドカード等は正規表現ではありません。 　正規表現の話題はスレ違い(正規表現スレへ) ・シェルスクリプトのことをシェルってゆーな □初心者へのアドバイス: ・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも 　awkまたはperlの方が適した処理にはそちらを使いましょう。 ・知らないコマンドが出てきたらmanを引きましょう。 ・思い通りに動かないときは、まずは sh -x でトレースしましょう。 □回答者への注意事項: ・シェルスクリプトでの処理方法を質問しているのに、よくわからずに 　「そういうのはperl使いましょう」と回答するのはやめましょう。 　安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。 前スレ シェルスクリプト総合 その24 peace.2ch.net/test/read.cgi/unix/1415634843/ 70 名前：名無しさん＠お腹いっぱい。 [2015/10/16(金) 13:16:19.20 .net] 任意のキーボード・ショートカットを突然入力すると、任意のスクリプトを実行するような技はありますか。 例えば、特定のアプリケーションをアクティブにするスクリプトを書いたとして、それを Ctrl＋Alt＋Gで実行してGoogleChromeをアクティブにするとか、そういう事です。 Alt+Tabで一つ一つ切り替えるのはうんざりなんですよね。 スクリプト自体はできてるんですが、それをショートカットと結びつける技が分かりません。 71 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/16(金) 13:35:52.55 .net] WMとかDEの機能使った方がいいんじゃね シェルスクリプトの話ではない 72 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/16(金) 13:41:08.99 .net] 「linux キーボードショートカット カスタマイズ」でぐぐれ /apps/metacity/global_keybindings/panel_run_dialogとかって情報はすぐ出てくる 73 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/16(金) 16:30:40.14 .net] キーバインド割り当てかaliasを作るかじゃない？ 74 名前：名無しさん＠お腹いっぱい。 [2015/10/18(日) 03:08:01.82 .net] だな w3mなら .w3m/keymap xmonadなら .xmonad/xmonad.hs に書くような内容 75 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/18(日) 03:29:42.19 .net] busyboxでunicode変換ってどうする？ 76 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/19(月) 12:52:16.45 .net] busybox sh に限らず、iconv とかuconvとか入れて使うんじゃない？ 77 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/19(月) 14:00:50.57 .net] すみませんが詳しい方のみ回答をお願いします 78 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/19(月) 14:28:46.62 .net] unicodeの何を？何へ？何から？変換するのかもうちょっと具体的に書かないと応える気にならない 79 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/19(月) 15:27:19.76 .net] 詳しくないのはどっちだよ そんなんだから周囲に教えてくれる人が居なくて 2chで質問するハメになるんだよ 80 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/20(火) 00:06:45.98 .net] 只のコピペの別人にキレてどうするよ。 わざわざbusybox縛りを入れて珍回答を期待してるのに普通の方法を答えるのもまあ2chらしいが。 っていうかnkfじゃないのな。 81 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/20(火) 07:22:32.22 .net] 以下のようなテキストファイルがあるとして （記載のアルファベットは例であり数字だったりマルチバイト文字だったりします） AAAAAAAAA BBBB CCCCCCCCCC DDDDDDDDDDD EEEEEEEEEEE 各1行を2行に増やすことってできますか？ AAAAAAAAA AAAAAAAAA BBBB BBBB CCCCCCCCCC CCCCCCCCCC DDDDDDDDDDD DDDDDDDDDDD EEEEEEEEEEE EEEEEEEEEEE ループで1行ずつ読んで2行にして出力するくらいしか思いつかなかったのですが パイプを使ってシンプルにできたりしませんか？ 82 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/20(火) 07:41:49.44 .net] >>78 sed p foo.txt 83 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/20(火) 21:45:48.66 .net] >>79 ありがとうございます こんなに簡単にできちゃった・・・ とりあえずpコマンド調べてみて 変換しない指定で返還前と変換後の2行が出力されるからこうなると理解しました 84 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/20(火) 23:06:19.80 .net] coolだよね 85 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/21(水) 00:43:12.91 .net] >>78を元に戻す方法は？ 86 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/21(水) 00:49:57.21 .net] uniq 87 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/21(水) 01:33:11.68 .net] 4行並んだら破綻 88 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/21(水) 01:46:20.53 .net] awk NR%2 89 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/21(水) 01:56:17.21 .net] あえてsedで sed 'N; s/.*\n//' 90 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/21(水) 06:13:41.20 .net] GNU sed 限定 sed -n 1~2p 91 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/21(水) 06:38:20.24 .net] sed 'n;d' だけでいいのにｗ 92 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/21(水) 07:02:03.89 .net] 尊い 93 名前：名無しさん＠お腹いっぱい。 [2015/10/22(木) 08:26:25.71 .net] そうだな 現代でも使える場面のあるsedは凄い 94 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/22(木) 12:24:50.15 .net] sedでutfの変換テーブル書いたらどの位の速度で動くものだろうか？ 95 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/22(木) 14:32:56.99 .net] pdfファイルやExcelファイルを文字検索したいのですが スマートな方法はありませんか？ ファイル変換しないといけないでしょうか？ 96 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/22(木) 15:27:18.78 .net] 変換しないとだめです pdftotext あたりで標準出力に吐かせて grep とか 97 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/22(木) 15:55:01.58 .net] こんな感じになりました pdftotext hoge.pdf - | grep aaa pdftotextでググったらこのページが ttp://www.clear-code.com/blog/2010/8/2.html Excelはssconvertを使えばいいようですね 98 名前：名無しさん＠お腹いっぱい。 [2015/10/22(木) 22:52:20.38 .net] ☆ 日本の核武装は早急に必須ですわ。☆ 総務省の『憲法改正国民投票法』、でググってみてください。 日本国民の皆様方、2016年7月の『第24回 参議院選挙』で、日本人の悲願である 改憲の成就が決まります。皆様方、必ず投票に自ら足を運んでください。お願い致します。 99 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/27(火) 08:43:35.49 .net] cat file|した方がいいことも有るぞハゲ ってことかな？ 大きなテキストファイルをawkで処理するときにcatで投げ込むのと、ファイル読み込みするのどっちが速いか比較 - カメニッキ tapira.hatenablog.com/entry/2015/07/22/214419 大きなテキストファイルをawkで処理するときにcatで投げ込むと速い理由 - ablog d.hatena.ne.jp/yohei-a/20150728/1438099752 100 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/27(火) 09:02:14.04 .net] >>96 それって Linux OS でマルチコアで出力先が SSD の場合にだけ 速くなるかもしれないってオチだったような 101 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/27(火) 11:16:32.98 .net] でも実際速くなったんでしょ？ 102 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/27(火) 12:25:26.58 .net] 今の時代マルチコアしかないような気がするんだけど・・・ 103 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/27(火) 12:54:33.20 .net] 今の時代Linuxしかないような気がするんだけど・・・ 今の時代SSDしかないような気がするんだけど・・・ 104 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/27(火) 17:55:11.78 .net] >>98 他の環境だとリダイレクトの方が速かったよ 105 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/27(火) 18:45:52.06 .net] それは反論になってない 106 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/27(火) 23:01:18.38 .net] C言語で書いたほうが早かったよ 107 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/27(火) 23:24:17.69 .net] >>103 その書いたやつを見せてください。ぜひとも参考にしたいです 108 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 05:47:50.83 .net] system("cat file | command"); 109 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 06:27:57.97 .net] 同じスクリプトでもcatを使うと電解コンデンサがライトアップしやすいよｗ 110 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 07:30:41.83 .net] windowsでいうINIファイルのような、設定情報を格納したファイルを作ろうとしています。 入出力パスとか、オプションのon/off(1か0か)などを書いておき、その設定ファイルを シェルスクリプト上から読み込んで、処理内容に反映して実行することを想定しています こういった処理をする場合、業界の一般的な様式みたいな決まりってありますか。 また、いろいろな実装方法が考えられますが、どのようなコマンドで実現するのが適切でしょうか。 busyboxに入ってそうなコマンドが一通り動ける環境を想定しています。 111 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 08:21:07.49 .net] >>107 あなたはどんな業界の人ですか？ 112 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 10:38:06.95 .net] 設定ファイル自体をシェルスクリプトにして . しちゃうのが楽じゃね RedHat系なら /etc/sysconfig/ 以下、Debian系なら /etc/default/ 以下を参考に 113 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 11:48:34.73 .net] またbusyboxの人か 114 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 11:54:18.98 .net] こうするのが楽とかじゃなくて業界標準でお願いします 115 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 12:20:06.26 .net] 普通にINIファイル形式でいい シェルスクリプトから呼べば（実行すれは）環境変数として設定されるようになる 116 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 12:21:45.13 .net] ポイントは読み込むんじゃなくて実行させるってこと readしてexportするんじゃなくてそのまま実行して環境変数に設定する 117 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 13:28:25.07 .net] 実行はしたくないです。インジェクションされます。。 118 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 13:35:42.31 .net] セキュリティが心配なら標準とは対極の方向に向かうべきだろアホか 119 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 15:00:41.96 .net] >>109 >>112 >>113 107です、ありがとうございました。ファイルを読ませることしか頭にありませんでしたので、聞いてよかったです。 その方式で、スクリプトの冒頭で設定を担当するコードを実行するようにします。 120 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 22:16:32.33 .net] 質問してるくせに偉そうだな 121 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/28(水) 23:07:56.69 .net] >>117 具体的にどこが偉そうなの？どこがカンに障るの？ 122 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/29(木) 04:20:02.34 .net] 教えを乞うてるくせにお腹いっぱいなのが気にくわない。 123 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/29(木) 06:23:24.26 .net] unixの管理をしています。 ユーザーはソフトのインストール禁止ですが、 最近、ユーザーでも自分のホームフォルダーにソフトをコピーし、 Ｘ権限をすることによってソフトが実行できてしまうことが判明しました。 これはＯＳのセキュリティーボールではないのでしょうか？ ユーザーのフォルダーではたとえＸ権限がされていても 実行できないようなおすすめのunixって何ですか？ 必要ならカーネルにバッチを当てる方法も、やもうえません。 124 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/29(木) 07:39:00.78 .net] >>119 お腹いっぱいとは？ 125 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/29(木) 08:29:26.09 .net] 名前じゃね 126 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/29(木) 09:02:26.07 .net] シェルスクリプトっていう性質上、ある程度仕方ない面もあるけども 最近は余りにもスレ違いな話題が多くないか？ 127 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/29(木) 10:15:07.66 .net] スレ違いでも板違いでもかまってもらえるからな 128 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/29(木) 11:15:37.67 .net] >>120 お前脳みそついてなくてUnix使ってんのか？ Windowsでも使ってろよ 希望してることができるから 129 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/29(木) 12:04:46.30 .net] コピペに釣られんな 130 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/29(木) 22:18:02.02 .net] >>123 >>123 131 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/10/30(金) 11:01:24.94 .net] >>124 軌道修正したレスができるなら相手して構わないんだけど、自演が疑われるような受け売り回答って不要だよな。 132 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/01(日) 13:31:00.57 .net] ${@:+"$@"}という変数の記法がわかりません たとえば/usr/bin/sensible-browserでは /usr/bin/x-www-browser ${URL:+"$URL"} のように使われています なぜこう書くのかヒントをいただけたら… 133 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/01(日) 14:16:24.02 .net] man bash Parameter Expansion の項（日本語訳では パラメータの展開 の項） を見るよろし。てか� 134 名前：ｴがしょっちゅう見直すとこだわソレｗ [] [ここ壊れてます] 135 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/02(月) 12:13:01.41 .net] ポータビリティーの話（　"$@"; が 何も無し にならないで、""; と解釈されてしまう対策の事　）が参考になるかな What does ${1+"$@"} mean? www.in-ulm.de/~mascheck/various/bourne_args/ Autoconf www.geocities.jp/fut_nis/html/autoconf-ja/Shell-Substitutions.html#Shell%20Substitutions # 例えば、 $URL が未定義や、ヌルなら /usr/bin/x-www-browser "$URL" # は、この様な意味になるが /usr/bin/x-www-browser "" /usr/bin/x-www-browser ${URL:+"$URL"} # は、こうなる /usr/bin/x-www-browser test.sh 引数の数に違いが出る（bash の方で理解しやすいので #!/bin/bash で) #!/bin/bash -vx foo="hoge" bar="" bash -vxc 'echo "$#, " "$@"' "dummy" "$foo" bash -vxc 'echo "$#, " "$@"' "dummy" "$bar" bash -vxc 'echo "$#, " "$@"' "dummy" "$baz" bash -vxc 'echo "$#, " "$@"' "dummy" ${bar:+"$bar"} bash -vxc 'echo "$#, " "$@"' "dummy" ${baz:+"$baz"} 136 名前：129 mailto:sage [2015/11/02(月) 14:09:15.67 .net] >>130 アドバイスありがとうございます。自分もよくそこ見ます 環境はlinuxのbashなのですが、"$@"と書いておけば ${@:+"$@"}と結果的に同じになるはずなのに わざわざ後者のように書くのはどうしてかなと疑問に思った次第です 137 名前：129 mailto:sage [2015/11/02(月) 14:12:02.34 .net] >>131 有益な情報ありがとうございます なるほど"$@"が""になってしまうことがあるためなのですね 違いを確認するためのスクリプトまで用意していただいて感謝です おかげで長い間疑問だったことが氷解しました /usr/bin/sensible-browserは、#!/bin/shですし ポータビリティを十分に考えて作られているわけですね なぜAdobeのacroreadなどでも使われているか納得できました とっても勉強になりました 138 名前：131 mailto:sage [2015/11/03(火) 18:32:53.39 .net] >>133 > ポータビリティを十分に考えて作られているわけですね /usr/bin/sensible-browser は、Debian 系で使われているスクリプトのようなので dash で動けば十分でしょう ポータビリティのサイトは参考になるかと貼りましたが、${1+"$@"} と違って /usr/bin/x-www-browser ${URL:+"$URL"} の場合、関係無いかと思います 念の為 dash 等で内容がヌルの場合に、"$URL" と、 "$@" で展開の結果に違いが有る事を、強調しておきます LANG=C PAGER='less -p "Special Parameters"' man dash > @　　　Expands to the positional　...略... If there > are no positional parameters, the expansion of @ generates > zero arguments, even when @ is double-quoted. 139 名前：名無しさん＠お腹いっぱい。 [2015/11/04(水) 10:19:47.91 .net] ADB shellを使ってるのですが.shで保存したadbのスクリプトを順番に実行させることって可能ですか？ 例えばダブルクリックした時点で1.shが動いて〜10秒後に2.shを動かして〜というような感じにしたいです。 お力貸していただけると幸いです。 140 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/04(水) 12:50:56.08 .net] ADB shellを実行するのがWindowsかlinuxによってバッチかシェルスクリプトかでわかれるが、 最初に/data/local/tmpあたりに転送して、chmodして、それをwait含めて実機で実行するのが 良いんじゃないの。 何をやりたいのか書いてないのでアレだが、操作する側で10秒開けるのか、実機で10秒ウェイトするのか。 あと、なぜ10秒あける必要があるのか、10秒後までに実行した端末で何が起きているのか、 その判定は必要なのか、などを考える必要があるし、 さらには泥のことをよく理解できてないオッサンたちが、こういう話題は、ここではスレチじゃね？ と煽ってくるので、飛来するオッサンたちを黙らせる技術も必要とされる 141 名前：名無しさん＠お腹いっぱい。 [2015/11/04(水) 13:12:49.86 .net] すみません　記述が足りてないようでした。 現在はwindowsでbatファイルを利用してuwscというフリーソフトを使って1.batを起動させて〜10秒後に2.batといった具合にやってます。 最近linuxでも開発を始めたいと思い同じようなことがしたいです。 シェルスクリプトでwindowsでやってるuwscのような制御ができないかなぁと思って質問させていただきました。 そんなめんどくさいことするよりlinuxならこのフリーソフト使って制御しとけみたいなのがあれば 教えていだだけると幸いです。 142 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/04(水) 13:15:27.82 .net] ＞uwscというフリーソフトを使って1.batを起動させて〜10秒後に2.batといった具合に この10秒後に、という処理自体をbatでやればいいんじゃないの？ なぜuwscを挟む必要があるの？ 143 名前：名無しさん＠お腹いっぱい。 [2015/11/04(水) 13:29:28.23 .net] >>138 おっしゃる通りなのですがcallを使って次のbatを呼び出すことよりも先にツールを使って呼び出すことを覚えてしまったもので・・・ 独学でやってるうえに無知な状態からまだ２ヶ月くらいしか経ってないものでこのスレのレベルの方からしたら程度が低い質問かもしれませんが他に聞けるような環境がないもので；； 144 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/04(水) 13:33:00.98 .net] あとは、何をやりたいのか具体的に書くしか ちなみにゲームの自動制御とか、その手の話だったら俺は降りる 145 名前：飛来したオバハン mailto:sage [2015/11/04(水) 13:33:27.01 .net] アンタ泥とかwindowsとかイタチじゃないの？ 146 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/04(水) 17:24:19.98 .net] PATH の dirctory に無いスクリプトは、相対、絶対パスで起動するか、PATH に追加する 例えばカレントディレクトリのスクリプトは、 ./script.sh で起動出来る ダブルクリックで起動するには、 .desktop ファイル作る #!/bin/sh ./1.sh sleep 10 ../2.sh /home/username/bin/3.sh PATH="/home/username/bin:$PATH" 4.sh PATH=".:$PATH" 1.sh 147 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/04(水) 17:24:50.70 .net] 又は、android 上で launcher.sh を書いておいて起動する それをアプリから起動するなら、GScript Lite とか使うんや。よー知らんけど #!/system/bin/sh ./1.sh sleep 10 ./2.sh ついで @echo off call 1.bat ping localhost -n 11 > nul call 2.bat 148 名前：名無しさん＠お腹いっぱい。 [2015/11/04(水) 21:13:41.29 .net] みなさんありがとうございました。すこし足がかりが得られました。 やっぱりlinuxのほうが軽くて動作も安定してる感じなのでこれからはlinux中心にデバッグを行っていけたらと思います。 149 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/08(日) 19:54:14.49 .net] echoで\tを出力してるんだけど raspbianだとTABに置き換わってるんだけど Sientific Linuxだと\tのままなんだけど何でかわかる？ シェルスクリプトをそのまま持っていって実行したら そんな感じになってた・・・ 150 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/08(日) 20:08:08.87 .net] シェルスクリプトと違って、シェルの話だと思う echo の違いではない？ man dash echo [-n] args... If any of the following sequences of characters is encountered during output, the sequence is not output. Instead, the specified action is performed: man bash echo [-neE] [arg ...] -e オプションを指定した場合、以下に示す、バックスラッシュの エスケープ文字が解釈されるようになります。 151 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/08(日) 20:14:18.70 .net] シェルスクリプトのポータビリティーの話とも言えるか... 訂正 152 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/08(日) 20:37:50.28 .net] ありがとうございます 確か実装したときにecho -eオプションは使っていたのですが raspbianの/bin/shで実行すると echo -e "test\ttest" が -e test test になってしまっていろいろ試した挙句 -eいらないじゃんってことになったのを思い出しました � 153 名前：｡は双方とも/bin/shを使っているのですが 上記のようになるのはraspbianの/bin/shだけで /bin/bashを使うと双方とも期待したとおりの結果になりました どこかのデストリのいずれかのシェルが 実は利用者が意識してるもの（パスが示すもの）と違うというのを 見た覚えがあるのですがraspbianの/bin/shだったかは思い出せません 継続して調べてみますが取り急ぎありがとうございました [] [ここ壊れてます] 154 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/08(日) 22:14:22.18 .net] echo じゃなくて printf 使うとか printf 'TAB\tTAB\n' # 少なくとも dash/bash/zsh では printf は shell の builtin function そういや、ファイルの中に -n だけの行があって、 cat hoge.txt | while IFS= read str do echo "$str" done ってしたらその行が出力されなくてハマったことがあった… 155 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/09(月) 12:53:41.77 .net] >>149 どうやって回避したの？参考までに知りたい 156 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/09(月) 18:25:32.86 .net] え？ 単に printf '%s\n' "$str" ってしただけだよ 157 名前：名無しさん＠お腹いっぱい。 [2015/11/09(月) 22:29:31.56 .net] echoはposixでその動作が決まってるわけじゃないから 移植性重視ならprintf安定 とorilyに書いてあった 158 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/11(水) 18:21:45.18 .net] 1週間位試行錯誤するもうまくいかないから、ここで必要質問しようと思ったら 単にファイル名にスペースが入っていただけだった 風俗行って頭をすっきりしてます 159 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/11(水) 19:33:08.21 .net] それは書き込まなくてよかったんじゃないか 160 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 14:52:38.27 .net] 複数ファイルのダウンロードアルゴリズムについて教えてください 今シェルスクリプトを作ってテキストファイルに書かれてある URLからファイルをダウンロードしています 早くダウンロードしたいため多重（多重度は回線の帯域などを考慮して3〜15で任意で設定）で ダウンロードしていますが全体の終了時間を早めたいため ファイルサイズでソートして大きいファイルからダウンロードしています ただこの方法だと初めの方に大きいファイルばかりダウンロードするため 成果が上がってるように見えません またもっと効率のよい方法があるのではとも思っています お勧めのダウンロード順（を求めるアルゴリズム）があれば教えてください なおちょっとしたシェルスクリプトは書いていますが やってることは以下のコマンドと大差はありません xargs -P 10 -n 1 wget -nv -c < downlist.txt 私のほうで考えられるのはたとえば10多重の場合 大きいものからを5多重で 小さいものからを5多重で 順にダウンロードすることくらいでした でもこの方法だと全体のダウンロード完了が 遅くなる可能性があると思います 161 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 15:11:44.91 .net] なんで大きいファイルから始めると全体の終了時間が早くなるの？ 162 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 15:27:23.69 .net] ちょっとうまく説明できませんが 大きなファイルは時間がかかるので 複数ファイルを多重でダウンロードしても 最長時間になる可能性があるためです たとえば100MB、50MB、40MB、30MB、10MBのファイルを2多重でダウンロードするとき 以下のようにすればそれぞれ平均化されるため 1つめ：100MB→10MB 2つめ：50MB→40MB→30MB なお以下のようになるのは最悪なパターンだと思います。 1つめ：100MB→50MB 2つめ：40MB→30MB→10MB 全体の終了時間が短くなる想定です また当然ダウンロード速度は一定ではないため 特定のファイルに時間がかかった場合 小さなサイズのファイルだと調整がしやすいというのもあります 1つめ：100MB→30MB→10MB 2つめ：50MB（時間がかかった）→40MB 実際はスクリプト内でpsコマンドで多重度は監視しており whileでループしながらダウンロードしているため そのあたりの調整は楽にやれます 163 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 15:28:52.53 .net] 例えば他のファイル全部の合計より大きなファイルが一つある場合、 この大きなファイルのダウンロードを最初からスタートさせれば 全体ダウンロード時間はこのファイルのダウンロード時間になるけど、 この大きなファイルのダウンロード開始を遅らせると 全体ダウンロード時間もそれだけ長くなることになるってことだよね 164 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 15:31:56.60 .net] >>158 そのとおりです （大きなファイルはクリティカルパスになりえるってことです） 165 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 16:43:29.68 .net] >>155 > ただこの方法だと初めの方に大きいファイルばかりダウンロードするため > 成果が上がってるように見えません この場合の成果とはより短い時間で完了することであるわけだが 大きいファイルを先に転送すると短い時間で済む筈だったが実際には逆で より長い時間掛かってしまうから何とかしたい、ということですか？ 166 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 17:51:07.33 .net] 俺の予想では、プログレスバー的なのを表示したいけど、 大きいファイルが先だとはじめはなかなか進まないってことじゃないかな。 どんなコマンドでダウンロードしてるか知らないけど、 たいてい転送バイト数を出力できるはずだから、 頑張って出力を解析して計算すればいいかと。 あるいは手元のファイルサイズを監視したほうが早いか。 167 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 17:59:30.65 .net] でも質問はより効率のよダウンロード順（を求めるアルゴリズムだぜ 168 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 18:33:07.59 .net] max procが10なら、大きいファイルから10個を多重でwgetする。 その時、残りのファイルのダウンロード順はまだ決めない。 その10個のwgetのうち、どれか先に終了したもの(ファイルサイズ最小のもののことが多いがネット環境によりそうとは限らない) について、その時点で残りのファイルのうちサイズ最大のものを割り当てて ダウンロードさせる。 以下、残りファイルがなくなるまで繰り返し。 169 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 20:25:10.34 .net] 厳密な重さのわからないナップサック問題って感じだな。 ダウンロード時間があらかじめ分かっていたとしてもとても難しい問題。 数学苦手なのでテキトーに聞き流してもらえると助かるが、多分 NP hard って呼ばれる問題と 同等で、全通り試さないと厳密解は得られないんじゃね？ 現実的には >>163 の言う貪欲法(greedy algorithm)的な？アルゴリズムが一番だろうな。 170 名前：名無しさん＠お腹いっぱい。 mailto:sage [2015/11/12(木) 22:52:33.75 .net] 複数のファイルが全部同じサーバーにあるのかとか、別々だとしても 自分側のバンド使い切っていないかとか、もっと条件詰めないと そもそも議論出来ない気がするけど。

---

---

[ 続きを読む ] / [ 携帯版 ]

read.cgi ver5.27 [feat.BBS2 +1.6] / e.0.2 (02/09/03) / eucaly.net products.
担当:undef