２ちゃん画像落としまくりスクリプト

1 名前：1 [01/10/23 19:39.net] ２ちゃんねるに貼ってある画像リンクを追い、 jpgをかき集めるスクリプトを作ってみました。 www.ninnin.net/ ※perlとwgetが必要です。 ※Windows,Macでは動きません。 202 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/08 23:16.net] >>201 今 -nc消したやつをうｐしたよ。 だけど、-nc消したらなんだか速度が遅くなったような・・・ あと、日時がバグってるのはアーカイバーがおかしいらしいことが分かったよ。 だからｷﾆｼﾅｰｲ >datファイルを総ざらいするのも極力避けた方がいいかと思ってきた。 なるほど。一応スレのレス数見て更新されてるか確認してから各スレの差分をダウソ するようにしてるけど。もっと負荷を減らす方法ないでつかね？ cronで回すなら、10秒おきに更新されてるスレを1スレずつ巡回みたいなことも考えられるけど。 >-ncはすでにファイルが存在したら、ダウンロードしないので、ダウンロードされていない可能性は？ 一応ダウンロードされてるようだが・・・謎。 まぁ直したし。 203 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/08 23:19.net] >>202 速度で判断するより、wgetのログをちゃんと見た方がはっきりするかと... 204 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/08 23:27.net] >>203 -ncつけてるやつはログが消えちゃったけど、-nc消したやつのログみたら 全部落としてるみたい・・・鬱 205 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/09 01:58.net] (´-`).｡oO（画像掲示板から落とした方が簡単なのに、なんでだろう…） 206 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/09 16:19.net] こんなのもあったり j2ch.free-city.net/ 207 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/09 19:32.net] >>205 ｿﾚﾀﾞ━━━━━━(ﾟ∀ﾟ)━━━━━━━!!!!! にちゃんねらがよく利用している画像掲示板を巡回すれば、良質なｼﾞｪｲﾍﾟｰｸﾞが 集まるよな。 >>206 同一のアドレスがたくさん・・・sortしてuniq通せよな〜、と。 208 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/09 20:05.net] >>206 さらに１時間更新とか... どんなシステムか気になる。 >>207 Windowsでは画像掲示板を巡回して画像をダウンロードするソフトを聞いたことあるけど、 人参収穫か大根収穫とか名前だったか... まあ、crontabで自動で回してみたい 209 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/09 21:08.net] >>208 これか？ 人参自動収穫機 ninjinclub.tripod.co.jp/ 210 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/09 23:41.net] この画像掲示板はPOSTじゃないと見れないみたいなんですが、w3m等の POSTがしゃべれるツールで画像をダウンロードする方法が分からないのですが、 分かる方いらっしゃいませんか？ ttp://sss.direct.ne.jp/nuke/bbs.cgi 211 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/10 01:23.net] >>210 とりあえず>>191の様にログが保存されていないか探してみるとか？ imgboardはデフォルトではfile.dat、fileback.datって名前だったような... ただ、ログファイル名変えてたり、アクセス権を切っている可能性があるので（俺もだけど） このばあいは>>209を試してみるとか？ 下手にperlでPOSTを送ったりするのはやめた方がいいと思う 212 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/10 01:25.net] >>210 てか、右クリック→名前を付けて保存ではいけないのか？ もしくはman w3m 213 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/10 02:00.net] ぷ 214 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/12 14:20.net] >>210 上のほうで出てるパッチを当てたwgetだとこんな感じ？ #!/bin/bash url="hoge.com/hoge/imgboard.cgi??page=" img="/hoge/img-box/" lastpage=10 i=0 while [ $i -lt $lastpage ] do i=`expr $i + 1` echo $url$i >> list.txt done wget -r -w 1 -I $img -i list.txt -o wget.log rm -f list.txt 215 名前：age2ch.pl 0.03.28 mailto:sage [03/01/12 16:20.net] 保守 216 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/12 23:06.net] >>241 普通に wget "hoge.com/hoge/imgboard.cgi?page=2" でもいけない？ >>215 それはやめとけ。 下手したら悪禁になるかもしれないらしい 217 名前：山崎渉 mailto:（＾＾）sage [03/01/15 12:59.net] （＾＾） 218 名前：名無しさん＠お腹いっぱい。 [03/01/24 15:59.net] java版を作ってみますた。 gobo.free-city.net/ ※javaの実行環境が必要です。 ※Windows、Macでも動くかも。 219 名前：あぼーん mailto:あぼーん [あぼーん.net] あぼーん 220 名前：あぼーん mailto:あぼーん [あぼーん.net] あぼーん 221 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/25 17:42.net] >>218 ネタでつか？ 鯖がみつかりませぬ・・・ 222 名前：218 [03/01/26 00:18.net] あれ？確かに見つかりませんね...。 って、鯖ごと落ちてる？ 昨日まではアクセスできたのにな。今日話題になってるSQLPの影響かなぁ？ 223 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/26 00:43.net] >>222 ここでは話題になってないのかな・・ ttp://dailynews.yahoo.co.jp/fc/computer/internet/ 224 名前：218 mailto:sage [03/01/26 09:12.net] >>221 たった今、鯖が復帰していることを確認しますた。よろしくおながいします。 いちお、間借りしたところは、 The site gobo.free-city.net is running Apache/1.3.27 (Unix) on FreeBSD なので今回の騒ぎで落ちちゃったわけではなさそうですが。 225 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/01/31 10:59.net] どうやらUAをいじらないとdatファイルを直接getできなくなったらしいが 226 名前：山崎渉 mailto:（＾＾） [03/04/17 12:33.net] （＾＾） 227 名前：あぼーん mailto:あぼーん [あぼーん.net] あぼーん 228 名前：名無しさん＠お腹いっぱい。 [03/04/21 02:09.net] ↑山崎、必死だな(笑 229 名前：名無しさん＠お腹いっぱい。 [03/04/28 15:53.net] UNIX コマンドだと標準で巡回コマンド付いてきますが、何か？ 230 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/05/06 16:55.net] Mac OS 10.2 のターミナルで実行しました そしたら、 pl {-input <binary_file>} {-output <binary_file>} Reads ASCII PL from stdin (or serialized file if -input specified) and writes ASCII PL to stdout (or serialized file if -output) なんて出ちゃって、もうわかりませぬ どうかおしえてください。。。 おながいします。。。 231 名前：あぼーん mailto:あぼーん [あぼーん.net] あぼーん 232 名前：名無しさん＠お腹いっぱい。 [03/06/08 23:39.net] おお！ このスレまだ存在してたのか。 息が長いな。 山崎先生のおかげですね。 233 名前：名無しさん＠お腹いっぱい。 [03/07/08 00:31.net] >>185 のページ見れないんですが、引越し先知ってる人います？ 234 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/07/13 19:27.net] >>233 とりあえずWayBack Machineで拾えた 235 名前：あぼーん mailto:あぼーん [あぼーん.net] あぼーん 236 名前：名無しさん＠お腹いっぱい。 [03/08/10 04:45.net] age? 237 名前：あぼーん mailto:あぼーん [あぼーん.net] あぼーん 238 名前：あぼーん mailto:あぼーん [あぼーん.net] あぼーん 239 名前：あぼーん mailto:sage [03/11/13 20:55.net] あぼーん 240 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/12/17 05:13.net] ﾎｯｼｭ 241 名前：名無しさん＠お腹いっぱい。 mailto:sage [03/12/31 10:54.net] 　　 242 名前：名無しさん＠お腹いっぱい。 [04/01/08 02:45.net] あけました おめでとう 243 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/01/09 20:08.net] このスクリプト使ってみたよ。 板一枚で 7500 くらい画像がとれた。終わるのに丸一日かかったけど…。 244 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/01/10 03:55.net] 濃淡分布や周波数分布なんか使って、グロ画像や 虹板に紛れ込んだ三次元画像(これもグロ画像か…)を取り除きたいなぁ。 グロ画像は「怖くてみられないグロ画像を鑑定するスレ」があったね、 それを学習データにして…… マンドクセ 245 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/01/14 21:43.net] >>244 一度やってみたいな。グロ画像はともかく、3次元(or2次元)排除なら フーリエ解析+自動学習 で割と精度がでるような気がするのだが。 例のベイジアンフィルタな感じで。さて… 246 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/01/23 06:04.net] ... 247 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/02/13 19:29.net] 　　 248 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/02/14 11:06.net] >>246 >>247 なんだよ保守か？ 何か書けよ！ 249 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/03/28 18:33.net] 保守。 >>244みたいな感じで2次元画像の属性分けできればいいな。 濃淡分布や周波数分布の勉強にいいホームページor本教えてください。 250 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/04/16 21:20.net] 保守 251 名前：名無しさん＠お腹いっぱい。 [04/07/02 22:30.net] akinafreak.zive.net/imageThumbnail/showGazoKanList.action 2ちゃんから集めた画像を会員制にして公開 おまいら、これってどうよ 252 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/07/02 23:46.net] >>251 責任を負っかぶることをものともしない猛者。 253 名前：名無しさん＠お腹いっぱい。 [04/11/13 08:59:12.net] エロエロage 254 名前：pd34d81.tkyoac00.ap.so-net.ne.jp mailto:（＾＾） [04/12/16 11:13:43.net] （＾＾） 255 名前：名無しさん＠お腹いっぱい。 mailto:sage [04/12/16 11:25:24.net] 何だ山崎渉か 256 名前：名無しさん＠お腹いっぱい。 [2005/04/05(火) 17:11:38 .net] umu 257 名前：login:root ◆GrsqjXpGxE mailto:sage [2005/04/17(日) 22:09:41 .net] >>1 とりあえず、使ってみる... これはCGIか？ブラウザで実行しろと? まぁ、Linuxしかインストールしていない漏れのPCにはありがたいがな。 鯖にうpしてみる。分からない事があると思うから、>>1教えてな! 258 名前：login:root ◆GrsqjXpGxE mailto:age [2005/04/17(日) 22:15:48 .net] ｳﾜｰｰｰｰｰﾝ 早速だが>>1よ。質問がある! ディレクトリにある conf.txt は変更する必要があるのか? $ita = 'choco.2ch.net/ainotane/'; $dir = './jpg'; $limit = 999; $down = 2; $ita は、２ちゃんの板のアドレスでおkなんだな？ 259 名前：名無しさん＠お腹いっぱい。 mailto:sage [2005/04/17(日) 22:34:37 .net] >>258 1じゃないけど、おｋだ 260 名前：名無しさん＠通りすがり ◆.q7T9q3bHY mailto:sage [2005/04/18(月) 01:11:41 BE:113184364- .net] クローラー＆過剰リロード対策スレ2【新バーボン】 qb5.2ch.net/test/read.cgi/operate/1113647422/ delayと差分はちゃんとね。 261 名前：名無しさん＠お腹いっぱい。 [2005/07/09(土) 14:24:53 .net] test 262 名前：名無しさん＠お腹いっぱい。 mailto:sage [2005/07/09(土) 21:05:19 .net] このスレまだあったのか。。。 懐かしい 263 名前：名無しさん＠お腹いっぱい。 [2005/07/17(日) 01:12:01 .net] ああ、ずっとあるぜ 264 名前：名無しさん＠お腹いっぱい。 mailto:sage [2005/08/15(月) 02:33:24 .net] イメージサーチャーモナー? ttp://www.abars.biz/search/ 265 名前：名無しさん＠お腹いっぱい。 mailto:sage [2005/11/13(日) 22:53:23 .net] 一度でもdownloadしたファイルをmd5sumしてsum値のリストどっかテキスト に保存しといて、同じsum値のファイルを二度とdownloadしないように してくれる重複避け機能を追加してください。 266 名前： ◆9Xm6zmxuk. mailto:sage [2006/11/06(月) 22:12:55 .net] つ 267 名前：名無しさん＠お腹いっぱい。 mailto:sage [2007/11/13(火) 23:55:48 .net] vdvdvdv nfdfdnfdn fhffhh jrtyjr yteryery yeryer 268 名前：名無しさん＠お腹いっぱい。 [2008/02/22(金) 11:12:57 .net] 保守する必要ある？ 269 名前：名無しさん＠お腹いっぱい。 [2009/08/01(土) 09:16:08 .net] 何だこのスレw 270 名前：名無しさん＠お腹いっぱい。 mailto:sage [2010/11/18(木) 21:04:12 .net] よし！！ 271 名前： 忍法帖【Lv=3,xxxP】 mailto:sage [2011/06/09(木) 22:47:57.83 .net] ??? 272 名前： 忍法帖【Lv=3,xxxP】 mailto:sage [2011/06/16(木) 00:56:59.34 .net] test 273 名前： 忍法帖【Lv=13,xxxPT】 mailto:sage [2011/07/02(土) 19:27:11.02 .net] test 274 名前： 忍法帖【Lv=4,xxxP】 mailto:sage [2011/07/06(水) 23:00:24.79 .net] test 275 名前： 忍法帖【Lv=13,xxxPT】 mailto:sage [2011/07/09(土) 15:57:54.67 .net] test 276 名前： 忍法帖【Lv=3,xxxP】 mailto:sage [2011/08/16(火) 17:34:25.85 .net] どどとどと 277 名前：名無しさん＠お腹いっぱい。 mailto:sage [2011/08/27(土) 20:43:51.62 .net] 渋の画像ぶっこ抜きスクリプト、要る？ 278 名前： 忍法帖【Lv=38,xxxPT】 mailto:sage [2011/08/28(日) 09:52:34.12 .net] test 279 名前：名無しさん＠お腹いっぱい。 mailto:sage [2011/09/09(金) 20:42:51.45 .net] てーすと 280 名前：名無しさん＠お腹いっぱい。 mailto:sage [2011/10/06(木) 00:30:03.20 .net] てｓｔ 281 名前：電脳プリオン 忍法帖【Lv=40,xxxPT】(3+0：8) 【28m】 mailto:sage [2013/02/11(月) 23:44:32.85 BE:820951799-PLT(12080).net] 10年以上更新してたのか 282 名前：名無しさん＠お腹いっぱい。 mailto:sage [2013/02/13(水) 15:50:37.06 .net] >>265 ソース公開されてるんだから自分でヤレ。 ってすげー前のレスだった・・・。 283 名前：名無しさん＠お腹いっぱい。 [2013/03/22(金) 21:42:30.18 .net] 　　　　　 _ 　　　　　 |O＼ 　　　　　 |　　 ＼　ｷﾘｷﾘ 　　　　∧|∧ 　　＼　ｷﾘｷﾘ ｸﾞｸﾞｩ>（；⌒ヽ　　　 ＼ 　　　　∪　　|　　 　　(~) 　　　　　∪∪　　 γ´⌒｀ヽ 　　　　　）　）　　 　{i:i:i:i:i:i:i:i:} 　　　　 （　（　　　　(　´･ω･)、 　　　　　　　　　　　(O ⌒　)O 　　　　　　　　 　 　⊂＿)∪ 284 名前：名無しさん＠お腹いっぱい。 [2013/10/13(日) 00:05:36.16 .net] 懐かしい 285 名前：名無しさん＠お腹いっぱい。 mailto:sage [2014/07/14(月) 17:55:10.21 .net] imgur.com/roeuS4F.jpg 286 名前：島本町で凄惨なイジメを受けて廃人になった方へ [2014/08/06(水) 20:02:47.91 .net] ＞大阪府三島郡島本町の小学校や中学校は、暴力イジメ学校や。 島本町の学校でいじめ・暴力・脅迫・恐喝などを受け続けて廃人になってしもうた僕が言うんやから、 まちがいないで。僕のほかにも、イジメが原因で精神病になったりひきこもりになったりした子が何人もおる。 教師も校長も、暴力やいじめがあっても見て見ぬフリ。イジメに加担する教師すらおった。 誰かがイジメを苦にして自殺しても、「本校にイジメはなかった」と言うて逃げるんやろうなあ。 島本町の学校の関係者は、僕を捜し出して口封じをするな ＞島本町って町は、暴力といじめと口裏合わせと口封じの町なんだな 子供の時に受けた酷いイジメの体験は、一生癒えない深い傷になるなあ 「暴力とイジメと口裏合わせと口封じ」の町やそういう町に巣食うヤクザ・チンピラ・ゴロツキ・不良・ いじめっ子・ダニ・ノミ・シラミなどを監視して非難するのは暮らしやすい町を作るのに必要だ 287 名前：名無しさん＠お腹いっぱい。 [2017/12/29(金) 08:49:24.14 .net] 誰でも簡単にパソコン1台で稼げる方法など 参考までに、 ⇒　『宮本のゴウリエセレレ』 というブログで見ることができるらしいです。 グーグル検索⇒『宮本のゴウリエセレレ』 26UOUCYMZ2 288 名前：名無しさん＠お腹いっぱい。 [2018/05/22(火) 05:12:44.99 .net] 知り合いから教えてもらったパソコン一台でお金持ちになれるやり方 時間がある方はみてもいいかもしれません グーグルで検索するといいかも『ネットで稼ぐ方法　モニアレフヌノ』 A4Y4N 289 名前：名無しさん＠お腹いっぱい。 mailto:sage [2023/09/28(木) 05:34:11.87 .net] 今は別のスクリプトで5chが落ちまくりという 290 名前：名無しさん＠お腹いっぱい。 mailto:sage [2023/10/20(金) 11:11:11.81 .net] やっほー、これはうれしい驚きだ！ 291 名前：名無しさん＠お腹いっぱい。 [2024/03/27(水) 20:38:37.01 .net] 要するに太ったらダメな人間はいないと思ってないんだろうね スケート靴込でもなるだろうし 詐欺に気を使ってるとかない？ 292 名前：名無しさん＠お腹いっぱい。 [2024/03/27(水) 20:49:38.09 .net] 双日って他のやつが世の中心は自由主義だよ それ言い出したらどこも変わらんやろ... 293 名前：名無しさん＠お腹いっぱい。 [2024/03/27(水) 21:08:25.55 .net] >>112 若者は騙しやすい。 全員死んじまえよ構わないからモリカケと変わらんのに ガーシー馬鹿だから 294 名前：名無しさん＠お腹いっぱい。 [2024/03/27(水) 21:31:40.23 .net] 子供手当とか配偶者控除とか金持ちのほうが勝てる可能性が高そう 295 名前：名無しさん＠お腹いっぱい。 [2025/03/29(土) 17:53:47.72 ID:cQ8KfVKNn] 例えば「JA323N』は「盗撮窃盗詐欺猥褻税金泥棒ダサイタマ殺人県警」た゛か゛ クソ航空機騒音被害を受けたらアプリ「ADS-B Unfiltered...」で登録記號確認 Ｔtps：//jasearch.info/ で犯人特定 クレ━ム電話をすれば国土破壊省が許可を出してるだのと主張するだろうが騒音まき散らして私権侵害する憲法無視の許可など出してはいない しかも航空法では付近の建物最上部から3０0M以上の高度が規定されてるか゛高層ビルだらけの都会て゛は違反だらけ 定置場に集団で押しかけて取り囲んだり尾行して自宅特定したり法務局で取得した社長住所をネッ├に晒す社會的正当性があるからな 我々はそうした住民や地球に貢献するボランティアに送金したくて仕方がないし詐欺や強盗よりコスパ高いと思うぞ お前らの生活苦は非課税同然の航空燃料によってクソ航空機か゛莫大な温室効果ガスと騒音まき散らして気侯変動災害連発 人々の睡眠まで妨害して生産性破壊して静音が生命線の知的産業に威力業務妨害して国際競爭力壊滅させて貧乏國家に陥れてるのか゛原因な (ref.］　tтps：/／www.call4.jp/info.phР?Ｔypｅ=items&id=I00０0062 ttps://hanеda-projеСｔ.jimdofree.com/　, tтps:／/flighT-rouТe.com/ тtрs://n-souonhigaisosyoudan.amebaownd.ｃom/

---

---

[ 新着レスの取得/表示 (agate) ] / [ 携帯版 ]

read.cgi ver5.27 [feat.BBS2 +1.6] / e.0.2 (02/09/03) / eucaly.net products.
担当:undef