Internet Archive総合 (web.archive.org) #4

Internet Archive総合 ..

2:名無しさん＠お腹いっぱい。
21/08/13 04:29:40.41 .net
>>1おつ
Internet Archive総合 (web.archive.org) #2
ｽﾚﾘﾝｸ(esite板:5番)
5 名前：名無しさん＠お腹いっぱい。[sage] 投稿日：2016/10/01(土) 04:24:53.46
テンプレのＱ＆Ａ二件、まだそんなやり方が通用すると思ってる奴いるの？

3:名無しさん＠お腹いっぱい。
21/08/13 09:15:19.20 .net
Q. 寄付したいんだけど?
こちらから金額と、一度きりか毎月か、送金方法、を選んで寄付してください
URLﾘﾝｸ(archive.org)
Q. すぐに保存したい場合は?
Save Page NowにURLを入力して「SAVE PAGE」ボタンを押す
URLﾘﾝｸ(web.archive.org)
Q. アカウント作ったらなんかいいことあるの?
A. ページのスクリーンショットを保存したり、ページの全てのリンク先を保存できる「Save outlinks」という機能が使える
Q. spn@archive.orgにメールでURLを送ったら保存されるの?
A. 1週間後に保存完了のメールが届いたり、何も戻ってこない失敗した場合があるので、確実に保存したいなら辞めたほうがいい
Q. インスタのURLが保存できないんだけど
A. ログインしないとコンテンツが表示されない仕様になったので保存自体が無理になってます
Q. robots.txtでia_archiverをDisallowしても無視されるの?
A. 中古ドメインでサイト見れなくするやつのせいでrobots.txtを見ない仕様になったので無視されることも従うこともあります、
保存できることもあるので確認してみたほうが早い
Q. 鯖落ちしてる?
A. ここで鯖状態を見れる
URLﾘﾝｸ(analytics0.archive.org)
URLﾘﾝｸ(archive.org)

4:名無しさん＠お腹いっぱい。
21/08/13 09:19:36.55 .net
Q. Save Page Nowの制限などの仕様は?
A. ここを参照
URLﾘﾝｸ(docs.google.com)
Q. Save Page Nowで保存完了しても保存されたページが表示されないんだけど
A. 完全にページが見れるようになるのと、/*/のページ一覧やカレンダーに反映されるまで時間かかるので最大数日待ってください
ほとんどは数分後には見えるようになってるはず、もしくはウェブブラウザのキャッシュを削除するといいかも
Q. 「 The capture is estimated to start in XX minutes. 」って何?
A. Save Page Nowの保存サーバーの空きがなくて保存処理に時間がかかってる状態、急いでなければあとでやるのも手
Q. The same snapshot had been made XX minutes and XX seconds ago. We only allow new captures of the same URL every XX minutes.
A. 同じURLを短期間の間に何度も保存できない仕様になっています、誰かが数分前に保存したか、自分で保存したときに一部の画像がかけて保存されている状態でも表示されることがあります
気になるなら1時間後ぐらいにもう一度保存してください
Q. Temporarily Offline The Internet Archive's sites are temporarily offline. We apologize for the inconvenience. って何?
A. たまにメンテやってサイト見れなくなることがあるので、待ちましょう。ツイッター（@InternetArchive）でメンテ予告は発表しています
Q.「The server didn't respond in time for https://(保存しようとしたURL)」
A. 極端にページの返答が遅いサイトを保存しようとするとこの表示が出ます、何度かやれば保存できることもあります

5:名無しさん＠お腹いっぱい。
21/08/13 09:20:54.64 .net
Q.「This URL has been excluded from the Wayback Machine. 」って何?
A. robots.txtのブロックや、サイトの運営者や著作権者がドメインやこのディレクトごと非表示化の申請した可能性があります、
ただしURLの保存はできますし、未来にブロックが解除されて見れるようになる可能性もあります
Q.「Cannot get status of spn2-乱数」のエラーは何?
A. Save Page Nowで保存中にサーバーの状態が取得できなかったときのエラーで、/*/で保存されているか確認して、されてなければもう一度保存してください
Q. 「404 Not Found」のエラーは何?
A. サイトが存在していてもこのエラーが出ることがあります。その場合は時間あけて一度保存してみましょう

6:名無しさん＠お腹いっぱい。
21/08/13 09:22:41.85 .net
前スレの情報と俺の経験から適当なFAQを作ったので、修正と更新よろしく
 >>5 ここは修正
ディレクト
ディレクトリ

7:名無しさん＠お腹いっぱい。
21/08/13 10:10:50.77 .net
Q. 「Sorry Job failed」が出た
A. このエラーが出たとしても一部画像やスクリプトファイルが欠けた状態でページ保存できていることがありますので、/*/で確認してみてください
保存できてない場合はやり直してください
Q. 「You have already reached the limit of active sessions」が出た
A. 同じIPアドレスからの同時保存制限に引っかかってる状態。2021年5月24日以降はログインしていないユーザーは同時保存は3個まで
1分ほど待てば制限解除される
Q.「This URL has been already captured 10 times today. Please email us at "info@archive.org" if you would like to discuss this more.」が出た
A. 1日に同じURLは10回まで保存できる制限に達したので、また明日

8:名無しさん＠お腹いっぱい。
21/08/13 19:21:23.04 .net
いきなり保守

9:名無しさん＠お腹いっぱい。
21/08/13 19:22:42.15 .net
乙

10:名無しさん＠お腹いっぱい。
21/08/14 04:09:32.12 .net
Hmm

11:名無しさん＠お腹いっぱい。
21/08/14 05:27:47.12 .net
乙

12:名無しさん＠お腹いっぱい。
21/08/14 12:34:36.90 .net
乙

13:名無しさん＠お腹いっぱい。
21/08/15 00:20:19.31 .net
archive .foはインスタ取れるの？

14:名無しさん＠お腹いっぱい。
21/08/15 12:59:22.50 .net
立て乙
pcからしかアクセスしてないのに3割ぐらいの確率でsp用ページが保存されるサイトあるのなんでだろ
sp用になってしまったページを後日とり直しても3割ぐらいが再度sp用になる
3度目の正直でもダメだったページは諦めてる

15:名無しさん＠お腹いっぱい。
21/08/16 08:34:43.27 .net
>>1乙

16:名無しさん＠お腹いっぱい。
21/08/16 17:49:00.62 .net
>>14
sp用URLを取ってるとか？
FC2ブログとかなぜかspの方がインデックスされてるのが多いし

17:名無しさん＠お腹いっぱい。
21/08/17 13:27:51.78 .net
.>>1
【保存・記録】ウェブアーカイブ総合 Page.01
ｽﾚﾘﾝｸ(internet板)
共通の検索キーで特定するのが不可能なスレタイ

18:名無しさん＠お腹いっぱい。
21/08/17 13:30:21.39 .net
>>1
25周年記念サイト
URLﾘﾝｸ(anniversary.archive.org)

10月21日木曜日午後6時PT（午後9時ET）

19:名無しさん＠お腹いっぱい。
21/08/17 13:31:36.79 .net
URLﾘﾝｸ(lab.syncer.jp)
>>1

20:名無しさん＠お腹いっぱい。
21/08/17 21:27:46.03 .net
なにそれ

21:名無しさん＠お腹いっぱい。
21/08/18 00:02:25.05 .net
96年あたりに保存されたサイトは大抵が不完全だな

22:名無しさん＠お腹いっぱい。
21/08/18 00:26:50.73 .net
むしろ96年によく保存し始めたもんだなと思う

23:名無しさん＠お腹いっぱい。
21/08/19 03:12:23.86 .net
こちらのアーカイブの閲覧方法、どなたか分かる方がいらっしゃったら教えて頂きたいです…
URLﾘﾝｸ(archive.org)

24:名無しさん＠お腹いっぱい。
21/08/19 03:50:10.13 .net
URLﾘﾝｸ(github.com)

25:名無しさん＠お腹いっぱい。
21/08/20 09:52:35.14 .net
>>24
ありがとうございます…！まさしく求めてたモノっぽいです。アーカイブの容量大きいですがローカルに落として見てみます！

26:名無しさん＠お腹いっぱい。
21/08/21 09:40:47.52 .net
404出るわ

27:名無しさん＠お腹いっぱい。
21/08/21 12:43:47.02 .net
久しぶりに重いね

28:名無しさん＠お腹いっぱい。
21/08/21 17:10:20.07 .net
調子悪いな

29:名無しさん＠お腹いっぱい。
21/08/21 23:26:59.75 .net
今日はプロトコルのエラーばっかりで
何度か読み込まないとウェブブラウザから表示も保存もできない

30:名無しさん＠お腹いっぱい。
21/08/21 23:40:35.02 .net
?何かあったの？

31:名無しさん＠お腹いっぱい。
21/08/25 00:00:25.31 .net
OutLinksがほぼThe server didn't respond in time for 「URL」になる

32:名無しさん＠お腹いっぱい。
21/08/25 00:36:06.75 .net
thisって何なん

33:名無しさん＠お腹いっぱい。
21/08/25 00:36:27.41 .net
thisじゃなかったthe
theは何を指してるん

34:名無しさん＠お腹いっぱい。
21/08/25 22:21:16.75 .net
twitterでjsonばっかのときどうすればいいの

35:名無しさん＠お腹いっぱい。
21/08/25 22:50:55.34 .net
>>31-33
>>4に書いてある
保存するページのサーバー側の応答が遅いとタイムアウトになってdidn't respondエラー返ってくる場合がある
outlinksでも同じ
URLわかってるなら1ページずつ保存したほうが早いかもしれないよ
 >>34
俺の環境では最近Save Page Nowでも/save/を踏んでもjsonへリダイレクトされなくなってるけど
普通の「URLﾘﾝｸ(twitter.com)ユーザ名/status/ツイート番号」のURLで保存してみるとか

36:名無しさん＠お腹いっぱい。
21/08/25 23:45:21.72 .net
　
Twitter 総合スレ 85
ｽﾚﾘﾝｸ(sns板)

532 友達の友達の名無しさん (ﾜｯﾁｮｲ ffeb-j7M8) sage 2021/08/25(水) 21:23:21.22 ID:Vyk92XNE0

Twitterが「ツイートの表示にログインを義務化する」仕様を段階的に導入している可能性
URLﾘﾝｸ(gigazine.net)

＞ついにツイートの表示もログイン必須とする仕様をTwitterが段階的に
＞導入し始めているのではないかと指摘されています
　

37:名無しさん＠お腹いっぱい。
21/08/26 00:20:29.10 .net
ツイッターも魚拓とるなら今のうちか
インスタもフェイスブックもとれなくなったし
SNSの記録ができなくなるのは将来悔やまれるでしょうね

38:名無しさん＠お腹いっぱい。
21/08/26 04:17:45.08 .net
>>37
自前のクロールソフト使うしかないもんな

39:名無しさん＠お腹いっぱい。
21/08/26 07:53:54.44 .net
今さっき、UTC 22 時台に玉葱経由で保存させようとしたらこれが来たw
おそらく他の制限と同様に 0 時にはリセットされるのかと。
この状態でもアカウントでログインしてあれば保存は可能。
(当然、生で使うものとはアカウントは分けてますよ。)
URLﾘﾝｸ(o.5ch.net)

40:名無しさん＠お腹いっぱい。
21/08/26 12:20:31.50 .net
なんかSave Page Nowのページ固まってね？
表示が固まるだけで取得は出来てるけど

41:名無しさん＠お腹いっぱい。
21/08/26 15:05:07.94 .net
>>39
アカウント作らなくても、
履歴を消す→クッキーを有効にする→履歴を消す→クッキーを無効にする→履歴を消す...
の作業を2，3回繰り返すと突破できるよ

42:名無しさん＠お腹いっぱい。
21/08/26 15:10:10.17 .net
>>41
生挿入と勘違いしたはるで、英文読めへんのかw

43:名無しさん＠お腹いっぱい。
21/08/27 16:18:35.90 .net
>>40
普通に取れることもあるけど固まって動かなくなるのがほとんどでしんどい
一日経過しても重いままとかどうしたんだ

44:名無しさん＠お腹いっぱい。
21/08/28 05:34:32.31 .net
URLﾘﾝｸ(archive.org)
なんか新しいことを始めてる模様
Save Page Nowでも自動でリンク先を保存してる
これで1ページ保存リクエスト出せばリンク辿って全部保存してくれるかも

45:名無しさん＠お腹いっぱい。
21/08/28 05:48:06.55 .net
ちなみに俺がSPNで保存したのを確認してみると、2日後にリンク先をsave-page-now-outlinksで保存してるので時間差がある感じ
将来的にログインしなくてもoutlinksと同じように保存されるならすごく時間の節約になってみんな助かるので期待したい

46:名無しさん＠お腹いっぱい。
21/08/28 08:50:45.75 .net
>>37
このサイトからログインすると任意のアカウントの最新3000件ぐらいのツイートURLを取り出せる
ただしリツイートしてるのも含めてだが
URLﾘﾝｸ(www.allmytweets.net)
あとは/save/に投げていけばいい

47:名無しさん＠お腹いっぱい。
21/08/28 17:09:28.57 .net
自動でリンク先を撮ってくれるのはいいけど負荷分散も自動化してくれ

48:名無しさん＠お腹いっぱい。
21/08/29 13:11:32.00 .net
ArchiveTeamが取ったアーカイブってなぜかCollectionsやAPIに反映されてないことが多いんだよな
何でなんだろ？

49:名無しさん＠お腹いっぱい。
21/08/30 19:15:15.06 .net
いつの間にかヤフーニュースを
（トップページに遷移されずに）
スクリーンショットできる機能が復活していた。

50:名無しさん＠お腹いっぱい。
21/09/04 00:54:52.92 .net
SPNの送信ヘッダのクッキーにdonation-identifier=英数字; abtest-identifier=英数字とかいうのがあるけど
寄付した金額で扱いを変えていたりするのだろうか？あとABテストの被験者にもされているのか？
Google関連？

51:名無しさん＠お腹いっぱい。
21/09/04 03:07:26.10 .net
Hrm.
The Wayback Machine has not archived that URL.
Click here to search for all archived pages under URLﾘﾝｸ(~)

52:名無しさん＠お腹いっぱい。
21/09/04 13:59:14.93 .net
hrmの発音がわからん

53:名無しさん＠お腹いっぱい。
21/09/04 14:04:48.54 .net
>>52
URLﾘﾝｸ(en.wiktionary.org)
音声付き、本当にこれで良いのかは知らんけど

54:名無しさん＠お腹いっぱい。
21/09/04 14:48:54.37 .net
Forvoで調べたらエイチ・アール・エムって読みやがった。
そっちじゃねえ

55:名無しさん＠お腹いっぱい。
21/09/04 14:50:36.84 .net
Google翻訳の発音機能だとフーム

56:名無しさん＠お腹いっぱい。
21/09/04 16:23:45.81 .net
はらむ？えいちあーるえむ？ふーむ？
割れすぎﾜﾗﾀ

57:名無しさん＠お腹いっぱい。
21/09/04 16:33:53.91 .net
Youtube
Sorry
Please try again in ~1 min. Crawling this host is paused
because they notified us that are overloaded right now.

58:名無しさん＠お腹いっぱい。
21/09/04 17:57:59.71 .net
( >ω<)/~~ ~1 min

59:名無しさん＠お腹いっぱい。
21/09/06 06:21:44.18 .net
>>36
スクロールしての読み下しは出来るが個別ツイートをクリックしても阻まれるな

60:名無しさん＠お腹いっぱい。
21/09/06 18:56:51.87 .net
別タブで開いたらまだ大丈夫

61:名無しさん＠お腹いっぱい。
21/09/08 19:18:54.65 .net
archive.is が落ちたままだ
URLﾘﾝｸ(web.archive.org)

62:名無しさん＠お腹いっぱい。
21/09/08 22:00:50.95 .net
ここの住人になるとそういうのさえアーカイブを通して貼るのかｗ

63:名無しさん＠お腹いっぱい。
21/09/08 22:30:15.17 .net
「落ちてる?」「生きてるだろ」という応酬を何度見てきたことか。

64:名無しさん＠お腹いっぱい。
21/09/16 12:24:13.93 .net
ツイッターアーカイブできなくない？

65:名無しさん＠お腹いっぱい。
21/09/16 16:29:05.86 .net
668 名前：名無しさん＠お腹いっぱい。[sage] 投稿日：2021/09/16(木) 14:26:46.31
Save Page Now
が昨日から全然安定しない・・・
いつ正常になるんだ

66:名無しさん＠お腹いっぱい。
21/09/19 10:58:54.62 .net
YouTubeの動画が保存されるのはいいんだけど、さっき見つけた今年の8月に保存されたページでは30秒の広告動画だけしか保存されてない。
parma.ccを見習えよ、てかparma.ccがアップロードしてるのをWaybackに反映させればいいのに

67:名無しさん＠お腹いっぱい。
21/09/19 19:26:35.26 .net
/save/がNot Foundedになる

68:名無しさん＠お腹いっぱい。
21/09/19 19:58:51.28 .net
Temporarily Offlineが出たり404や503だらけで今日は保存できない

69:名無しさん＠お腹いっぱい。
21/09/20 01:48:42.70 .net
サンフランシスコで停電起きてるそうで、IAも巻き込まれてるかもしれない
シスコ近くの複数箇所にデータセンターがあるって昔発表してたけど、
場所を非公開だから停電の地図を見ても確かめられない
まだ完全に復旧するまで時間かかりそう

70:名無しさん＠お腹いっぱい。
21/09/20 01:50:37.08 .net
貼り忘れ
IA代表のケールさんのツイート曰く
URLﾘﾝｸ(twitter.com)
(deleted an unsolicited ad)

71:名無しさん＠お腹いっぱい。
21/09/20 02:37:27.85 .net
太平洋標準時で午後5時（日本時間で20日午前9時）までに復旧予定
URLﾘﾝｸ(twitter.com)
(deleted an unsolicited ad)

72:名無しさん＠お腹いっぱい。
21/09/20 05:15:32.58 .net
外部要因かもしれんのか

73:名無しさん＠お腹いっぱい。
21/09/20 22:14:43.29 .net
無知ですみません。質問させてください。
スプレッドシートのリストでアーカイブをかけています。作業の完了メールを受信し、シートには成功したと記述があっても、実際にURLにアクセスしてみると、アーカイブの取得が完了していない旨のメッセージが表示されます。
この場合、内部的にはアーカイブの取得に成功していますか？
それともアーカイブはとれていないのでしょうか。

74:名無しさん＠お腹いっぱい。
21/09/20 22:31:00.44 .net
両方よくある

75:名無しさん＠お腹いっぱい。
21/09/20 23:31:50.62 .net
>>73
保存したURLが見れるようになるまで時間かかっているか、一部のURLだけ保存に失敗している可能性もある。
/*/でカレンダーに直近の日付で保存されているか確認するのが一番簡単だが、
内部的に保存されているか確認したいなら、ウェブブラウザでも見れるけどcurlのコマンドの場合
curl URLﾘﾝｸ(archive.org)
返答に「"available": true」と直近の日付のtimestampがあるかどうか。あるなら保存できてる。
"available": falseの場合はその次に
curl -I URLﾘﾝｸ(web.archive.org)
ヘッダーに「x-archive-redirect-reason: found capture at 直近の保存時間」があれば保存されている。
この2つのコマンドで見当たらない場合は保存をやり直ししたほうが早い。
ただ、この確認方法でも保存できているのに保存されてないと返ってくることがあるので、俺も困ってる。

76:名無しさん＠お腹いっぱい。
21/09/21 01:12:46.90 .net
今日も停電だって
URLﾘﾝｸ(twitter.com)
(deleted an unsolicited ad)

77:名無しさん＠お腹いっぱい。
21/09/21 01:15:13.36 .net
スレタイのアーカイブサイトってもしかして停電が相次ぐ州にあるのか？

78:名無しさん＠お腹いっぱい。
21/09/21 11:17:06.02 .net
dropboxも除外されてるか
以前は保存できて落とせた気がしたが

79:名無しさん＠お腹いっぱい。
21/09/22 19:37:04.10 .net
著作権法厳しくなったら、誰が保存したとか調べよとする輩も出てくるんかね。無理だと信じたいが

80:名無しさん＠お腹いっぱい。
21/09/24 03:01:13.72 .net
>>79
IAに限らず誰がアクセスしたのかは第三者には分らんよ
ただアーカイブが少ないサイトだと統計的に同一人物が保存した、とかは分かるかもね
その場合でも個人は特定出来ないけど

81:名無しさん＠お腹いっぱい。
21/09/25 06:46:20.97 .net
archive.isで.txtをアーカイブした場合、プレーンテキストを表示させるにはどうしたら良い？

82:名無しさん＠お腹いっぱい。
21/09/25 18:39:38.36 .net
im_
fw_

83:名無しさん＠お腹いっぱい。
21/09/26 06:37:37.39 .net
それarchive.orgだろ

84:名無しさん＠お腹いっぱい。
21/09/29 20:05:16.09 .net
いつの間にかtwitterの動画保存できるようになってるじゃん

85:名無しさん＠お腹いっぱい。
21/09/29 20:49:15.44 .net
>>84
（・o ・）ほぉ！

86:名無しさん＠お腹いっぱい。
21/09/29 23:07:40.75 .net
消されたtwitterアカウントの過去ツイ遡りたいんだけど、どうやって検索すればいいか分からん

87:名無しさん＠お腹いっぱい。
21/10/01 01:01:19.89 .net
わからんならやめたれ

88:名無しさん＠お腹いっぱい。
21/10/01 04:25:58.46 .net
中国のweiboってアーカイブ出来ないんでしょうか？

89:名無しさん＠お腹いっぱい。
21/10/01 12:24:43.05 .net
新しくURLsタブ出来たけど、バグってるのか表示されないな

90:名無しさん＠お腹いっぱい。
21/10/01 14:04:39.61 .net
>>89
バグだね。ホスト名より前の部分 (URL スキーム名 + 斜線) を除くと動く。
URLﾘﾝｸ(i.imgur.com)

91:名無しさん＠お腹いっぱい。
21/10/01 20:37:46.76 .net
夏にTwitterアカウントのアーカイブ削除依頼を出したんだけど、
翻訳ソフト使ったけど、
回答が難解すぎてまったく分からない。
アドレスだとかURLか何か要求していることだけは分かったけど、
この場合、何を出せばいいのですか？
今まで使ってたサービスとか昔書いてたブログとか
順次アーカイブから除去していくつもりなんだけど、
最初に手を付けたTwitterですら消し方が分からない……

92:名無しさん＠お腹いっぱい。
21/10/01 21:04:21.76 .net
残されて困るようなことを書いたお前が悪い。諦めろ。

93:名無しさん＠お腹いっぱい。
21/10/01 22:48:00.80 .net
>>91
本人証明して削除してもらうみたいな話は聞いたことある
Twitterとかブログで削除依頼出してます的な文を投稿をすれば本人だと証明できるのかな
取り敢えず個人情報伏せてメール文貼り付ければ誰か解読してくれるんじゃね？

94:名無しさん＠お腹いっぱい。
21/10/02 04:31:41.79 .net
こころんにあるミラーはIAを弾いてるっぽいし、エロゲ系ミラーサイトの大半は閉鎖済みだしどうしようもない

95:名無しさん＠お腹いっぱい。
21/10/02 23:58:43.15 .net
URLﾘﾝｸ(wayforward.archive.org)
この未来起こりうる陰謀論みたいなシナリオみたいなのはなんなの
がっかり

96:名無しさん＠お腹いっぱい。
21/10/03 00:58:38.21 .net
>>95
確かにビックリな内容だけど俺は安心したわ
検閲が強化され続けてる実情を踏まえると、ここまで最悪のシナリオを想定して運営してくれてるのなら信頼できる

97:名無しさん＠お腹いっぱい。
21/10/03 19:43:00.18 .net
コスパ系のサイト保存すると盥回しみたいに転送されまくって元のドメインに戻ってくる仕様クソ過ぎるな。
IAではなくコスパ側の仕様だが。

98:名無しさん＠お腹いっぱい。
21/10/03 20:00:54.17 .net
無限盥回しでいつになってもアーカイブが表示されない場合もある。これは酷い

99:名無しさん＠お腹いっぱい。
21/10/04 01:43:25.24 .net
コスパ系のサイトとは一体

100:名無しさん＠お腹いっぱい。
21/10/05 15:38:13.03 .net
前までURL入れたら見れていたサイトが急に見れなくなる原因ってなんですか？
随分昔の個人サイトで今さら削除申請した訳でも無さそうなのですが何が原因なんでしょう
こういう例がいくつもあります

101:名無しさん＠お腹いっぱい。
21/10/05 22:21:22.34 .net
>>100
一時的に見れないって訳じゃないなら削除申請以外考えられないかな
そのサイトのエラーメッセージを貼ってくれないと何とも言えない

102:名無しさん＠お腹いっぱい。
21/10/08 09:09:08.20 .net
>>97
TMJ移転のお知らせ

103:名無しさん＠お腹いっぱい。
21/10/09 15:57:54.85 .net
ヤフーニュースをアーカイブしてもトップページに遷移されずに
無難にアーカイブできるようになっている。
いつの間にか。

104:名無しさん＠お腹いっぱい。
21/10/09 18:48:40.91 .net
楽天は？

105:名無しさん＠お腹いっぱい。
21/10/10 06:38:26.34 .net
save-page-now-outlinksが復活してる。
SPN使って手動で保存したページのリンク先がいくつか保存されてるのも確認。

106:名無しさん＠お腹いっぱい。
21/10/11 06:09:54.04 .net
インターネットアーカイブ25周年記念ビデオメッセージサイト
URLﾘﾝｸ(internetarchive25.capsule.video)
日系アメリカ人
横浜在住外国人
英語が苦手なチー牛

107:名無しさん＠お腹いっぱい。
21/10/13 21:58:44.94 .net
Sorry
This host has been already captured 100,000 times today. Please email us at "info@archive.org" if you would like to discuss this more.

108:名無しさん＠お腹いっぱい。
21/10/14 03:19:26.35 .net
応じてくれるの？

109:名無しさん＠お腹いっぱい。
21/10/14 05:00:41.52 .net
アーカイブが見れなくなったことを質問したときの回答
>Please note that the Wayback Machine uses multiple layers of indexes to internally access archives of URLs.
>Therefore, from time to time, information is moved from one index before it is available in the “next” index.
>Our engineers are working to address the root cause of this breakdown to reduce the probability it will happen.
>However, with > 1 billion URLs/day flowing into the system, and less hardware than we would like, it is a bit harder to fix once and for all.
>Typically, though, what you see is what the Archive captured when it visited the webpage (and what we have).

110:名無しさん＠お腹いっぱい。
21/10/14 18:30:08.24 .net
英語じゃないか

111:名無しさん＠お腹いっぱい。
21/10/14 19:17:27.38 .net
>>110
だからどうした低能
英語のサイトの話をしてるくせに

112:名無しさん＠お腹いっぱい。
21/10/14 20:54:09.53 .net
口が悪い…

113:名無しさん＠お腹いっぱい。
21/10/16 01:27:51.93 .net
>>107
最近これが頻繁に出る
その日初めてのアーカイブでも出る

114:名無しさん＠お腹いっぱい。
21/10/16 06:14:39.06 .net
>>113
既に「一日」の3分の2が過ぎてる時間帯にそんなこと書いてる時点でお察し

115:名無しさん＠お腹いっぱい。
21/10/17 21:25:56.42 .net
>>114
アメリカ基準だからってこと？

116:名無しさん＠お腹いっぱい。
21/10/18 07:27:23.85 .net
>>115
それじゃ計算合わないよね。
所在地は米国だけど、世界標準を意識してか日付の区切りは協定世界時なんだな。
例えば >>39 の「今さっき」は 22 時台。
0 時は日本時間朝 9 時。

117:名無しさん＠お腹いっぱい。
21/10/18 08:57:01.05 .net
ああ、UTC基準なのか
所在地の日時かと思ってた

118:名無しさん＠お腹いっぱい。
21/10/19 15:38:16.80 .net
ロンドン時間なのか

119:名無しさん＠お腹いっぱい。
21/10/19 19:05:40.90 .net
ロンドンタイムズ

120:名無しさん＠お腹いっぱい。
21/10/20 22:39:18.13 .net
皆さんはどのようなサイトを保存していますか？

121:名無しさん＠お腹いっぱい。
21/10/22 20:16:41.27 .net
URLﾘﾝｸ(web.archive.org)URLﾘﾝｸ(bbs.avi.jp)
URLﾘﾝｸ(web.archive.org)URLﾘﾝｸ(bbs.avi.jp)
このサイトの小説を見たいのだけど復旧方法あるかな

122:名無しさん＠お腹いっぱい。
21/10/22 20:26:16.31 .net
>>121
それはちゃんと保存されていないからみられないが
サイト自体が現在も生きている
URLﾘﾝｸ(xiongmaoshudian.web.fc2.com)

123:名無しさん＠お腹いっぱい。
21/10/22 21:29:48.28 .net
>>122
うーん、このサイトのが見たいんだよな

124:名無しさん＠お腹いっぱい。
21/10/27 13:57:13.16 .net
>>120
・引用したサイト（消えたら意味不明になるので
・企業系など上書き更新されるサイト

125:名無しさん＠お腹いっぱい。
21/10/27 13:57:51.32 .net
＞10/27（水）の午前8時から午後1時（太平洋夏時間）の間に計画停電が発生したため、一部のサービスが影響を受ける可能性があります。

126:名無しさん＠お腹いっぱい。
21/10/27 16:25:16.45 .net
日本時間で28日午前0時から5時だな

127:名無しさん＠お腹いっぱい。
21/10/27 16:46:00.02 .net
検索するとサンフランシスコでは先週末の暴風雨の影響で一部の地域で停電とネット停止してまだ復旧終わってないそう
電気自動車やカリフォルニアの窃盗軽犯罪化と盗電どころじゃねーわw
データセンターがある環境悪すぎ

128:名無しさん＠お腹いっぱい。
21/10/28 00:06:10.40 .net
>>120
俺は新型コロナ・ワクチン関係の記事とか発言保存してるわ
世界大戦並みの負の遺産として将来語り継がれると個人的に思ってるから

129:名無しさん＠お腹いっぱい。
21/10/28 14:30:10.73 .net
>>122 昨日そのサイト内の保存されてない40ページほどをSPNに投げて保存しといた

130:名無しさん＠お腹いっぱい。
21/10/28 15:40:15.32 .net
俺はTwitter保存してる

131:名無しさん＠お腹いっぱい。
21/10/29 00:37:39.37 .net
>>109
久しぶりに消えたアーカイブ見たら復活してました
一時的に消えることがあるみたいです

132:名無しさん＠お腹いっぱい。
21/10/29 01:28:08.82 .net
最近 Google Chrome で archive.is が archive.md にリダイレクトして
DNS_PROBE_FINISHED_NXDOMAIN エラーになってた。
セキュアDNS設定を Cloudflare から Google に変更して解決。

133:名無しさん＠お腹いっぱい。
21/10/29 12:42:57.33 .net
>>128
同じこと考えてた。

134:名無しさん＠お腹いっぱい。
21/10/30 00:38:00.23 .net
世界史に残る病気ってもっと「半分の確率で死ぬ恐怖の奇病」みたいなものを想像してたな
「風邪＋α」の、＋α部分が絶妙に対処しづらくてこんな大事件になるとは

135:名無しさん＠お腹いっぱい。
21/10/31 20:50:00.87 .net
とあるサイトをアーカイブしたいのですが
No URL has been captured for this domain.
と出ます
これはもう何をしても無理でしょうか？

136:名無しさん＠お腹いっぱい。
21/10/31 21:14:29.11 .net
>>135
これからアーカイブするんだろ？
そのドメインでアーカイブ済みのURLがあろうが無かろうが関係無いだろが

137:名無しさん＠お腹いっぱい。
21/10/31 23:18:41.29 .net
>>136
保存できないんです
URLに日本語が含まれているせいでしょうか
勝手に記号化してくれますが無理なようです

138:名無しさん＠お腹いっぱい。
21/11/01 01:35:41.17 .net
If something went wrong click here to send us an error report.

139:名無しさん＠お腹いっぱい。
21/11/01 10:33:55.59 .net
80%が2回接種済みのシンガポール
陽性者数はまだウナギ登り状態
URLﾘﾝｸ(i.imgur.com)

140:名無しさん＠お腹いっぱい。
21/11/01 10:34:20.66 .net
>>139
誤爆すまん

141:名無しさん＠お腹いっぱい。
21/11/02 17:31:29.73 .net
>>139
ちゃんとアーカイブされていた

142:名無しさん＠お腹いっぱい。
21/11/02 18:50:30.74 .net
インターネットアーカイブがサービス終了する未来はあると思いますか？
サーバーの維持費や違法性などが理由で

143:名無しさん＠お腹いっぱい。
21/11/02 18:56:43.14 .net
違法性ｗ

144:名無しさん＠お腹いっぱい。
21/11/03 19:05:27.57 .net
internetarchiveに寄付しよう

145:名無しさん＠お腹いっぱい。
21/11/04 01:52:35.20 .net
そういえば訴訟の裁判は今月から始まるんだっけか？
今はどうなってるか分からないけど
URLﾘﾝｸ(www.publishersweekly.com)

146:名無しさん＠お腹いっぱい。
21/11/04 16:28:58.64 .net
自分のツイートのアーカイブって消そうと思えば消せるの？

147:名無しさん＠お腹いっぱい。
21/11/04 17:46:33.64 .net
>>146
消したくなるようなことは書くな
歴史修正主義者は失せろ

148:名無しさん＠お腹いっぱい。
21/11/05 01:58:35.57 .net
APIのレスポンス、リダイレクトの場合も空で返ってくるのか・・・

149:名無しさん＠お腹いっぱい。
21/11/07 05:47:59.29 .net
何この訳分からんエラー
Unknown error for chrome-error://chromewebdata/ (HTTP status=0).

150:名無しさん＠お腹いっぱい。
21/11/13 23:05:28.24 .net
【皆様へ大切なお知らせ】過去動画の公開停止と今後の配信について - YouTube
URLﾘﾝｸ(www.youtube.com)

151:名無しさん＠お腹いっぱい。
21/11/14 17:31:28.15 .net
noteとInstagram保存したい

152:名無しさん＠お腹いっぱい。
21/11/15 01:03:53.70 .net
ヤフオクのページを取得しようとすると、
Unknown error for chrome-error://chromewebdata/ (HTTP status=0).
と出て取得できない。

153:名無しさん＠お腹いっぱい。
21/11/15 03:36:09.51 .net
>>152
試しに force_get=1 のパラメータを追加して保存させてみると
The server didn't respond in time for https:～のエラーが返る。
ヤフオクが Internet Archive の接続を拒否しているのは間違いないね。
ただ、どうしてこれが IA から事前に送られているはずの HEAD リクエストで
検出できていないのかが解らん。
HEAD は 200 OK しておきながらいざ GET となると無応答で、
ヘッドレスブラウザの返したエラーページの chrome-error URL を
そのまま表示しちゃったりしているのか?
パラメータについても HEAD やら GET やらについても >>4 のドキュメントを参照。

154:名無しさん＠お腹いっぱい。
21/11/16 06:06:12.95 .net
This page is unavailable for archiving right now!
This page is available on the web but its quite busy. Please check again later.

155:名無しさん＠お腹いっぱい。
21/11/16 19:54:51.84 .net
それって何がbusyなの？元サイト？アーカイブ？

156:名無しさん＠お腹いっぱい。
21/11/16 20:46:36.21 .net
weiboってアーカイブできない？

157:名無しさん＠お腹いっぱい。
21/11/17 02:09:52.09 .net
imgurがserver errorやnot foundでとれない

158:名無しさん＠お腹いっぱい。
21/11/17 04:30:52.28 .net
たまにsavepagenowで404NotFoundが出るのは鯖が重いんだろうか

159:名無しさん＠お腹いっぱい。
21/11/17 04:50:37.25 .net
Not FoundだったりThe same snapshot had been made * minutes and ** seconds ago. だったり

160:名無しさん＠お腹いっぱい。
21/11/17 05:16:51.29 .net
Not Foundと出る割には取得できてる場合も

161:名無しさん＠お腹いっぱい。
21/11/17 23:42:00.76 .net
中国とロシアからブロックされてるというのは中国ロシアの国からはアクセスできないってこと？
weibo普通に保存できたけど中国のサイトを日本人がアーカイブするのは可能なんだね

162:名無しさん＠お腹いっぱい。
21/11/18 00:21:19.12 .net
>>161
お前が無知だからそんなことで感心していられるんだよ

163:名無しさん＠お腹いっぱい。
21/11/18 11:09:29.58 .net
無知ですいません
てっきり中華サイトとか無理なのかと思ってた

164:名無しさん＠お腹いっぱい。
21/11/20 06:50:42.94 .net
Service Unavailable for None (HTTP status=503).

165:名無しさん＠お腹いっぱい。
21/11/21 14:54:01.35 .net
Sorry
Please try again in ~1 min. Crawling this host is paused
because they notified us that are overloaded right now.

166:名無しさん＠お腹いっぱい。
21/11/21 20:24:57.76 .net
in ~1 minってどういう意味なん？
日本語で「～1分」だったら1分以内だけど文脈的に逆っぽい気がする
もし以上だとしたらどういう原理で前に~が付くんだろうか

167:名無しさん＠お腹いっぱい。
21/11/21 20:57:53.56 .net
英語では約 1 分 (approximately)
URLﾘﾝｸ(docs.google.com)
2021-05-23
(略)
If a target site returns HTTP status=429 (too many requests), we pause crawling that for a minute.
この仕様をそのように説明してるんじゃないのか

168:名無しさん＠お腹いっぱい。
21/11/21 23:34:58.31 .net
なるほど、約なんだ。

169:名無しさん＠お腹いっぱい。
21/11/22 00:52:22.11 .net
旧~聖書

170:名無しさん＠お腹いっぱい。
21/11/22 23:31:51.26 .net
もしかしてYouTubeのプレイリストでOutlinks使うと
表示されていない下の方の動画も保存しといてくれるのか？

171:名無しさん＠お腹いっぱい。
21/11/23 00:33:15.25 .net
そもそもどういうときに保存されるのかよくわからんぜ

172:名無しさん＠お腹いっぱい。
21/11/23 19:59:31.87 .net
>>170
outlink とは、自ホスト内でなく他ホストへのリンクのことですよ

173:名無しさん＠お腹いっぱい。
21/11/23 20:25:03.86 .net
>>172
> outlink とは、自ホスト内でなく他ホストへのリンクのことですよ
おいおいｗ

174:名無しさん＠お腹いっぱい。
21/11/24 20:00:32.10 .net
画像単独でSPNする人いるんだね

175:名無しさん＠お腹いっぱい。
21/11/25 10:09:28.50 .net
普通にやるでしょ。
うpろだやImgurの画像を保存したい時とか。期限切れや削除依頼されてすぐ消えるじゃん。

176:名無しさん＠お腹いっぱい。
21/11/25 15:47:24.28 .net
単独なのかどこかに埋まってたのかはどう判別したらいいの？

177:名無しさん＠お腹いっぱい。
21/11/25 16:32:19.77 .net
画像付きってアーカイブしても何年後とかに消えたりしませんか？
昔のサイトを見ても画像だけ見れないの多くて

178:名無しさん＠お腹いっぱい。
21/11/26 02:35:55.32 .net
それは単にアーカーブされてないんだと思う

179:名無しさん＠お腹いっぱい。
21/11/26 05:49:26.19 .net
昔のアーカイヴ技術が微妙で上手く保存できてなかったんでしょ、どうせ。

180:名無しさん＠お腹いっぱい。
21/11/26 12:17:41.76 .net
今でもJavaScript乱用していてスクロールやクリックしないとサイトの内容が完全に表示されなかったり、
レイジーロードで遅延読み混みしてるサイトは画像が保存されてない可能性がある。
画像のURLを抜き出してSPNで1個ずつ保存するのが一番確実だけど、まあめんどくさい。
Googlebotですら対応できてないものをIAでできないだろうな。

181:名無しさん＠お腹いっぱい。
21/11/26 13:56:44.46 .net
そもそもヘッドレスブラウザを実装して、必要な画像も一緒に保存できるようになったのが
Internet Archive の長い歴史の中でごく最近の話なんだけどな。
それまではアーカイブ済み HTML を誰かが表示して初めて画像の URL が IA に送られ
保存を試行するという仕組みが採られていたけど、種々の利用により
上手く動作しないことがあった。

182:名無しさん＠お腹いっぱい。
21/11/26 17:30:44.16 .net
昨日辺りからTwitterのツイートのページを取得すると新UIになってしまった・・・
数日前までは取得すると何故か旧UIで取得されるようになってたけど、ついに対策されたか・・・

183:名無しさん＠お腹いっぱい。
21/11/26 23:50:05.84 .net
twitterの魚拓の質が上がってきてるな

184:名無しさん＠お腹いっぱい。
21/11/27 20:44:50.24 .net
俺が7月にSPNで保存したページに表示されていた、保存失敗した画像を、
11月の今になってsave-page-now-outlinksが保存してるのを発見した。
過去のページをさかのぼって保存できてない画像を自動で保存してくれるのはありがたい。

185:名無しさん＠お腹いっぱい。
21/11/28 14:35:12.25 .net
wayforwardって以前waybackmachineから削除されたサイトでもタイムカプセル出来るの？

186:名無しさん＠お腹いっぱい。
21/11/28 20:47:12.32 .net
>>181
ページ中の画像が取得されるようになったのってマジで最近（2020年）だしな

187:名無しさん＠お腹いっぱい。
21/11/28 23:36:13.01 .net
まあ大変なのは素人目にもわかるわ

188:名無しさん＠お腹いっぱい。
21/11/30 01:01:47.65 .net
No URL has been captured for this domain.
日本語がURLに入ると上のように出てダメです
どうやって保存したら良いですか？
初心者なので誰か教えて下さると有難いです

189:名無しさん＠お腹いっぱい。
21/11/30 19:41:07.68 .net
>>188
日本語URLでもアラビア語でも普通に取れるよ
ちゃんとsave page nowに入れてる？
そのエラーはspnでは出ないと思うけど

190:名無しさん＠お腹いっぱい。
21/11/30 21:27:20.15 .net
>>189
できました！
勘違いしていました本当に有難うございました

191:名無しさん＠お腹いっぱい。
21/12/01 15:39:29.57 .net
>>174
NHK系とか素直じゃない構造のやつとか期間が来たら別画像で上書きしたり引っ越したりするサイトで必要

192:名無しさん＠お腹いっぱい。
21/12/01 22:24:22.95 .net
>>186
えー、/web/URLﾘﾝｸ(〜)をWebブラウザから見て、そのページの画像が保存されてなかったら自動で元のサイトに取りに行って保存して表示する仕組みは昔からあったよ。
少なくとも10年前にはあったはず。今のSave Page Nowの前身Liveweb Proxyでもやってた。SPN登場前は今みたいな同時保存回数の制限すらなかった。
といっても、サイト消えてる時にWayback Machineの保存ページを見るのがほとんどだから、消えたサイトの保存されてない画像は永遠に表示されないのが現実なわけで。

193:名無しさん＠お腹いっぱい。
21/12/01 23:32:05.46 .net
それの話をしてるんじゃないと思うよ…
それはレス元の >>181が言ってるやつの派生かと

194:名無しさん＠お腹いっぱい。
21/12/02 20:17:19.41 .net
リダイレクトのとき、if_not_archived_within が効かない

195:名無しさん＠お腹いっぱい。
21/12/02 22:42:31.47 .net
えー効いてるように思えるけどな
逆に、直近の 200 応答のアーカイブが無視されてしまい、
アーカイブしない条件のはずなのにアーカイブしてしまったことがある

196:名無しさん＠お腹いっぱい。
21/12/03 00:33:15.45 .net
前スレ836で捨てアドでアカウント作れないって書いてる人いたけど、色々試したが今は作れるみたい。
ただし、アップロードするときにお前のメアドはスパム臭えってエラーが出ることがあるので、
適当すぎる文字列じゃなくてフィルタに引っかからない自然なメアドでアカウント作ればOK。

197:名無しさん＠お腹いっぱい。
21/12/03 00:36:39.06 .net
あと、
URLﾘﾝｸ(web.archive.org)から始まる保存されてるページを一覧表示してくれる機能がちょっと新しくなったみたいで、表示できない問題が起きてる。
フォームにも書いてる人いる。
URLﾘﾝｸ(archive.org)

198:名無しさん＠お腹いっぱい。
21/12/03 16:05:14.95 .net
今のところ197のエラーは直ったかな

199:名無しさん＠お腹いっぱい。
21/12/03 20:38:52.18 .net
サイト側から削除依頼以外で消されることってあるの？excludedって出る。復活掲載は絶望的かしら。

200:名無しさん＠お腹いっぱい。
21/12/03 23:27:32.07 .net
永久に残るなんて有り得ないからね

次ページ