Internet Archive総合 (web.archive.org) #4

Internet Archive総合 ..

84:名無しさん＠お腹いっぱい。
21/09/29 20:05:16.09 .net
いつの間にかtwitterの動画保存できるようになってるじゃん

85:名無しさん＠お腹いっぱい。
21/09/29 20:49:15.44 .net
>>84
（・o ・）ほぉ！

86:名無しさん＠お腹いっぱい。
21/09/29 23:07:40.75 .net
消されたtwitterアカウントの過去ツイ遡りたいんだけど、どうやって検索すればいいか分からん

87:名無しさん＠お腹いっぱい。
21/10/01 01:01:19.89 .net
わからんならやめたれ

88:名無しさん＠お腹いっぱい。
21/10/01 04:25:58.46 .net
中国のweiboってアーカイブ出来ないんでしょうか？

89:名無しさん＠お腹いっぱい。
21/10/01 12:24:43.05 .net
新しくURLsタブ出来たけど、バグってるのか表示されないな

90:名無しさん＠お腹いっぱい。
21/10/01 14:04:39.61 .net
>>89
バグだね。ホスト名より前の部分 (URL スキーム名 + 斜線) を除くと動く。
URLﾘﾝｸ(i.imgur.com)

91:名無しさん＠お腹いっぱい。
21/10/01 20:37:46.76 .net
夏にTwitterアカウントのアーカイブ削除依頼を出したんだけど、
翻訳ソフト使ったけど、
回答が難解すぎてまったく分からない。
アドレスだとかURLか何か要求していることだけは分かったけど、
この場合、何を出せばいいのですか？
今まで使ってたサービスとか昔書いてたブログとか
順次アーカイブから除去していくつもりなんだけど、
最初に手を付けたTwitterですら消し方が分からない……

92:名無しさん＠お腹いっぱい。
21/10/01 21:04:21.76 .net
残されて困るようなことを書いたお前が悪い。諦めろ。

93:名無しさん＠お腹いっぱい。
21/10/01 22:48:00.80 .net
>>91
本人証明して削除してもらうみたいな話は聞いたことある
Twitterとかブログで削除依頼出してます的な文を投稿をすれば本人だと証明できるのかな
取り敢えず個人情報伏せてメール文貼り付ければ誰か解読してくれるんじゃね？

94:名無しさん＠お腹いっぱい。
21/10/02 04:31:41.79 .net
こころんにあるミラーはIAを弾いてるっぽいし、エロゲ系ミラーサイトの大半は閉鎖済みだしどうしようもない

95:名無しさん＠お腹いっぱい。
21/10/02 23:58:43.15 .net
URLﾘﾝｸ(wayforward.archive.org)
この未来起こりうる陰謀論みたいなシナリオみたいなのはなんなの
がっかり

96:名無しさん＠お腹いっぱい。
21/10/03 00:58:38.21 .net
>>95
確かにビックリな内容だけど俺は安心したわ
検閲が強化され続けてる実情を踏まえると、ここまで最悪のシナリオを想定して運営してくれてるのなら信頼できる

97:名無しさん＠お腹いっぱい。
21/10/03 19:43:00.18 .net
コスパ系のサイト保存すると盥回しみたいに転送されまくって元のドメインに戻ってくる仕様クソ過ぎるな。
IAではなくコスパ側の仕様だが。

98:名無しさん＠お腹いっぱい。
21/10/03 20:00:54.17 .net
無限盥回しでいつになってもアーカイブが表示されない場合もある。これは酷い

99:名無しさん＠お腹いっぱい。
21/10/04 01:43:25.24 .net
コスパ系のサイトとは一体

100:名無しさん＠お腹いっぱい。
21/10/05 15:38:13.03 .net
前までURL入れたら見れていたサイトが急に見れなくなる原因ってなんですか？
随分昔の個人サイトで今さら削除申請した訳でも無さそうなのですが何が原因なんでしょう
こういう例がいくつもあります

101:名無しさん＠お腹いっぱい。
21/10/05 22:21:22.34 .net
>>100
一時的に見れないって訳じゃないなら削除申請以外考えられないかな
そのサイトのエラーメッセージを貼ってくれないと何とも言えない

102:名無しさん＠お腹いっぱい。
21/10/08 09:09:08.20 .net
>>97
TMJ移転のお知らせ

103:名無しさん＠お腹いっぱい。
21/10/09 15:57:54.85 .net
ヤフーニュースをアーカイブしてもトップページに遷移されずに
無難にアーカイブできるようになっている。
いつの間にか。

104:名無しさん＠お腹いっぱい。
21/10/09 18:48:40.91 .net
楽天は？

105:名無しさん＠お腹いっぱい。
21/10/10 06:38:26.34 .net
save-page-now-outlinksが復活してる。
SPN使って手動で保存したページのリンク先がいくつか保存されてるのも確認。

106:名無しさん＠お腹いっぱい。
21/10/11 06:09:54.04 .net
インターネットアーカイブ25周年記念ビデオメッセージサイト
URLﾘﾝｸ(internetarchive25.capsule.video)
日系アメリカ人
横浜在住外国人
英語が苦手なチー牛

107:名無しさん＠お腹いっぱい。
21/10/13 21:58:44.94 .net
Sorry
This host has been already captured 100,000 times today. Please email us at "info@archive.org" if you would like to discuss this more.

108:名無しさん＠お腹いっぱい。
21/10/14 03:19:26.35 .net
応じてくれるの？

109:名無しさん＠お腹いっぱい。
21/10/14 05:00:41.52 .net
アーカイブが見れなくなったことを質問したときの回答
>Please note that the Wayback Machine uses multiple layers of indexes to internally access archives of URLs.
>Therefore, from time to time, information is moved from one index before it is available in the “next” index.
>Our engineers are working to address the root cause of this breakdown to reduce the probability it will happen.
>However, with > 1 billion URLs/day flowing into the system, and less hardware than we would like, it is a bit harder to fix once and for all.
>Typically, though, what you see is what the Archive captured when it visited the webpage (and what we have).

110:名無しさん＠お腹いっぱい。
21/10/14 18:30:08.24 .net
英語じゃないか

111:名無しさん＠お腹いっぱい。
21/10/14 19:17:27.38 .net
>>110
だからどうした低能
英語のサイトの話をしてるくせに

112:名無しさん＠お腹いっぱい。
21/10/14 20:54:09.53 .net
口が悪い…

113:名無しさん＠お腹いっぱい。
21/10/16 01:27:51.93 .net
>>107
最近これが頻繁に出る
その日初めてのアーカイブでも出る

114:名無しさん＠お腹いっぱい。
21/10/16 06:14:39.06 .net
>>113
既に「一日」の3分の2が過ぎてる時間帯にそんなこと書いてる時点でお察し

115:名無しさん＠お腹いっぱい。
21/10/17 21:25:56.42 .net
>>114
アメリカ基準だからってこと？

116:名無しさん＠お腹いっぱい。
21/10/18 07:27:23.85 .net
>>115
それじゃ計算合わないよね。
所在地は米国だけど、世界標準を意識してか日付の区切りは協定世界時なんだな。
例えば >>39 の「今さっき」は 22 時台。
0 時は日本時間朝 9 時。

117:名無しさん＠お腹いっぱい。
21/10/18 08:57:01.05 .net
ああ、UTC基準なのか
所在地の日時かと思ってた

118:名無しさん＠お腹いっぱい。
21/10/19 15:38:16.80 .net
ロンドン時間なのか

119:名無しさん＠お腹いっぱい。
21/10/19 19:05:40.90 .net
ロンドンタイムズ

120:名無しさん＠お腹いっぱい。
21/10/20 22:39:18.13 .net
皆さんはどのようなサイトを保存していますか？

121:名無しさん＠お腹いっぱい。
21/10/22 20:16:41.27 .net
URLﾘﾝｸ(web.archive.org)URLﾘﾝｸ(bbs.avi.jp)
URLﾘﾝｸ(web.archive.org)URLﾘﾝｸ(bbs.avi.jp)
このサイトの小説を見たいのだけど復旧方法あるかな

122:名無しさん＠お腹いっぱい。
21/10/22 20:26:16.31 .net
>>121
それはちゃんと保存されていないからみられないが
サイト自体が現在も生きている
URLﾘﾝｸ(xiongmaoshudian.web.fc2.com)

123:名無しさん＠お腹いっぱい。
21/10/22 21:29:48.28 .net
>>122
うーん、このサイトのが見たいんだよな

124:名無しさん＠お腹いっぱい。
21/10/27 13:57:13.16 .net
>>120
・引用したサイト（消えたら意味不明になるので
・企業系など上書き更新されるサイト

125:名無しさん＠お腹いっぱい。
21/10/27 13:57:51.32 .net
＞10/27（水）の午前8時から午後1時（太平洋夏時間）の間に計画停電が発生したため、一部のサービスが影響を受ける可能性があります。

126:名無しさん＠お腹いっぱい。
21/10/27 16:25:16.45 .net
日本時間で28日午前0時から5時だな

127:名無しさん＠お腹いっぱい。
21/10/27 16:46:00.02 .net
検索するとサンフランシスコでは先週末の暴風雨の影響で一部の地域で停電とネット停止してまだ復旧終わってないそう
電気自動車やカリフォルニアの窃盗軽犯罪化と盗電どころじゃねーわw
データセンターがある環境悪すぎ

128:名無しさん＠お腹いっぱい。
21/10/28 00:06:10.40 .net
>>120
俺は新型コロナ・ワクチン関係の記事とか発言保存してるわ
世界大戦並みの負の遺産として将来語り継がれると個人的に思ってるから

129:名無しさん＠お腹いっぱい。
21/10/28 14:30:10.73 .net

130:"noopener noreferrer" target="_blank" class="reply_link">>>122 昨日そのサイト内の保存されてない40ページほどをSPNに投げて保存しといた

131:名無しさん＠お腹いっぱい。
21/10/28 15:40:15.32 .net
俺はTwitter保存してる

132:名無しさん＠お腹いっぱい。
21/10/29 00:37:39.37 .net
>>109
久しぶりに消えたアーカイブ見たら復活してました
一時的に消えることがあるみたいです

133:名無しさん＠お腹いっぱい。
21/10/29 01:28:08.82 .net
最近 Google Chrome で archive.is が archive.md にリダイレクトして
DNS_PROBE_FINISHED_NXDOMAIN エラーになってた。
セキュアDNS設定を Cloudflare から Google に変更して解決。

134:名無しさん＠お腹いっぱい。
21/10/29 12:42:57.33 .net
>>128
同じこと考えてた。

135:名無しさん＠お腹いっぱい。
21/10/30 00:38:00.23 .net
世界史に残る病気ってもっと「半分の確率で死ぬ恐怖の奇病」みたいなものを想像してたな
「風邪＋α」の、＋α部分が絶妙に対処しづらくてこんな大事件になるとは

136:名無しさん＠お腹いっぱい。
21/10/31 20:50:00.87 .net
とあるサイトをアーカイブしたいのですが
No URL has been captured for this domain.
と出ます
これはもう何をしても無理でしょうか？

137:名無しさん＠お腹いっぱい。
21/10/31 21:14:29.11 .net
>>135
これからアーカイブするんだろ？
そのドメインでアーカイブ済みのURLがあろうが無かろうが関係無いだろが

138:名無しさん＠お腹いっぱい。
21/10/31 23:18:41.29 .net
>>136
保存できないんです
URLに日本語が含まれているせいでしょうか
勝手に記号化してくれますが無理なようです

139:名無しさん＠お腹いっぱい。
21/11/01 01:35:41.17 .net
If something went wrong click here to send us an error report.

140:名無しさん＠お腹いっぱい。
21/11/01 10:33:55.59 .net
80%が2回接種済みのシンガポール
陽性者数はまだウナギ登り状態
URLﾘﾝｸ(i.imgur.com)

141:名無しさん＠お腹いっぱい。
21/11/01 10:34:20.66 .net
>>139
誤爆すまん

142:名無しさん＠お腹いっぱい。
21/11/02 17:31:29.73 .net
>>139
ちゃんとアーカイブされていた

143:名無しさん＠お腹いっぱい。
21/11/02 18:50:30.74 .net
インターネットアーカイブがサービス終了する未来はあると思いますか？
サーバーの維持費や違法性などが理由で

144:名無しさん＠お腹いっぱい。
21/11/02 18:56:43.14 .net
違法性ｗ

145:名無しさん＠お腹いっぱい。
21/11/03 19:05:27.57 .net
internetarchiveに寄付しよう

146:名無しさん＠お腹いっぱい。
21/11/04 01:52:35.20 .net
そういえば訴訟の裁判は今月から始まるんだっけか？
今はどうなってるか分からないけど
URLﾘﾝｸ(www.publishersweekly.com)

147:名無しさん＠お腹いっぱい。
21/11/04 16:28:58.64 .net
自分のツイートのアーカイブって消そうと思えば消せるの？

148:名無しさん＠お腹いっぱい。
21/11/04 17:46:33.64 .net
>>146
消したくなるようなことは書くな
歴史修正主義者は失せろ

149:名無しさん＠お腹いっぱい。
21/11/05 01:58:35.57 .net
APIのレスポンス、リダイレクトの場合も空で返ってくるのか・・・

150:名無しさん＠お腹いっぱい。
21/11/07 05:47:59.29 .net
何この訳分からんエラー
Unknown error for chrome-error://chromewebdata/ (HTTP status=0).

151:名無しさん＠お腹いっぱい。
21/11/13 23:05:28.24 .net
【皆様へ大切なお知らせ】過去動画の公開停止と今後の配信について - YouTube
URLﾘﾝｸ(www.youtube.com)

152:名無しさん＠お腹いっぱい。
21/11/14 17:31:28.15 .net
noteとInstagram保存したい

153:名無しさん＠お腹いっぱい。
21/11/15 01:03:53.70 .net
ヤフオクのページを取得しようとすると、
Unknown error for chrome-error://chromewebdata/ (HTTP status=0).
と出て取得できない。

154:名無しさん＠お腹いっぱい。
21/11/15 03:36:09.51 .net
>>152
試しに force_get=1 のパラメータを追加して保存させてみると
The server didn't respond in time for https:～のエラーが返る。
ヤフオクが Internet Archive の接続を拒否しているのは間違いないね。
ただ、どうしてこれが IA から事前に送られているはずの HEAD リクエストで
検出できていないのかが解らん。
HEAD は 200 OK しておきながらいざ GET となると無応答で、
ヘッドレスブラウザの返したエラーページの chrome-error URL を
そのまま表示しちゃったりしているのか?
パラメータについても HEAD やら GET やらについても >>4 のドキュメントを参照。

155:名無しさん＠お腹いっぱい。
21/11/16 06:06:12.95 .net
This page is unavailable for archiving right now!
This page is available on the web but its quite busy. Please check again later.

156:名無しさん＠お腹いっぱい。
21/11/16 19:54:51.84 .net
それって何がbusyなの？元サイト？アーカイブ？

157:名無しさん＠お腹いっぱい。
21/11/16 20:46:36.21 .net
weiboってアーカイブできない？

158:名無しさん＠お腹いっぱい。
21/11/17 02:09:52.09 .net
imgurがserver errorやnot foundでとれない

159:名無しさん＠お腹いっぱい。
21/11/17 04:30:52.28 .net
たまにsavepagenowで404NotFoundが出るのは鯖が重いんだろうか

160:名無しさん＠お腹いっぱい。
21/11/17 04:50:37.25 .net
Not FoundだったりThe same snapshot had been made * minutes and ** seconds ago. だったり

161:名無しさん＠お腹いっぱい。
21/11/17 05:16:51.29 .net
Not Foundと出る割には取得できてる場合も

162:名無しさん＠お腹いっぱい。
21/11/17 23:42:00.76 .net
中国とロシアからブロックされてるというのは中国ロシアの国からはアクセスできないってこと？
weibo普通に保存できたけど中国のサイトを日本人がアーカイブするのは可能なんだね

163:名無しさん＠お腹いっぱい。
21/11/18 00:21:19.12 .net
>>161
お前が無知だからそんなことで感心していられるんだよ

164:名無しさん＠お腹いっぱい。
21/11/18 11:09:29.58 .net
無知ですいません
てっきり中華サイトとか無理なのかと思ってた

165:名無しさん＠お腹いっぱい。
21/11/20 06:50:42.94 .net
Service Unavailable for None (HTTP status=503).

166:名無しさん＠お腹いっぱい。
21/11/21 14:54:01.35 .net
Sorry
Please try again in ~1 min. Crawling this host is paused
because they notified us that are overloaded right now.

167:名無しさん＠お腹いっぱい。
21/11/21 20:24:57.76 .net
in ~1 minってどういう意味なん？
日本語で「～1分」だったら1分以内だけど文脈的に逆っぽい気がする
もし以上だとしたらどういう原理で前に~が付くんだろうか

168:名無しさん＠お腹いっぱい。
21/11/21 20:57:53.56 .net
英語では約 1 分 (approximately)
URLﾘﾝｸ(docs.google.com)
2021-05-23
(略)
If a target site returns HTTP status=429 (too many requests), we pause crawling that for a minute.
この仕様をそのように説明してるんじゃないのか

169:名無しさん＠お腹いっぱい。
21/11/21 23:34:58.31 .net
なるほど、約なんだ。

170:名無しさん＠お腹いっぱい。
21/11/22 00:52:22.11 .net
旧~聖書

171:名無しさん＠お腹いっぱい。
21/11/22 23:31:5

172:1.26 .net

173:名無しさん＠お腹いっぱい。
21/11/23 00:33:15.25 .net
そもそもどういうときに保存されるのかよくわからんぜ

174:名無しさん＠お腹いっぱい。
21/11/23 19:59:31.87 .net
>>170
outlink とは、自ホスト内でなく他ホストへのリンクのことですよ

175:名無しさん＠お腹いっぱい。
21/11/23 20:25:03.86 .net
>>172
> outlink とは、自ホスト内でなく他ホストへのリンクのことですよ
おいおいｗ

176:名無しさん＠お腹いっぱい。
21/11/24 20:00:32.10 .net
画像単独でSPNする人いるんだね

177:名無しさん＠お腹いっぱい。
21/11/25 10:09:28.50 .net
普通にやるでしょ。
うpろだやImgurの画像を保存したい時とか。期限切れや削除依頼されてすぐ消えるじゃん。

178:名無しさん＠お腹いっぱい。
21/11/25 15:47:24.28 .net
単独なのかどこかに埋まってたのかはどう判別したらいいの？

179:名無しさん＠お腹いっぱい。
21/11/25 16:32:19.77 .net
画像付きってアーカイブしても何年後とかに消えたりしませんか？
昔のサイトを見ても画像だけ見れないの多くて

180:名無しさん＠お腹いっぱい。
21/11/26 02:35:55.32 .net
それは単にアーカーブされてないんだと思う

181:名無しさん＠お腹いっぱい。
21/11/26 05:49:26.19 .net
昔のアーカイヴ技術が微妙で上手く保存できてなかったんでしょ、どうせ。

182:名無しさん＠お腹いっぱい。
21/11/26 12:17:41.76 .net
今でもJavaScript乱用していてスクロールやクリックしないとサイトの内容が完全に表示されなかったり、
レイジーロードで遅延読み混みしてるサイトは画像が保存されてない可能性がある。
画像のURLを抜き出してSPNで1個ずつ保存するのが一番確実だけど、まあめんどくさい。
Googlebotですら対応できてないものをIAでできないだろうな。

183:名無しさん＠お腹いっぱい。
21/11/26 13:56:44.46 .net
そもそもヘッドレスブラウザを実装して、必要な画像も一緒に保存できるようになったのが
Internet Archive の長い歴史の中でごく最近の話なんだけどな。
それまではアーカイブ済み HTML を誰かが表示して初めて画像の URL が IA に送られ
保存を試行するという仕組みが採られていたけど、種々の利用により
上手く動作しないことがあった。

184:名無しさん＠お腹いっぱい。
21/11/26 17:30:44.16 .net
昨日辺りからTwitterのツイートのページを取得すると新UIになってしまった・・・
数日前までは取得すると何故か旧UIで取得されるようになってたけど、ついに対策されたか・・・

185:名無しさん＠お腹いっぱい。
21/11/26 23:50:05.84 .net
twitterの魚拓の質が上がってきてるな

186:名無しさん＠お腹いっぱい。
21/11/27 20:44:50.24 .net
俺が7月にSPNで保存したページに表示されていた、保存失敗した画像を、
11月の今になってsave-page-now-outlinksが保存してるのを発見した。
過去のページをさかのぼって保存できてない画像を自動で保存してくれるのはありがたい。

187:名無しさん＠お腹いっぱい。
21/11/28 14:35:12.25 .net
wayforwardって以前waybackmachineから削除されたサイトでもタイムカプセル出来るの？

188:名無しさん＠お腹いっぱい。
21/11/28 20:47:12.32 .net
>>181
ページ中の画像が取得されるようになったのってマジで最近（2020年）だしな

189:名無しさん＠お腹いっぱい。
21/11/28 23:36:13.01 .net
まあ大変なのは素人目にもわかるわ

190:名無しさん＠お腹いっぱい。
21/11/30 01:01:47.65 .net
No URL has been captured for this domain.
日本語がURLに入ると上のように出てダメです
どうやって保存したら良いですか？
初心者なので誰か教えて下さると有難いです

191:名無しさん＠お腹いっぱい。
21/11/30 19:41:07.68 .net
>>188
日本語URLでもアラビア語でも普通に取れるよ
ちゃんとsave page nowに入れてる？
そのエラーはspnでは出ないと思うけど

192:名無しさん＠お腹いっぱい。
21/11/30 21:27:20.15 .net
>>189
できました！
勘違いしていました本当に有難うございました

193:名無しさん＠お腹いっぱい。
21/12/01 15:39:29.57 .net
>>174
NHK系とか素直じゃない構造のやつとか期間が来たら別画像で上書きしたり引っ越したりするサイトで必要

194:名無しさん＠お腹いっぱい。
21/12/01 22:24:22.95 .net
>>186
えー、/web/URLﾘﾝｸ(&am)

195:p;#12316;をWebブラウザから見て、そのページの画像が保存されてなかったら自動で元のサイトに取りに行って保存して表示する仕組みは昔からあったよ。少なくとも10年前にはあったはず。今のSave Page Nowの前身Liveweb Proxyでもやってた。SPN登場前は今みたいな同時保存回数の制限すらなかった。といっても、サイト消えてる時にWayback Machineの保存ページを見るのがほとんどだから、消えたサイトの保存されてない画像は永遠に表示されないのが現実なわけで。

196:名無しさん＠お腹いっぱい。
21/12/01 23:32:05.46 .net
それの話をしてるんじゃないと思うよ…
それはレス元の >>181が言ってるやつの派生かと

197:名無しさん＠お腹いっぱい。
21/12/02 20:17:19.41 .net
リダイレクトのとき、if_not_archived_within が効かない

198:名無しさん＠お腹いっぱい。
21/12/02 22:42:31.47 .net
えー効いてるように思えるけどな
逆に、直近の 200 応答のアーカイブが無視されてしまい、
アーカイブしない条件のはずなのにアーカイブしてしまったことがある

199:名無しさん＠お腹いっぱい。
21/12/03 00:33:15.45 .net
前スレ836で捨てアドでアカウント作れないって書いてる人いたけど、色々試したが今は作れるみたい。
ただし、アップロードするときにお前のメアドはスパム臭えってエラーが出ることがあるので、
適当すぎる文字列じゃなくてフィルタに引っかからない自然なメアドでアカウント作ればOK。

200:名無しさん＠お腹いっぱい。
21/12/03 00:36:39.06 .net
あと、
URLﾘﾝｸ(web.archive.org)から始まる保存されてるページを一覧表示してくれる機能がちょっと新しくなったみたいで、表示できない問題が起きてる。
フォームにも書いてる人いる。
URLﾘﾝｸ(archive.org)

201:名無しさん＠お腹いっぱい。
21/12/03 16:05:14.95 .net
今のところ197のエラーは直ったかな

202:名無しさん＠お腹いっぱい。
21/12/03 20:38:52.18 .net
サイト側から削除依頼以外で消されることってあるの？excludedって出る。復活掲載は絶望的かしら。

203:名無しさん＠お腹いっぱい。
21/12/03 23:27:32.07 .net
永久に残るなんて有り得ないからね

204:名無しさん＠お腹いっぱい。
21/12/04 10:23:17.08 .net
save out linksにチェックを入れてるのに無視しやがる…
最近は取得エラーも多発してたし、そんなに負荷のかかる代物なのだろうか…

205:名無しさん＠お腹いっぱい。
21/12/04 10:35:35.43 .net
IAに削除させたのに自社サイトに他社のIAアーカイブURLのリンク貼ってる企業ってどう思いますか？
A「B社は過去にこんなサイト内容でした、と」
A「おいIA、勝手にうちのサイトをアーカイブしてんじゃねえ！」

206:名無しさん＠お腹いっぱい。
21/12/04 12:03:29.09 .net
>>202
中国人・朝鮮人・韓国人や奴らの政府の身になって考えてみなよ。

207:名無しさん＠お腹いっぱい。
21/12/04 15:02:23.86 .net
>>203
難しすぎてわかりません。

208:名無しさん＠お腹いっぱい。
21/12/04 19:05:52.50 .net
Unknown error多すぎ

209:名無しさん＠お腹いっぱい。
21/12/05 16:41:53.58 .net
なんか最近3分の2くらいの確率で保存できない

210:名無しさん＠お腹いっぱい。
21/12/05 19:37:59.98 .net
Unknown error for chrome-error://chromewebdata/ (HTTP status=0).
これはもう諦めるしかない？

211:名無しさん＠お腹いっぱい。
21/12/06 18:56:36.91 .net
Firefox のプライベートモードで URLﾘﾝｸ(archive.org) を開いて入力欄に文字を入れると
その文字が見えなくなってしまうという問題が起きていたけど、直ったのね

212:名無しさん＠お腹いっぱい。
21/12/08 00:32:57.69 .net
URLﾘﾝｸ(web.archive.org)
でドメインとディレクトリ指定して保存されてるページが一覧で見れるのが改悪してる！
今まで10万ページまでだったのに、1万ページに減ってるんだが
More than 10,000 URLs have been captured for this URL prefix.

213:アジア・バンバータ(北海道)
21/12/08 22:28:45.46 .net
ここの老舗魚拓サイトって、BATとかいう仮想通貨をコジってるよな
Braveってブラウザ使って閲覧すると、寄付の案内が出てくるんだが
この話既出だったらゴメン

214:名無しさん＠お腹いっぱい。
21/12/09 22:30:51.97 .net
そりゃBraveブラウザで広告費や寄付受け取るサイト運営者の登録やってるから表示はするでしょ。
寄附キャンペーン中だからってのもあるだろうけど、気になるなら広告ブロックか何かで要素ごと消せばいいよ。

215:名無しさん＠お腹いっぱい。
21/12/10 05:27:52.68 .net
BATが寄付出来るのはBraveブラウザの基本機能なんだがな・・・
単なるアドブロッカーか何かと勘違いしてないか？

216:名無しさん＠お腹いっぱい。
21/12/11 13:17:53.59 .net
URLﾘﾝｸ(web.archive.org)
へぇーこんなページがあるんだ
URLﾘﾝｸ(web.archive.org) からここへリダイレクトされたわｗ
URLﾘﾝｸ(o.5ch.net)

217:名無しさん＠お腹いっぱい。
21/12/11 17:06:24.95 .net
腹立つわ　鍵の開け閉めを繰り返してすぐツイ消しする奴のツイート記録しようと思ったのにここ最近上手く記録してくれないから記録出来てない内にツイート消された
そもそもツイ垢のトークンとか使えるようにしてくれたら鍵垢の鍵が開くまで待って開いた瞬間から開いてる内に飢えたピラニアみたいにアーカイブ録りまくる必要もなくなるのに

218:名無しさん＠お腹いっぱい。
21/12/11 21:41:13.96 .net
Twitterは、
URLﾘﾝｸ(web.archive.org) (いつも失敗)と
URLﾘﾝｸ(archive.today)<)

219:名無しさん＠お腹いっぱい。
21/12/11 21:57:37.67 .net
>>214
自身はTwitterにログインしてないブラウザで取りに行ってるの？
俺が巡回してた鍵アカのログは直接本人にフォロー承認もらったから残そうと思えば何時でもブラウザのページ保存で残せるけど…
最近のTwitter社はアーカイブするとレイアウトが崩れたり議論ツリー記録しに行っても余計な「固定ツイート」まで混ざったりして改悪し過ぎだけど…

220:名無しさん＠お腹いっぱい。
21/12/11 22:36:19.94 .net
>>216
> 残そうと思えば何時でもブラウザのページ保存で残せるけど…
ローカル保存でオナって満足してる奴は巣に帰れ

221:名無しさん＠お腹いっぱい。
21/12/11 23:55:31.56 .net
>>214
今仕方なくPCとスマホアプリのTL参照しながらどれが消えててどれが消えてないかを確かめながらスクショをペイントに貼って1日のツイート纏めてるところ
twitterのTLもずっと残らないのが腹立つんだよなぁ
やり方さえ知ってればネット使える誰もが見れるってのがいいんだよ
暇さえあれば消えたツイ垢のツイートひたすら漁ったりするし何年も活動してる垢が将来的に消える可能性に備えてウン万ある過去のツイートを一個一個手作業で保存させたり…
この保存作業もたった一人の人力だと不毛なんだよなぁ　Wayback machineが自動でツイート取るようになる以前のツイートも自動で集めとけよって思う

222:名無しさん＠お腹いっぱい。
21/12/12 03:19:28.82 .net
2:00くらいからずっと503 Service Unavailable

223:名無しさん＠お腹いっぱい。
21/12/12 09:50:54.47 .net
TLS1.2の壁なのかどうしても取れなかったり、表示レイアウトの異なるUserAgent別（PC⇔スマホ⇔ガラケー等）には直接取り分けらなかったりするのは、いったんローカル保存してからどっかのレンタル鯖に上げ直してアーカイブしている。

224:名無しさん＠お腹いっぱい。
21/12/13 20:11:59.31 .net
jsonファイルで保存されたツイートのアーカイブって復元出来んのかなぁ
何て描かれてたかすらわからん

225:名無しさん＠お腹いっぱい。
21/12/14 00:44:54.05 .net
最終的に残りそうなアーカイブサイトは何処？
やはりウェイバックマシン？

226:名無しさん＠お腹いっぱい。
21/12/14 16:23:58.84 .net
ウェイバック

227:名無しさん＠お腹いっぱい。
21/12/14 17:05:35.98 .net
営利企業がやってるやつとかtodayみたいに素性が不明のものは消える可能性が高いと思う
残るのはIAかCommon Crawlらへんだと思う

228:名無しさん＠お腹いっぱい。
21/12/14 18:47:58.89 .net
Waybackは広く浅くはいけるが深い所まで保存出来んのがな
ツイートの2分までしかアップロード出来ん動画すら保存されないという有様だ
動画みたいな重めのファイルを自分の手許にずっと置きたくはないけどネット上からは消えさせないようにするにはどこにアップロードするのがいいんだろうか？

229:名無しさん＠お腹いっぱい。
21/12/14 19:44:04.04 .net
URLﾘﾝｸ(archive.org)

230:名無しさん＠お腹いっぱい。
21/12/14 21:56:30.93 .net
twitterのプロフィールを片っ端から手動保存してる人おる？

231:名無しさん＠お腹いっぱい。
21/12/14 23:01:17.40 .net
Waybackは保存してるサイト自体は多くて助かるんだが検索機能が糞過ぎるんよな

232:名無しさん＠お腹いっぱい。
21/12/14 23:02:57.85 .net
昨日からサイトマップが何も表示されないんだが俺だけか？
URLﾘﾝｸ(web.archive.org)URLﾘﾝｸ(www.2ch.net)

233:名無しさん＠お腹いっぱい。
21/12/15 11:31:05.78 .net
高性能なワード検索機能欲しいよな

234:名無しさん＠お腹いっぱい。
21/12/16 00:50:27.36 .net
URL部分マッチと<title>検索だけでもあれば全然違う

235:名無しさん＠お腹いっぱい。
21/12/16 22:47:16.08 .net
PDF検索は出来るようになったっぽい？

236:名無しさん＠お腹いっぱい。
21/12/19 15:01:04.51 .net
Youtubeの規制が緩くなったと思ったら今度はTwitterが厳しくなってる
前から思うけど１分待っても取れないの笑う
Sorry
Please try again in ~1 min. Crawling this host is paused because they notified us that are overloaded right now.

237:名無しさん＠お腹いっぱい。
21/12/19 20:12:59.69 .net
CDX APIのURLはweb.archive.org/cdx/以降は適当でも大丈夫なんだな

238:名無しさん＠お腹いっぱい。
21/12/19 20:24:57.52 .net
( >ω<)/~~ ~1 min

239:名無しさん＠お腹いっぱい。
21/12/21 06:05:09.19 .net
API調子悪い

240:名無しさん＠お腹いっぱい。
21/12/22 12:56:49.40 .net
>>233
Google検索結果も取りにくい

241:名無しさん＠お腹いっぱい。
21/12/24 21:50:09.68 .net
Sorry
This URL is in our block list and cannot be captured.
これ初めて見た。公式Twitterだし変な内容でもないのに

242:名無しさん＠お腹いっぱい。
21/12/25 01:03:49.06 .net
>>238
それ最近増えた印象
まぁ妥当だろうなってサイトもあれば（アーカイブサイトとしてどうかとは思うけど）
何でこのサイトが？っていうのもあってよく分からない

243:名無しさん＠お腹いっぱい。
21/12/25 02:45:51.97 .net
インターネットアーカイブが存在する意味が無くなる

244:名無しさん＠お腹いっぱい。
21/12/25 11:12:34.49 .net
まあ別にSPNに頼らず、捨て垢作ってarchive.orgの方にwarcかzipでアップロードしとけば保存できるし、
将来非表示ブロックが解除されたときに見れればいいので、ブロックされてようがあんまり気にはしない。

245:名無しさん＠お腹いっぱい。
21/12/27 18:52:49.92 .net
twitterの保存制限する理由がよくわからん

246:名無しさん＠お腹いっぱい。
21/12/29 20:59:16.27 .net
Twitter公式がムチャクチャ重くなったからツイート本文だけ取りたい場合は
「Twitter検索サービス（ URLﾘﾝｸ(t-proj.com) ）｣
のキャッシュログから取ったりする。

247:名無しさん＠お腹いっぱい。
21/12/31 15:53:34.66 .net
>>225
ソースコードから動画のURL（pbs.twimg.comから始まるやつ）を抜き出して、そのURLをそのまま保存すればいいよ、
と思ったが、最近Twitterの動画は仕様が変わって、mp4ファイルとかじゃなくて、m3u8とm4sファイルで小分けになってるのか。
UserAgent変えて昔のWebブラウザのに変えても完全なmp4ファイルのURLが流れてこなかった。
これは保存できないな。

248:名無しさん＠お腹いっぱい。
21/12/31 20:49:57.68 .net
そういうやつ困るわね

249:名無しさん＠お腹いっぱい。
21/12/31 23:32:11.69 .net
m3u8ったらアニメイトのWebラジオをひさびさ端末に保存試行したさい遭遇して苦闘したことあったな…
あの後すぐ配信変更でもう付き合いきれなくなったわ

250:名無しさん＠お腹いっぱい。
22/01/01 01:14:26.06 .net
あけましておめでとうございます

251:名無しさん＠お腹いっぱい。
22/01/01 04:26:13.37 .net
明けましておめでとう。
前からあるTwitterの動画URL抽出するサイトにツイートのURLを入れると、mp4とm4sファイルのURL一覧が出てくる。今でも機能するっぽい。(アフィ広告注意)
URLﾘﾝｸ(lab.syncer.jp)
ちょっと検索して出てきたのは、Bearerトークンを使えばAPIからmp4のURLを抜き出せるらしい。こんなツールを公開してる人もいる。
URLﾘﾝｸ(github.com)
動画URL単独の保存もいいけど、保存したツイートのスナップショット自体に動画が表示されて再生できないと、証拠目的なら意味ない気がする・・・

252:名無しさん＠お腹いっぱい。
22/01/01 21:39:29.68 .net
動画とか画像のURLから元記事がわからないからな

253:名無しさん＠お腹いっぱい。
22/01/03 11:52:12.86 .net
The capture is estimated to start in 367 minutes
6時間待ち

254:名無しさん＠お腹いっぱい。
22/01/03 11:58:05.21 .net
3分ぐらいほっといたら保存終わってた
待ち時間の計算ガバガバすぎない?

255:名無しさん＠お腹いっぱい。
22/01/03 14:58:50.23 .net
たまにestimated toが表示されずに、割り込みですぐ保存できる場合もあるな
タイミング良く保存してるサーバーが空いたのかは知らんが謎

256:名無しさん＠お腹いっぱい。
22/01/03 23:40:25.27 .net
これ以下のURL全て
なぜかブロックリスト
URLﾘﾝｸ(finance.yahoo.co.jp)

257:名無しさん＠お腹いっぱい。
22/01/04 13:34:43.15 .net
今日はPDFの保存がしづらい

258:名無しさん＠お腹いっぱい。
22/01/04 14:43:51.33 .net
永遠のクルクル挙動で取れない…

259:名無しさん＠お腹いっぱい。
22/01/04 16:17:38.71 .net
>>253
前スレでも書いてる人いたけど、Yahoo個人ニュースの記事は保存ブロックされてるの多いな〜
なんでだろ〜

260:名無しさん＠お腹いっぱい。
22/01/08 19:23:32.92 .net
ツイッターとれない

261:名無しさん＠お腹いっぱい。
22/01/10 19:03:37.94 .net
twitter取れないのどうにかならないのか？

262:名無しさん＠お腹いっぱい。
22/01/13 21:15:26.72 .net
archive.orgのページ上部の〇〇billionの数字を更新し忘れてるのいつ気づくんだろ？ｗ
どうでもいいといえばどうでもいいんだけど

263:名無しさん＠お腹いっぱい。
22/01/17 08:32:14.67 .net
503 Service Unavailable
No server is available to handle this request.

264:名無しさん＠お腹いっぱい。
22/01/17 15:38:02.43 .net
PDF・画像絡みだけ時間かかるときがあるが、
今日は全般的に時間かかる

265:名無しさん＠お腹いっぱい。
22/01/17 15:42:44.22 .net
失礼、そこまででもなかった

266:名無しさん＠お腹いっぱい。
22/01/17 22:20:01.40 .net
Twitterはもう取得出来ないっぽいか

267:名無しさん＠お腹いっぱい。
22/01/18 03:58:18.45 .net
The capture is estimated to start in 23 hours, 56 minutes.
( ﾟдﾟ)

268:名無しさん＠お腹いっぱい。
22/01/18 13:02:41.80 .net
You may close your browser window and the page will still be saved.
といっても保存できてたりできてなかったり

269:名無しさん＠お腹いっぱい。
22/01/18 16:01:41.49 .net
archive.is は http:// アクセスが https:// へ強制リダイレクトされちまうのをどうにかしてほしい
更新の頻繁なページを後で archive.org へ追加取りするとき、リンク先のオリジナルURLが判別可能なまま再アーカイブするには
anonymous のWebプロキシ（ URLﾘﾝｸ(anonymouse.org)～）経由でないと取れない仕様だったけど、anonymous はSSLアクセスに非対応だから http:// のままでないと接続エラーになっちまう…

270:名無しさん＠お腹いっぱい。
22/01/19 06:39:39.44 .net
なんか先週末の停電の後から、SPNの保存の仕様変わった?
今まで30秒ぐらいで保存できたのに、1分近くかかってるんだが
ブラウザでもcurlでも遅くなってるし、単独の画像やPDFファイルはここ数日保存できてない
保存始まる待ち時間増えたような感覚
ヘッダーにcapture_outlinks=0を付けても早くならないし

271:名無しさん＠お腹いっぱい。
22/01/19 07:04:29.09 .net
Sorry
Cannot start capture
保存すらできん
このエラー初めて見た

272:名無しさん＠お腹いっぱい。
22/01/20 14:05:44.79 .net
保存に少し時間がかかって違和感あるのを除いて上の障害は解消済み。
日本時間19日の朝5時半〜8時半は、save-page-nowの保存ファイルが1個しかないから、この時間帯は保存できなくて止まってたっぽい。
公式な発表はないし、発表すらしないだろうけど、記録として残しとくわ。
URLﾘﾝｸ(archive.org)
spn2-20220118234307 Jan 18, 2022 web ← 通常の追加間隔
spn2-20220118233913 Jan 18, 2022 web ← 3時間でようやく新しいファイル、この間Save Page Now停止
spn2-20220118203649 Jan 18, 2022 web ← 18分
spn2-20220118201816 Jan 18, 2022 web ← 通常は1分〜10分で1個増えるのに、前のファイルからの間隔が24分
spn2-20220118195414 Jan 18, 2022 web

273:名無しさん＠お腹いっぱい。
22/01/20 19:31:02.77 .net
1回保存できませんでした…ってエラー吐かれたら何度保存させ直しても保存されないもんなの？
すっげぇ腹立つ

274:名無しさん＠お腹いっぱい。
22/01/21 08:49:08.28 .net
まあ相変わらずな常態だな
Archive.st も重くて取り込みエラー頻発中

275:名無しさん＠お腹いっぱい。
22/01/21 22:29:24.38 .net
うーん、Twitterが死ぬとは思わなかった
Unknown errorだから詳細は分からないけど、Twitter側から拒絶されてるのか？

276:名無しさん＠お腹いっぱい。
22/01/22 19:10:56.08 .net
twitterとれるようになったね

277:名無しさん＠お腹いっぱい。
22/01/22 19:31:50.70 .net
今度は Archive.is が死んでるよ…

278:名無しさん＠お腹いっぱい。
22/01/22 21:37:09.07 .net
ここ大体死んでる話ばっかやな

279:名無しさん＠お腹いっぱい。
22/01/23 07:10:05.41 .net
>>266
このサイトを使うのはどうかな
webページに注釈をつけて共有するのがメイン機能だけどプロキシとしても使える
非営利団体が運営してて学術団体と連携したりしてるから信頼性もそれなりにあると思う
稀にアクセスできないサイトもあるけど大抵はうまくいく
URLﾘﾝｸ(via.hypothes.is)URLﾘﾝｸ(www.〜)

280:名無しさん＠お腹いっぱい。
22/01/23 11:42:27.84 .net
>>276
ありがと。そっちでArchive.isの拓へアクセスしても画像認証通さないと取ったページが開けないから .orgへの再アーカイブには使えそうにないけど他の取り方で選択肢が拡がりそうだ。

281:名無しさん＠お腹いっぱい。
22/01/23 11:49:14.48 .net
… .is アーカイブ済みページの画像認証も https:// 強制化で始まったけど、端末ブラウザの直アクセスなら今のところは異なる数種の UserAgent 変更でスルーできる。

282:名無しさん＠お腹いっぱい。
22/01/23 15:21:44.44 .net
ふむ

283:名無しさん＠お腹いっぱい。
22/01/23 16:05:22.21 .net
>>273
今確認したら取れるようになってるな
良かった良かった

284:名無しさん＠お腹いっぱい。
22/01/23 20:06:48.89 .net
Sorry
Cannot save Internet Archive URLs!
URLﾘﾝｸ(web.archive.org)URLﾘﾝｸ(sanukisoraumi.blog.***.com)

285:名無しさん＠お腹いっぱい。
22/01/23 20:31:59.27 .net
GoogleとヤフーJAPANの画像検索結果が日本語の検索ワードだと変なパラメータ文字列に入れ替わられて、取りたいリンクとサムネイルが取れなくなってやがる。
ウェブ魚拓もMetaタグ妨害で既に取れなくなってやがるし…

286:名無しさん＠お腹いっぱい。
22/01/25 17:48:32.48 .net
保存されたページから違うページに飛べない(正確には同じページだけどリンク先をクリックすると補足が書いてある感じ)
urlが同じなのでこういう時はどうすれば良いんだろう初心者ですみません

287:名無しさん＠お腹いっぱい。
22/01/25 21:17:12.42 .net
>>283
ページ更新なしでサーバー情報とってきて内容が変化するサイト(例:google map)とか
更新有りで同じURLだけど、ユーザーのアクションに依存して内容が変化するサイト(例:画像認証付きサイト)とかは難しいと思う
実際に確認しないと分からないけどこのケースは後者に近いのかな？
Waybackでの保存が無理そうなら、Webrecorderとかのソフトを使ってローカル環境に保存するしか方法はないかもね
(※独自にローカル保存したアーカイブファイルを直接IAにアップすることは可能。ただしwaybackからの参照は不可)

288:名無しさん＠お腹いっぱい。
22/01/26 01:00:59.97 .net
Archive.st で取った分を.orgへ転送する形でページ内容の意図しない改変は避けれる場合もあるけど .stのエンジンが不具合長引きがちだからなあ

289:名無しさん＠お腹いっぱい。
22/01/26 01:57:26.30 .net
ローカル保存って今もあるんだ
なんか大昔そういうソフトで保存してたけどhttps非対応で最近のやつ全然取れなくなってしまったので離れていた

290:名無しさん＠お腹いっぱい。
22/01/26 15:12:35.98 .net
サイトのTOPから階層段でまとめ取りするやつはAndroid用でTLS1.2対応アプリがあるかも

291:名無しさん＠お腹いっぱい。
22/01/26 23:30:50.77 .net
全巡回したいねえ

292:名無しさん＠お腹いっぱい。
22/01/29 21:06:23.44 .net
ブログだったらサイトマップや記事一覧ページを見れば全てのURL探すの楽だけどな
たまにサイトマップを非表示にしてるブログもあるけどさ

293:名無しさん＠お腹いっぱい。
22/02/05 11:46:13.30 .net
こないだまで問題なく使えてたのにirvineでファイルのダウンロードができなくなった
403エラーで切されてる・・・どうすればいいの

294:名無しさん＠お腹いっぱい。
22/02/08 20:03:05.74 .net
Sorry.
This snapshot cannot be displayed due to an internal error.

295:名無しさん＠お腹いっぱい。
22/02/11 06:25:36.17 .net
Got an HTTP 302 response at crawl time
これが出て開けないんだけど、どうすりゃいい？

296:名無しさん＠お腹いっぱい。
22/02/11 07:38:53.86 .net
そのリダイレクト先が未アーカイブなら、ご愁傷様としか

297:名無しさん＠お腹いっぱい。
22/02/11 10:54:11.58 .net
>>293
待ってるとページは出るんだけど真っ白なんだよね
上にカレンダーとかは表示されてる

298:名無しさん＠お腹いっぱい。
22/02/11 11:21:47.72 .net
>>294
アーカイブされたのがその真っ白なページなんじゃないのとしか
HTTP や HTML についての知識がある人なら自分で調べて納得してるだろうから
そういう質問にはこう答えるしかない

次ページ