【統計分析】機械学習・データマイニング22

【統計分析】機械学習・データマイニング22 at TECH

[前50を表示]
750:デフォルトの名無しさん
19/02/18 20:27:29.65 Ozev5N3p0.net
>>719
デイトレやスキャルのように取引間隔が短くなるほど判断材料がチャート寄りになる。
だけど利益効率は低くなる。スタイル次第だね。

751:デフォルトの名無しさん
19/02/18 23:00:23.07 bIvMqO/j0.net
経済指標というのは統計データにそこまで精度があるもんじゃないからね
統計改竄とか騒いでるけど今に始まったことじゃないし。
数年平均の変化率を取る程度でも意味があるかどうかギリギリ

752:デフォルトの名無しさん
19/02/19 00:40:50.23 1Fqwt8so0.net
>>724
再起動

753:デフォルトの名無しさん
19/02/19 07:37:55.24 tuL2vxo10.net
>>729
えぇ…
放ったかしにできないじゃん・・・

754:デフォルトの名無しさん
19/02/19 11:05:24.76 Dp5mXjEy0.net
delじゃreleaseせんやろ

755:デフォルトの名無しさん
19/02/19 15:19:07.20 xz+0XgYya.net
まあ、改竄じゃないわな
大きなミスではあるが

756:デフォルトの名無しさん
19/02/19 20:06:33.80 8ne5Wfny0.net
統計基準の変更に伴ってなぜか下振れがないってのは
確率的に独立でないことを示していると思いますが。。

757:デフォルトの名無しさん
19/02/19 20:57:30.91 lHd2rX6rp.net
>>733
何と何が独立でない？
統計基準の変更って全数検査か抜取り調査かの違いじゃね？

758:デフォルトの名無しさん
19/02/19 22:43:20.01 q3SXbntr0.net
機械学習とかデータマイニングを勉強すれば
高卒でも関連職に就けますか？

759:デフォルトの名無しさん
19/02/19 22:55:12.27 Y7EIMl82a.net
本人の向学心と心構え次第ですが、付けますよ。
手法を作る、あるいは、それを駆使するという方面ではなく
つねに分析を念頭にいれて業務を覚えていけば、
機械学習、データマイニングの技術者が何をすればいいかの指針
あるいはヒントをだすことができます。
現在（昔からですが）の一番の問題は、日本において産と学が遊離していたために
こういった研究者が何をやったらいいかの指針やヒントが、なかなかでなかった
ところにあると思っています。
だから、もし実業でヒントを出す側になるのは大変有用ですし、それは業務を
こういった技術川知識＋業務知識の両面を知らないとできないことですから。
金融機関などの分野によっては、もう20数年前から実用化されているものが
あるわけで、それはそういった人（内部にはいなかったが）からできたことです。

760:デフォルトの名無しさん
19/02/19 22:58:13.72 Y7EIMl82a.net
技術的に必要と感じたら、また大学で勉強することがいいと思います。
私の周辺にはそういった人がたくさんいます。
場合によると足りないのは、そういった人が少ないことかもしれない。
日本が、何十年もの間大学から、新しいことやヒントがまるきり生まれてこない
という時代は、そろそろ終わりにしないといけない。行き来が重要。

761:デフォルトの名無しさん
19/02/19 23:23:06.80 gQmrEH7F0.net
外国の方も見てるスレだったのね

762:デフォルトの名無しさん
19/02/19 23:50:57.59 Y7EIMl82a.net
？？？

763:デフォルトの名無しさん
19/02/20 00:10:03.61 16zslZ/2M.net
業務知識を付けてから、業務に機械学習を活かす方向ならありそうね。

764:デフォルトの名無しさん
19/02/20 00:11:29.51 16zslZ/2M.net
仕事が茄子の選別なら、それを機械にやらせてみるとか

765:デフォルトの名無しさん
19/02/20 00:14:39.09 /iKt7wuya.net
たとえば、もう15年くらい前からATMでお金降ろしたり預金したりするとき
「あなたなら○○円までローンが可能です」みたいなのが
出る銀行あるけど、あれって適当にやっているとか
統計手法を使ってやっているとか思っているひとがいるんでない？

766:デフォルトの名無しさん
19/02/20 00:39:23.66 DbMmuNuj0.net
すくなくとも機械学習とは無縁な気がする。
単に年間取引量とか年数とか貯蓄額などなどでさくっとライン決めてるんじゃないかな。
自分は同じ銀行でも出る口座と出ない口座があるね。

767:デフォルトの名無しさん
19/02/20 00:44:11.71 /iKt7wuya.net
>743
れっきとした機械学習ですよ

768:デフォルトの名無しさん
19/02/20 00:52:08.87 /iKt7wuya.net
これは日本の話
おそらく、機械学習やられている人でも、多くのひとが知らないんだと思う
その昔は、統計手法によるスコアリングあるいはニューラルネットを使った
ものが主流だったが、こういった利用には適しておらず、機械学習が
1990年過ぎに消費者金融業界から使われだした。
その後、クレジット業界、銀行と広まって行き、当初はATMに直結しては
いなかったが、約15年ほど前から、事前に属性と取引状況から判別して
リコメンドをするような仕組みが出てきた。
どうやっているかの詳細は言えないが、完全に機械学習手法が用いられていて
データが足りない部分は統計手法などのアンサンブルが行われている。
これについては日本の方が海外より進んでいる。

769:デフォルトの名無しさん
19/02/20 00:58:29.39 /iKt7wuya.net
大学などでは、この時代にそういった研究はほぼされていないので、完全に
民間手動、さらにこういった実データは大学などに提供されることは
一切ないので、学業の世界では、そういったことが行われていることすら
知ら無い方がほぼ100%近いままで来たというのが現状。
その後だいぶ遅れて、大学でもそういったことを専門にやる研究室や
学部もできたが、こういったデータは手に入らないため、ネットで集まる
データやposデータなどを研究対象にするしかないために、大学などの研究はそちらに偏った
モノとして進んできて今がある。それはそれで研究課題があるのでいいのだが
あたかも日本において流通やネットがマイニングや機械学習の主流として進んできたと
大きな勘違いをされている方がたくさんいる。

770:デフォルトの名無しさん
19/02/20 01:41:43.93 zGZHFyqu0.net
>>745
1,2年前から銀行が機械学習の事業やるとかちょくちょく発表してるのはなんなん？

771:デフォルトの名無しさん
19/02/20 01:56:42.90 /iKt7wuya.net
>>747
あれは、またこの話とまるきり別な流れと考えていいともう
それこそ、この掲示板での話題と同じようなような流れのことをやるんでしょう。
やられる方も、まるきり別。
おそらく行内でもまるきり別セクションで、人のつながりもなく流行にのる
システム部門だったり営業的部門だったりの仕事としてやるんじゃないのかな？
私がいま話した内容の場合は、システム部門だとかはまるきりタッチすることのない
せかいなので。

772:デフォルトの名無しさん
19/02/20 02:00:18.43 lome1jbk0.net
>>745
ニューラルネットが流行ってるのはここ数年
古くから使われてるのは多重回帰とかそんなんでしょ
日本は機械学習よりも人の判断にゆだねられてきた部分が多いと思う

773:デフォルトの名無しさん
19/02/20 02:11:35.73 /iKt7wuya.net
>>749
カードなどの、不正利用関連でのニューラルネット利用は80年代後半から実用化されて
ずっと使われてますし、主流です。
リスクに関しても同じく80年代後半から一部使われたりしてますが、これは別な
理由から国内ではほとんど使われていない。
また株式投資などでは、同じ時期から野村や大和が研究して予測につかったり
して、結果は悪くないのですが、理由がつけられないので商売にならないので
やめました。商品作っても、顧客はなぜそれがいいのかの理由を知りたいんですよ
顧客も金融機関だから、預かっているお金でしょ。だから、失敗したときの
エクスキューズ

774:ができない。ようはこの分野は当時ブラックボックスでは商売にならなかったという背景がある。結構みなさん、思った以上に、このあたりご存知ないみたいですね。

775:デフォルトの名無しさん
19/02/20 02:15:35.35 /iKt7wuya.net
ちなみに、株式投資などは上記の理由から、機械学習などはすたれて、
統計理論によるものが主流として今まで来ている。
ただし、自己資金で個人投資家がニューラルネットつかって
15年以上前から儲けているひとは実際にいますし、ネットでもずっと
取引結果公開してましたよ。300万円で初めて、いまはゆうに億を超してます。
あくまで個人で本業ではないですけど。

776:デフォルトの名無しさん
19/02/20 02:19:47.56 /iKt7wuya.net
＞リスクに関しても同じく80年代後半から一部使われたりしてますが、これは別な
＞理由から国内ではほとんど使われていない。
誤解するといけないので補足しておきます田、この分野でニューラルネットワークが
使われていないという話で別な機械学習手法が最も使われている分野です。
ちなみに、ニューラルネットワークは、今から30年以上前に大変流行ったのよ。
もちろん、今のように洗練されてはいないですが。

777:デフォルトの名無しさん
19/02/20 02:36:50.96 /iKt7wuya.net
>>749
＞日本は機械学習よりも人の判断にゆだねられてきた部分が多いと思う
マーケティングの世界は大変遅くて、いまでもそれが主流ですよね
株式については85年あたりを境に大きく変化し、大手中堅証券関係や少し遅れて銀行
などが運用や商品開発に関して、数理手法中心に変化した。ここでは統計手法と最適化
手法が中心（当初研究していたニューラルネットはここで消えた）。
それに遅れること10年近くになってやと大学で専門的なコースができ始めた。
リスクに関しては、95年を境に大きく機械学習手法導入に代わって行き、それに伴い
大手消費者金融などの店舗が無くなった（それまでは、店舗で顔を見ながら、人が
判断していたんですよ）。カード会社も同時期。遅れて銀行などなど・・・

778:デフォルトの名無しさん
19/02/20 02:39:35.89 zGZHFyqu0.net
>>753
>リスクに関しては、95年を境に大きく機械学習手法導入に代わって行き、それに伴い
大手消費者金融などの店舗が無くなった（それまでは、店舗で顔を見ながら、人が
判断していたんですよ）
無人くんってそういう意味だったのか・・・

779:デフォルトの名無しさん
19/02/20 02:50:53.53 /iKt7wuya.net
そうなんですよね。
ある大手消費者金融のトップは、今後店舗は無くなってゆく、さらに過当競争もある、
またグレーゾーン金利どうなるか（要はあの過払いにつながる話）など見据えました
よ。これは９５～６年の頃。
銀行は、まだのほほんとしてましたけどね。
リスクに関しては機械学習手法で1０年以上会社ごとに個別にモデルを作って
いて、その蓄積から15年くらい前に、いまのATMでのリコメンドが行われるように
なったという流れです。
その少し前ころにブレインパッドとか会社ができたと思うんですが、専門会社と
しては大変後発です。

780:デフォルトの名無しさん
19/02/20 03:09:39.19 zGZHFyqu0.net
銀行は三大業務が儲からないんで国内金融業者の真似をするってこと繰り返してるだけだね

781:デフォルトの名無しさん
19/02/20 04:36:03.76 ODzVJVWX0.net
ずぶの素人がRapidminerをなんとなく色々弄って
データマイニングを触り始めたんだけど、
結局h2o Flowで直接やれば有料版買わなくても良いのかと思った
KNIMEとかwekaとか触ってる人居ます？
結局RStudioでちくちく頑張るのが最善なのかと思い始めてます

782:デフォルトの名無しさん
19/02/20 04:36:57.17 16zslZ/2M.net
データはあっても論文にしないから存在感もないし給料も上がらんてことなのね。

783:デフォルトの名無しさん
19/02/20 05:00:06.54 /iKt7wuya.net
>>758
この分や、特に大学が軽視していたのは、なかなか論文として認めてもらえなかったからというのがおそらく現実だと思う。
今は変わってきた（と思う）ので、一生懸命になってきた

784:デフォルトの名無しさん
19/02/20 09:58:33.03 nvYFoaDR0.net
銀行はもう用済みだってさ、金借りないもん

785:デフォルトの名無しさん
19/02/20 10:46:26.82 16zslZ/2M.net
ホントなら武富士から論文が出るか見物だな

786:デフォルトの名無しさん
19/02/20 11:22:15.65 cUDliwbY0.net
あんな程度のことまで機械学習使ってるんだ。
なんか無駄なような気がするけど。

787:デフォルトの名無しさん
19/02/20 12:21:21.00 jAbwL6mNa.net
単に適当に係数調整した線形の計算式が1つあれば事足りそう

788:デフォルトの名無しさん
19/02/20 13:58:54.20 kemmWDgca.net
>>761
まあ武富士は無縁だな。
そういうのは、消費者金融とか銀行じゃなく専門のコンサル企業が
やってんだよ。限られてるけどFEGとかMRIあるいはNRIとか。

789:デフォルトの名無しさん
19/02/20 15:22:40.81 QgYZylLLM.net
あんちべとかあの辺の人がいそう

790:デフォルトの名無しさん
19/02/20 15:29:02.13 zGZHFyqu0.net
地銀とかにコンサル企業がくっついてるけど、あれはそういう仕事してるとこなのか

791:デフォルトの名無しさん
19/02/20 15:36:35.42 ejonDZ3Ea.net
>>763
なるほど、無知と言われちゃいますよ

792:デフォルトの名無しさん
19/02/20 15:46:38.79 ejonDZ3Ea.net
>>766
ただし外資（ボストンやマッキンゼーというコンサルや会計系のアクセンチュア
などなど）は、経営コンサルやITコンサルなんで、このあたりのことは
やってない。知識も別なんで。

793:デフォルトの名無しさん
19/02/20 15:53:53.55 xZAUp4YHp.net
>>735
俺も高卒
しかもアホ学校
プログラミング自体始めて1年くらいで機械学習や統計を勉強して今はディープラーニングの本やってるけど微分なんかやった事ないし分からん事は沢山あって苦しい部分もあるけど頑張ろうぜ

794:デフォルトの名無しさん
19/02/20 16:04:36.88 QgYZylLLM.net
そんなに流行ってるんだ。すごいブームだな。

795:デフォルトの名無しさん
19/02/20 16:10:44.12 yUNEfJVz0.net
学歴や年齢（第2新卒以上）でハンデが有る場合は、
技術を磨くより英語を勉強して外資行くのが正解ルートなIT業界

796:デフォルトの名無しさん
19/02/20 16:12:55.93 fy/YXeF10.net
外資のIT業界は修士以上しかとらないんじゃないの？

797:デフォルトの名無しさん
19/02/20 16:28:06.46 zGZHFyqu0.net
外資は国ごとに体質が出るから

798:デフォルトの名無しさん
19/02/20 16:53:08.80 ejonDZ3Ea.net
>>770
AIがらみはね。
質がね～いろいろあるんよ問題が。

799:デフォルトの名無しさん
19/02/20 17:37:25.07 QgYZylLLM.net
ロスジェネ世代の物理修士のワイもワンちゃん狙ってるぜ。新卒の時はメーカー系SI位しか行く先がなくてな

800:デフォルトの名無しさん
19/02/20 17:51:06.63 3A0CDvThp.net
>>775 python を2月から始めたが、なんか機械学習が簡単にできそうだから面白そう。
俺みたいな爺さんに追い越されない様に頑張れよな。

801:デフォルトの名無しさん
19/02/20 17:52:54.13 fy/YXeF10.net
たぶん人工知能分野に高卒や学士風情が潜り込める場所はない
せいぜい誰かの作ったライブラリやフレームワークを利用する程度

802:デフォルトの名無しさん
19/02/20 18:00:20.36 3A0CDvThp.net
>>777 良いやんか、昔からドカタと言われてきたソフト業界なんだから、少しでも陽が当たれば御の字。
日本のソフト産業が悲惨すぎたんだけどな。
俺が半世紀くらい前に、ソフトを始めた時に下宿のおばさんが何をなさってるんですかと聞かれたから、ソフトウエアですと答えたら、
「ああ、ふとん屋さんですか」と言われた。なかなか学のあるおばちゃんだと思ったよ。

803:デフォルトの名無しさん
19/02/20 18:11:20.00 Lun3niTAM.net
人工知能と聞くと途端にうそくさくなるのは何故なのか
脳科学的な

804:デフォルトの名無しさん
19/02/20 18:26:43.03 fy/YXeF10.net
>>778
土方は土方のままだと思う
俺も大卒IT土方やって辞めたクチだが

805:デフォルトの名無しさん
19/02/20 18:31:57.72 zGZHFyqu0.net
ライブラリ使わないとやってらんない。
ニューラルネットのライブラリを全部c++で書いてたけど得るものなかったよ。
低水準な�

806:ﾆころから自分で書いてれば理解が深まるわけでないからなこれ

807:デフォルトの名無しさん
19/02/20 18:32:28.32 3A0CDvThp.net
>>780 やめたのにここを覗いてるのは何故？また、回復のチャンスがあると思って？
やる気さえあれば出来ると思うよ。

808:デフォルトの名無しさん
19/02/20 18:33:29.97 fy/YXeF10.net
>>779
昔から言われてるのは、知能の定義が曖昧で人工知能の定義も曖昧になってるから
これが人工知能だとソフトを作っても「機械にできることは知能じゃない」と否定されてきた歴史がある
そのうち、機械学習も同じ運命を辿りそう

809:デフォルトの名無しさん
19/02/20 18:34:26.58 fy/YXeF10.net
>>782
そもそもここはマ板なのか？

810:デフォルトの名無しさん
19/02/20 18:36:03.56 3A0CDvThp.net
>>781 そんなの当たり前だ。人類が石器時代の道具を使って現代人以上に進化出来ると思う奴がおかしな奴。
利用出来るものは、積極的に使わないのはバカ。
入門当初の1～2ヶ月は進化の過程を知るために石器を使って見るのも良いだろうけど、そこまでにした方が良い。

811:デフォルトの名無しさん
19/02/20 18:38:38.05 zGZHFyqu0.net
分野によってはライブラリ使っててもしょうもないものもあんのよ
その技術の本質的な部分が抽象化されちゃってるとね
何をやりたいかで抽象化の程度をよく見極めないと

812:デフォルトの名無しさん
19/02/20 18:44:18.06 3A0CDvThp.net
>>786 それはニーズ、仕様、マーケットがわかっていないからだろ。
何を作るか解らないで闇雲に使える物を使ってもとんでもないものが出てくるだけ。
ソフトで一番難しいのは、ユーザー／マーケットが欲してるニーズを理解すること。
マーケット、ソフト、ハード全ての世の中の融合が理解できないと難しいと思うよ。出来るだけ広い目で見ること。

813:デフォルトの名無しさん
19/02/20 18:50:48.29 QgYZylLLM.net
EXCEL,VBAをpythonやRで駆逐してくれるだけでも有り難い

814:デフォルトの名無しさん
19/02/20 18:52:24.10 QgYZylLLM.net
CAE系の数値積分をVBAでやる人がたまに居て涙目

815:デフォルトの名無しさん
19/02/20 19:12:10.39 HgkG/6H60.net
だってvbaでできるから・・・
この、vnaでやろうと思えばできるけど、Rだと数秒だよ
みたいな指針ってなんとかならんかな

816:デフォルトの名無しさん
19/02/20 19:16:11.03 xZAUp4YHp.net
みんなはRもpythonも両方使えるの？
統計の勉強も兼ねてRやってみようかな

817:
19/02/20 19:41:40.97 P8vN2pc30.net
>>769
高校の数Ⅲ＝微分積分、の教科書は役に立ちます
ちまたの微分積分＝解析学、の教科書は、どうでもいい実数論やεδ論法にページ数を割いていますが、これは我々には不要
となると、高校の数Ⅲ＝微積分の教科書は、微分方程式まで含んでいて実にバランスがいい
そういう視点で数学の教科書を選んでみてください
私としても、無駄に基礎論に勢力を使わない微積分の教科書を探しています、今読んでいるのは URLﾘﾝｸ(www.amazon.co.jp)

818:デフォルトの名無しさん
19/02/20 20:11:03.36 bBk8RMjOa.net
RやるくらいならMATLAB買った方がいいよ
特に学生なら格安で買える

819:デフォルトの名無しさん
19/02/20 20:17:05.30 sr7oPl810.net
新★銀行の充実担保人生のCMがキモすぎる

820:デフォルトの名無しさん
19/02/20 20:34:19.82 HgkG/6H60.net
>>791
今勉強中でそこまで使いこなせてはいない
ただ、vbaがアホらしくなる処理が色々あるな、というのは分かる

821:デフォルトの名無しさん
19/02/20 20:48:37.10 QgYZylLLM.net
そう言えばoctaveはこのブームに乗ってないのね

822:デフォルトの名無しさん
19/02/20 21:23:39.58 eGFlYAm40.net
>>792
εδや実数論は、機械学習の基礎理論を理解するためには必須だけどね
そして、いまの高校数学には微分方程式は入っていない

823:
19/02/20 21:40:45.51 P8vN2pc30.net
>>797
＞高校数学には微分方程式は入っていない
！？！これは驚いた！
微積分の一番おいしいところが入ってないなんて、文部省はいったいどうしちゃったんでしょうか？

824:デフォルトの名無しさん
19/02/20 21:43:29.90 P1CVYyuD0.net
機械学習の基礎でεδも実数もいらない気がするが
微分方程式を解く必要があるとしても自力で解く必要もないだろ
たとえばどこで決定的にεδがいるんだ?

825:デフォルトの名無しさん
19/02/20 21:45:38.77 8ZKUEhxU0.net
>>798
おまえさんJRのこと国鉄って呼ぶだろ

826:デフォルトの名無しさん
19/02/20 21:51:59.81 eGFlYAm40.net
>>799
>>797 では「基礎理論」と言っており、これは「入門」を指していない
Pythonのライブラリを使って機械学習させるだけなら、もちろんそこまでは必要ないよ
しかし、機械学習の手法を新たに開発しようと思ったら
数理統計学や多様体の知識が必要になるのだが、
そうなるとεδや実数論がわからない人にはまず無理
数理統計学だとルベーグ積分が必要になるしね

827:デフォルトの名無しさん
19/02/20 22:24:02.54 v2INiFL/d.net
URLﾘﾝｸ(headlines.yahoo.co.jp)

828:デフォルトの名無しさん
19/02/20 22:26:40.48 lome1jbk0.net
微分積分と線形代数は大事だねぇ
大学一年生のときにはそこまで大事だと思ってませんでしたすみません

829:デフォルトの名無しさん
19/02/20 22:27:30.98 v2INiFL/d.net
『浅い』『深い』
何い言ってんだこいつら？

830:デフォルトの名無しさん
19/02/20 22:29:22.22 v2INiFL/d.net
くっだらないラベリングに何工数かけてんだか

831:デフォルトの名無しさん
19/02/20 23:22:15.35 oVRyet6Lp.net
>>793
Matlabはとてもいい商品ではあるが個人の趣味には高すぎるよ
自動車産業とか行くなら損はないけど、機械学習と統計やるのならPython極めた方が有益
あとRとMatlabは得意分野が異なるので、統計の勉強するならRだけれども、じゃあ産業で使うかと言ったら研究者レベルでしか使わなくて、SPSSとかSASになる

832:デフォルトの名無しさん
19/02/20 23:32:32.66 HgkG/6H60.net
>>804
検索してみたけど誰もそんなこと言ってないぞ

833:デフォルトの名無しさん
19/02/20 23:36:54.87 P9LL/TKM0.net
Matlabプライベートで買う人とかおるの？
いたとしても既に専門家な人だろう
Rは参考書はよく出てるよな

834:デフォルトの名無しさん
19/02/20 23:38:45.42 fy/YXeF10.net
賑わってるなー

835:デフォルトの名無しさん
19/02/20 23:45:07.50 eGFlYAm40.net
>>807
>>802 の記事のことかと

836:デフォルトの名無しさん
19/02/20 23:53:38.68 fpqQUUUe0.net
numpyとかpandasはみんな自信ある？
あれやりたいなって思っても覚えれないし調べないと全然使えない
改めてちゃんと勉強した方が良いのかな

837:デフォルトの名無しさん
19/02/21 00:09:21.72 YsIQ3BIo0.net
>>810
ありがとう
DLの根幹は最小二乗法だけど、パラメータの最適化、モデルの構築を考えればもうそれだけじゃないね
深い関数ってのは要するにモデルの事だと思うけど、
deeplearningのdeepに引っ張られすぎな命名と思う
LSTM、RNN、GANとそれぞれ計算方法や特徴が違う、とそのまま言えばいいんじゃないかな
ただ、これらを総称するわかりやすい言葉はないね。モデルが違うとしか・・・
>>811
一通りAPIを読んで億ぐらいで良いと思う
いずれ本気で使うか、読む時が来る

838:デフォルトの名無しさん
19/02/21 00:36:23.61 ON3Qq6Jz0.net
例のディープラーニング協会の人だし一般人が分かった気になる説明（合っているとは言っていない）をしたいのだろうよ

839:デフォルトの名無しさん
19/02/21 00:38:45.49 /M

840:YEskNsa.net

841:デフォルトの名無しさん
19/02/21 00:41:13.02 JaIF9eFka.net
matlabは色々やりたいことが増えるとtoolboxどんどん買わないといけなくなって大変
コスト度外視すれば使い勝手は申し分ない

842:デフォルトの名無しさん
19/02/21 02:43:35.30 BqaX6qkta.net
matlab学生ならツールボックスいろいろセットで1万円で買える
データの前処理とかはこっちでやった方が楽なこと多い
モデルに前処理も組み込むなら別だけど

843:デフォルトの名無しさん
19/02/21 08:24:37.70 zdM3YyA6d.net
>>791
R、Pythonなど使ってきたけど、自分はRをメインにしてる。
有料ソフトは家で試したりできないし、環境が変われば使えなくなる可能性があるから避けてる。せっかく勉強した内容や作ったツールが無駄になるのがこわい。

844:デフォルトの名無しさん
19/02/21 09:58:31.62 qpxe9X3rd.net
造語はなるべく非難推奨

845:デフォルトの名無しさん
19/02/21 09:58:40.83 /8pf4ksL0.net
ＱＺは爺であることがわかったｗ

846:デフォルトの名無しさん
19/02/21 10:53:27.68 TingKcVp0.net
須山はなんでknnやsvmを毛嫌いするの？

847:デフォルトの名無しさん
19/02/21 12:58:02.52 9vo90Ex30.net
>>820
単に、その方が知りたいことと（彼の目的）と異なるだけでしょう。
どういうことやってる人なの？

848:デフォルトの名無しさん
19/02/21 14:13:52.21 YGIT6NuY0.net
急に名前をだしてdisるやつ、おさっしレベル

849:デフォルトの名無しさん
19/02/21 20:38:01.40 pfQr8Z6u0.net
今日はpandasの勉強します
業務上JSやらVue.jsやらDBとかその他諸々勉強しなきゃいけないこと山積みだけど僕はpandasを勉強します
そんなこと無駄だぞって言わないでね

850:デフォルトの名無しさん
19/02/21 20:44:01.11 a0vDFZeVa.net
pandasはUenoが本場

851:デフォルトの名無しさん
19/02/21 20:44:14.25 HHGGRant0.net
無駄だ

852:デフォルトの名無しさん
19/02/21 20:49:18.53 7Hd2H8P5a.net
人工衛星が撮影の画像誰でも無料で利用可能に
URLﾘﾝｸ(www3.nhk.or.jp)
色々面白い遊びに使えそうだけど良いのが思いつかない

853:デフォルトの名無しさん
19/02/21 21:28:39.53 a0vDFZeVa.net
安倍政権の一つの政策として、どんどん、国が持っているデータを公開して、
利用してもらおうという流れになってるんで、その一貫でしょうね。
ちなみに、今回の統計データ問題も、その一環でデータを精査していた中で
どうも結果と整合性がとれていないという指摘がでて初めて表に出てきたもの。
その面では、安倍政権じゃなかったら、ずっとそのまま闇の中だった
可能性が高いんだよね。

854:デフォルトの名無しさん
19/02/21 21:42:45.12 ocUBF9ryp.net
ここの人は統計の基本的な知識は持ってるんだね
モデルを作るのには必要ないのかもしれないけどデータ分析するならやっぱり必要なんだろうな

855:デフォルトの名無しさん
19/02/21 21:48:03.40 a0vDFZeVa.net
必須です。
モデルを作る場合でも、必要なデータがすべて量があるとは限らない
その場合は、分布を仮定したモデルを組み込まないと満足な結果が
得られない。
本格的に取り組んでいる人は必ずやっているが、ここのほとんどの人は
やってないんだろなと思ってる。

856:デフォルトの名無しさん
19/02/21 21:56:22.20 HHGGRant0.net
持ってるわけがない

857:デフォルトの名無しさん
19/02/21 21:58:30.07 wi98nKsu0.net
統計って言ってもいろいろあるけど

858:デフォルトの名無しさん
19/02/21 22:02:56.72 nghslhBC0.net
>>827
前から出しとるわ。
本当に安倍関係はさらっと普通に嘘つくからな。本人と同じで。

859:デフォルトの名無しさん
19/02/21 22:12:31.92 a0vDFZeVa.net
＞前から出しとるわ。
具体的に行ってみて。
うそでしょうけど。

860:デフォルトの名無しさん
19/02/21 22:20:32.60 YsIQ3BIo0.net
>>826
だっっっっっっっっっっっっっっっさ！！！！
URLﾘﾝｸ(www.tellusxdp.com)
もう一回言う
だっっっっっっっっっっっっっっっっっっっっっっっっっさ！！！

861:デフォルトの名無しさん
19/02/21 22:22:07.49 rZ10GU5LM.net
統計的な知識っていうのは特に推定するところと分散の最適なクラスを抽象化するのに必要な知識ってことで合ってるかもしれないよな

862:デフォルトの名無しさん
19/02/21 22:27:33.54 nghslhBC0.net
>>833
具体的に安倍政権以前に出てなかったソースと
安倍政権下で出てきたソースを出してみて。
そんなものはないのでこっちとしては指摘できることがない。

863:デフォルトの名無しさん
19/02/21 22:28:36.49 a0vDFZeVa.net
>>836
？？？

864:デフォルトの名無しさん
19/02/21 22:32:29.01 a0vDFZeVa.net
自分でしらないこと、分らないことを批判するのはだめだよ

865:デフォルトの名無しさん
19/02/21 22:33:26.54 a0vDFZeVa.net
>>836
落合公園中心の写真だ
別に意味ない話だが

866:デフォルトの名無しさん
19/02/21 23:29:43.30 0x77EXSvM.net
オントロジー定義したりしてるんか。安倍ちゃん

867:デフォルトの名無しさん
19/02/21 23:53:14.24 jOevK1970.net
ディープラーニングなんて単なる最小二乗法だろ

868:デフォルトの名無しさん
19/02/22 01:10:51.83 9lxMevV+M.net
コスト関数を変えたらディープラーニングじゃなくなるのか
知らなかった

869:
19/02/22 01:19:40.52 qUC1+rXN0.net
>>820
ジジイ、ジジイか？
それじゃお前は何だ？このガキが
俺は、お前さんがこの世に落っこって来る前から、バグつくってんだ

870:デフォルトの名無しさん
19/02/22 07:44:29.94 pVImJgYzp.net
>>829
素人過ぎて申し訳ないんですが統計解析したものをモデルに組み込むっていうのがよく分からないです
>>その場合は、分布を仮定したモデルを組み込まないと満足な結果が
この辺の話は元データを統計手法を用いて改良したものを入力っていうか訓練データにするってことですか？
初歩的な質問ですいません

871:デフォルトの名無しさん
19/02/22 09:57:40.24 1tWgvkMda.net
使う手法により異なるけれど、訓練データにするのではなく（もともとないから）
主としては別途アンサンブル的な形になるでしょう。ディープラーニングなどでは
この形は難しいので、適用する対象にによって手法そのものを分ける必要があると
思う。ただし、そんなことやりたくないから、一発手法を求めているのはわかんだ
けど、実場面では一発手法は現時点では難しい。ただし、何もやっていなかった
ところでは、何やっても過去より楽になった、良くなったという見方をしてしまう
ことが多いみたいね。

872:デフォルトの名無しさん
19/02/22 12:19:25.40 9D6v3ksoa.net
囲碁AIブームに乗って、若手棋士の間で「AWS」が大流行　その理由とは？
URLﾘﾝｸ(www.itmedia.co.jp)

873:デフォルトの名無しさん
19/02/22 15:19:05.65 sEbpY4cs0.net
>>826
＞人工衛星が撮影の画像誰でも無料で利用可能に
＞URLﾘﾝｸ(www3.nhk.or.jp)
＞
＞色々面白い遊びに使えそうだけど良いのが思いつかない
これ画像データダウンロードはできないっぽいけど
Jupyter Notebookから画像ファイルとして
普通に扱えるのかな？

874:デフォルトの名無しさん
19/02/22 15:28:33.67 1cZDvNG50.net
>847
全然扱えない
※1：1ヶ月稼働が無ければ、利用を停止させていただくことがあります。
※2：申込の混雑状況によりすぐにご提供できない場合があります。
※3：上記メニュー以外のご利用の仕方についてはご相談ください。
※4：商用利用については別途サービスアグリーメントが必要になります。お問い合わせください。

875:デフォルトの名無しさん
19/02/22 18:20:06.17 IYpVWDew0.net
サイトを見たところ、さくらクラウド上に専用のアプリケーション環境が構築されてあって
ユーザーは、専用アプリを使って画像解析を行う。デベロッパーはさくらクラウドの
環境上で動作するJupyter Notebookを使って画像解析アプリを構築できるみたいな

876:。あと、これ以外にさくらクラウド上のサーバーにアクセスできるルート権限を付与する使い方というのがあり、この場合には直接画像ファイルを触れるかも。ただし、ルート権限サーバーについては要相談と書かれており、多分、初年度からさくらクラウドのサーバーの実費費用は徴収されると思う。多分、ルート権限は経済産業省で具体的な商用化の可能性があるかも審査される気がするから遊びではだめかと。 https://www.tellusxdp.com/ja/dev

877:デフォルトの名無しさん
19/02/22 18:33:04.83 1cZDvNG50.net
>>849
うーん・・・なんかこう、日本って一歩古いんだよなぁ
全部自由にさせて、そのノウハウを吸い上げるというやり方が全くない
ノウハウを吸い上げる能力が無いんだろうけど、あまりに残念すぎる

878:デフォルトの名無しさん
19/02/22 18:38:44.69 o3LmEQza0.net
>>850
自分がタダで使いたかっただけでしょ・・・

879:デフォルトの名無しさん
19/02/22 18:50:53.32 IYpVWDew0.net
地球観測衛星のデータは大別すると光学画像と合成開口レーダーデータに分けられる。
光学カメラ画像はJPEG2000形式が使われていて、データサイズが異常なほど巨大。
レーダーのデータは数値データファイルで、形式変換しないと見れない。多分、かなり
制約がありすぎて普通に提供しても商業利用的には普及しない可能性があるので、環境
を整えて提供することにしたのかと。普通、機械学習で画像データの自動分類を行うに
は256x256に縮小して、学習にかけるようなことを行うが、素のJPEG2000のデータを
縮小させると、細かいデータが欠落して意味をなさなくなる。かといって、縮小をかけない
で256x256の区画に分割するとデータ総量が多くなりすぎて本格的なGPUスパコン並み
の処理能力が必要となる。結果的、普及にはどれも問題があって、最終的にたどり着いた
のが、上の方法なのではないかと推測。あと、余談だけど、Googleがやってた国防総省
の衛星画像解析AIシステムの場合、教師データの作成を時給1ドルで外注に出してた。

880:デフォルトの名無しさん
19/02/22 18:54:24.56 1cZDvNG50.net
>>851
タダというか、手軽に使いたかった
今出回ってるデータセットって基本無料だから、今更こんなめんどくさい事されても困るんだわ

881:デフォルトの名無しさん
19/02/22 19:54:41.00 T0uERcdu0.net
お手軽ならば
今後の地価変動をやってみたかった
道路とか鉄道とかの写真データから地価予測
でも使い物にならないならクソだな

882:デフォルトの名無しさん
19/02/22 20:21:11.35 7vQAP+RTM.net
須山さんはtwitterで見たんだけど
ベイズの人で
svmが許せないのかなと

883:デフォルトの名無しさん
19/02/22 20:45:16.77 hIHy3w8+a.net
単純に考えるとそうなんでしょうが、なぜそれではだめかという
本人のたる理由を知りたいですね。
というのは、その下で学ぼうとする学生にとって、その理由がはっきり
していないと、選択対象にすべきかどうかが判断が付かないので。

884:デフォルトの名無しさん
19/02/22 20:52:01.01 vUBrk6Ima.net
ならば本人に聞きに行けばいい

885:デフォルトの名無しさん
19/02/22 20:59:29.91 hIHy3w8+a.net
知りたいだけで、聞く気はない
自分で必要ないから

886:デフォルトの名無しさん
19/02/22 23:45:00.86 vUBrk6Ima.net
その下で学ぼうとしている学生ではなかったのかよ

887:デフォルトの名無しさん
19/02/23 01:51:44.83 47rng884p.net
>>844
ここで言いたいことは、機械学習学習のモデリングのことではないかな
明らかに正規分布に従わない分布に、正規分布を仮定したモデリングをしても得られる結果は間違っている
同様にベイズ推定系の学習では、共役となる事前分布やハイパーパラメータを適切にえらばないと変な答えを出す
他にもコスト関数に尤度に加えてL1,L2の制約条件を加えたり、さらに追加でスパースネス項を追加したりする場合には、収束条件を満たすかどうかなどが重要で高度な数学の知識がいる
深層学習でKeras等で畳み込みやニューラルネットワークをレイヤとして並べ換えるだけなら統計も数学も要らないが、どういうときにどんな活性化関数を使うとか、どんな損失関数を使うかなどは統計の知識ががあった方が理解は早い

888:デフォルトの名無しさん
19/02/23 02:27:57.03 bgKrSmmR0.net
>>854
衛星画像データは実際のところはエリアは広いが解像度は低い。Google Mapで
衛星画像と表示されてる高解像度画像は、実際は航空写真を使ってる。地球観測
衛星は極軌道を回っているため、同じ場所を撮影する頻度も月単位で、実際には
かなり制約が多い。このため、最近はベンチャー企業が数十機のマイクロ衛星を
打ち上げて、1時間間隔で同一スポットを撮影するといったサービスを開始してる。
この場合、リアルタイムに近い定点観測が可能になるため、交通量の測定とかも
可能になる。ただ、マイクロ衛星の光学機器の解像度は５メートル位とかなり荒い。
一方、Digital Globeの衛星画像とかは、解像度が30センチ前後もあり、軍事偵察
衛星並みの解像度をもってるが、撮影頻度に制約がありリアルタイムの定点観測
とかは無理。また、衛星画像の最大の難点は、曇りの日は地上の撮影ができないこと。
開口レーダーを使えば撮影可能だが、解像度は悪すぎて、地上の物体の精密観測
には使えない。最近の流行は、自動車にLidar乗っけて、地上から3Dデータの取得
を行い、その3Dデータに航空写真のデータをテクスチャーマッピングして、超高
精度地図を作るというやり方。この場合、自動車には光学カメラとWiFIアンテナも
搭載して、同時に住所表記とIPシグナルも記録して、ありとあらゆるデータを地図連動化
してる。

889:デフォルトの名無しさん
19/02/23 07:24:07.29 rE2Cxpkva.net
地図作りや、位置などの把握等につては、どなたでも考え着くことで
ず～っと、地図以外の利用についてのヒントを追い求めてきていると思う。
地下資源や農産物生育状況などへの利用などはあるが、もっともっと新たな
利用方法の発見を期待しているところがあるんじゃないだろうか。
少し、地図から離れて、新たな利用を考えてみようよ

890:デフォルトの名無しさん
19/02/23 07:31:16.91 bCFHqwh50.net
計算機科学は医学より難しいですか？

891:デフォルトの名無しさん
19/02/23 08:17:46.39 rE2Cxpkva.net
質問が難しいかも
言われている医学を医者が行うと位置付けると、まず医者にならないと
いけないから、そりゃ大きな壁があるよね。
そう考えなかったとしたら、医者以外も医学の道はあるのでそうも言えない。
この場合、計算機科学も医学もどちらも学ぶことは自由。
医学は、分らないことが山ほどあるし、研究・調査するのに事欠かない。
その中には計算機科学の活躍の場もある。
ってことは、どうやって比べたらいいか、比べようがなさそう。 <

892:デフォルトの名無しさん
19/02/23 08:44:25.25 /tzQZbCOM.net
PCで書いたりスマホで書いたり、ずっとこのスレ見てるのか？

893:デフォルトの名無しさん
19/02/23 09:52:02.32 LTfMZy7X0.net
LSTMによって、RNNは廃れたのでしょうか？

894:デフォルトの名無しさん
19/02/23 10:04:15.64 Y6UXrWzO0.net
>>864
それ、どこのスレにも出没して似たような質問を繰り返すだけの構ってちゃんだから、まともに答えてもあなたの大切な時間を無駄にするだけだよ

895:デフォルトの名無しさん
19/02/23 12:50:40.51 tGlV7baL0.net
雰囲気で keras を使っているが、
loss が nan になる理由が全くわからないぜ…
ちゃんと勉強しないとダメだな。

896:デフォルトの名無しさん
19/02/23 13:47:22.69 lOjRd0zna.net
URLﾘﾝｸ(twitter.com)
Kotaro Nakayama / 中山浩太郎 @napman1
東大松尾研・iLect・東大先端人工知能寄付講座が共同で実施していたDeep Learning講座「DL4US」のコンテンツを無償公開しました。
のべ3,800名以上の方から応募を頂いておりました。
9:04 - 2019年2月23日
(deleted an unsolicited ad)

897:デフォルトの名無しさん
19/02/23 13:49:07.74 px1wMGql0.net
強化学習の state-value の式について質問です。
スレチでしたらご指摘ください。
「Reinforcement Learning: An Introduction」のPDFを読んでいます。
URLﾘﾝｸ(incompleteideas.net)
59ページ目にstate-valueが自己再帰の形で表せる事を示した式がありますが、
この式の2行目から3行目に式変形できる理由が分かりません。
角括弧の中の Rt+1 が r になるのは分かるのですが、
なぜ Gt+1 が Eπ[G+1 | St+1 = s'] になるのでしょうか。
この辺りのことを説明したwebページや書籍の紹介だけでも構いません。

898:デフォルトの名無しさん
19/02/23 16:12:58.09 lNz7SHfNF.net
P.48
P.55
P.73-75

899:デフォルトの名無しさん
19/02/23 16:17:04.74 44PmOqBU0.net
>>866
Clockwork RNNとかなら

900:デフォルトの名無しさん
19/02/24 07:39:09.59 3qgAHKMI0.net
lstmもrnnでしょ？

901:デフォルトの名無しさん
19/02/24 09:50:14.35 vkGODLXza.net
RNNというのは過去の出力をその後の入力に使うという程度の意味しか持たないのでLSTMもその一種

902:デフォルトの名無しさん
19/02/24 19:07:02.66 xoljfRCp0.net
>>874
IIRフィルタと何が異なるんですか？

903:デフォルトの名無しさん
19/02/24 19:44:24.06 TTN1ftFV0.net
AIに星新一のショートショートを書かせるプロジェクトがあります。
URLﾘﾝｸ(www.fun.ac.jp)
仕組みは、人間が事前にストーリーを作って
AIが特定の部分の単語を穴埋めしていく感じだそうです。
全てAIが作ったわけではないし、こんなのは創作ではないと思うのですが。
疑問なんですが、なぜLSTMを使わないのでしょうか？

904:デフォルトの名無しさん
19/02/24 19:46:18.85 laz54YR/0.net
星新一好きだけどこんな形で出生するとは思わなんだ

905:デフォルトの名無しさん
19/02/24 19:49:54.53 laz54YR/0.net
>>876
創作がどこからどこまでなんて誰にも決められないよ
AIがサイコロだとどうか、虫に効けばどうか、ファンの小学生なら、成人なら、じゃあ編集者なら
何がどうって、面白ければいいんだよ
実は今はちょっとずるい世代で、「AIが作ったものを読んでみたい」という欲求がたくさんある
だからAIがどんな物語を紡いでも、多数の人は面白いと感じるのだ

906:デフォルトの名無しさん
19/02/24 19:51:01.57 laz54YR/0.net
AIの芸術に関しては、ヒューリスティクスという概念を覚えると良いと思う
恐らくこれから必要になる

907:デフォルトの名無しさん
19/02/24 22:07:34.94 QAy2NM1S0.net
芸術はマルチレイヤーコンテキストが重要なのだからそんなもん必要ない

908:デフォルトの名無しさん
19/02/24 23:00:00.26 JFb989xW0.net
ぼっきちゃん

909:デフォルトの名無しさん
19/02/24 23:02:40.70 jhjCTXo8p.net
>>875
呼び方が違うだけで同じものだよ
RNNばかり有名になってるけど、FFN(Feed-Forward Network)というのもあって、RNNはIIRに対応し、FFNはFIRフィルタに対応する

910:デフォルトの名無しさん
19/02/24 23:07:53.63 92VWeI7md.net
ようやくまともな意見が返ってきた

911:デフォルトの名無しさん
19/02/24 23:11:03.11 92VWeI7md.net
呼び名に引っ張られない人が増えてほしいですね
とりあえず手法にラベリングして深く考えない人が多いですからこの業界

912:デフォルトの名無しさん
19/02/24 23:12:43.00 laz54YR/0.net
い～んじゃね
モデルばっかり見ててもキリないしな

913:デフォルトの名無しさん
19/02/25 09:02:25.40 WiC9+kGPa.net
>>879
だね
というより、かかる時間は別として
ヒューリスティクスそのものだから

914:デフォルトの名無しさん
19/02/25 10:27:48.38 NsVMMXXwd.net
全くいらない

915:デフォルトの名無しさん
19/02/25 10:30:01.10 NsVMMXXwd.net
『ヒューリスティクス』なんて言葉より発見的探索とか言ったほうがわかりやすい

916:デフォルトの名無しさん
19/02/25 10:51:44.35 mBiroDnU0.net
>>888
ヒューリスティックやん

次ページ