【統計分析】機械学習 ..
472:デフォルトの名無しさん
19/05/24 07:06:03.33 +y8seB4Ia.net
>>453
AutoMLのこと？
473:デフォルトの名無しさん
19/05/24 07:44:19.65 I9WDb3qi0.net
そ
474:デフォルトの名無しさん
19/05/24 10:44:00.43 PyBT4/Drd.net
＞ID:nwZRkhw20
内容を盛るな
475:デフォルトの名無しさん
19/05/24 11:45:01.97 85WKPh7U0.net
需給予測は市場規模小さい業界だと思ったが
今は広がってんのかね
476:デフォルトの名無しさん
19/05/24 11:46:32.82 85WKPh7U0.net
>>455
昔のＰＣでNNの計算なんてとてもやってられん
477:デフォルトの名無しさん
19/05/24 12:03:40.99 CZsiC+PjM.net
自然言語処理を専門にするか、画像認識を専門にするか…
478:デフォルトの名無しさん
19/05/24 12:19:35.24 OLZB0xfya.net
画像認識のがいいよ
479:デフォルトの名無しさん
19/05/24 12:51:54.61 MIOpJWB2M.net
自然言語のほうがいいよ
480:デフォルトの名無しさん
19/05/24 13:00:34.07 WtzG6gjzM.net
これからは強化学習だよ
481:デフォルトの名無しさん
19/05/24 13:16:34.07 zawpyxYKa.net
>>自然言語処理を専門にするか、画像認識を専門にするか…
>画像認識のがいいよ
>自然言語のほうがいいよ
耳の不自由な人を
画像認識と自然言語で支援しなさい
482:デフォルトの名無しさん
19/05/24 16:44:12.22 Dri14T8iM.net
gunってなんの役に立つんだろうと思ってたけど結構gunを使ったサービス増えてきたね
483:デフォルトの名無しさん
19/05/24 16:58:18.90 kUwj1SkL0.net
機械学習には適切なデータが大量に必要と言っている人がいたけど、
別にそこまで適切ではなくてもいいんだよ
ある程度信頼できれば
URLﾘﾝｸ(gigazine.net)
484:デフォルトの名無しさん
19/05/24 16:58:34.59 kUwj1SkL0.net
>>467
GANな
485:デフォルトの名無しさん
19/05/24 18:11:30.03 s0JZ13JH0.net
>>467
実務上は、少ないデータでいかに使える結果を得るかということが
必要とされることが多いですからね。
486:デフォルトの名無しさん
19/05/24 21:35:22.94 MIOpJWB2M.net
そうそう
ビッグデータというけど
続けて標本サイズの小さい仕事をやってる。
ｎ＝40個ほどしかないけど
説明変数200ほどあって
14種類の機械学習試したら
どの方法でもなんとか予測できた。
同僚の手腕がいいので助かってる。
487:デフォルトの名無しさん
19/05/24 21:49:38.41 t/lJBqRi0.net
教師無しではデータの量と質が要求されるけど、
教師有りでは過学習に陥らないように学習させれば、1/10ぐらいの量でもイケルという認識
488:デフォルトの名無しさん
19/05/25 06:04:38.31 uqI/ytR10.net
嘘松( ´・∀・｀)ｿｰﾅﾝﾀﾞ
489:デフォルトの名無しさん
19/05/25 08:41:04.76 GmewsWkw0.net
GUNは業務では使えんけど見栄えいいから公開に向いてるってだけだぞ。
490:デフォルトの名無しさん
19/05/25 08:46:24.90 uqI/ytR10.net
ぐん？
491:デフォルトの名無しさん
19/05/25 09:03:03.05 H9G4SGp2a.net
>>472
そんなん問題によって違うとしかいいようがない
学習をしやすい問題とそうではない問題がある
機械学習の基本中の基本
492:デフォルトの名無しさん
19/05/25 09:20:50.22 /FLyHH1C0.net
教師データの水増しに使われてるよ
493:デフォルトの名無しさん
19/05/25 10:07:48.15 c7a1xFWv0.net
>>431
＞ どうやって仕事とってるの？ どんな感じの内容？
「フリー」と書きましたけど、自営業というより「非正規」という意味で書きました。
元々統計学を専攻してたけど卒業してからIT企業にてSEやってました。
その会社でいろいろイヤなことがあって辞めて、
メーカー系列のPG作成�
494:ﾌアルバイト募集で面接にいったとき、 統計学を専攻していたと言ったら ちょうどデータ分析の人を探しているということで アルバイトしませんか？といわれたのがはじまりです。 その後は、請負い、契約社員、SES契約、派遣社員と いろいろな契約形態でやっていましたけど、 そろそろ正社員になるかもしれません。 正社員になると年収は少し下がりますけど、 もうすぐ不況になりそうな予感がするので、 さっさと正社員になったほうがいいと思っています。
495:デフォルトの名無しさん
19/05/25 10:55:38.38 HkxaNc28a.net
教師あり学習って教師なしに誤差ゼロの特徴量が加わっただけだから大した差はないのになぜか別物扱いしてしまう人が多いよね
496:デフォルトの名無しさん
19/05/25 11:19:48.34 yOpOJb7D0.net
伝統的に別として説明する教科書が多いからだよ
497:デフォルトの名無しさん
19/05/25 11:24:42.57 dxGKXP5f0.net
フリーで月200万もらえてたとかじゃなさそうね。
498:デフォルトの名無しさん
19/05/25 12:14:49.26 FHjbLbB2a.net
>>479
誤差ゼロって何に対する誤差だよ
ラベルの事を指してるんだろうがラベルは予測に使わないし特徴量ではない
教師ありとなしは完全に別物だぞ
499:デフォルトの名無しさん
19/05/25 12:28:42.88 95Ybe8BPa.net
ラベル以外の特徴量から何らかの方法でラベルに近そうなものを計算して、その計算結果と実際のラベルを比較して誤差を調べる
誤差が大きければ計算方法を修正する
そうして最適なラベルの算出方法を決定するわけで、「予測に使う」というのが学習過程で使われるという意味ならラベルもその他の特徴量もしっかり予測に使われている
教師ありではラベルは絶対的に正しいこと(=誤差ゼロ)を前提とするのでラベルとの誤差が精度の良い評価対象になるが、
教師なしでは誤差混じりの特徴量しか得られなかったがために別の評価指標を使っているだけのこと
理論の上では本質的な違いはないんだよ
500:デフォルトの名無しさん
19/05/25 12:49:19.46 uqI/ytR10.net
損失、じゃなくて？
誤差なの？
501:デフォルトの名無しさん
19/05/25 12:55:03.49 9EmqmScDr.net
>>483
学習途中の話？予測に使うというのはモデルに入力するという意味
運用時にラベルは与えられないだろ？
教師なしは学習時と運用時で使える情報は同じだが教師ありは違う
自動車と金槌の本質的な違いは？って聞かれても答えに困るわ
逆に理論のどこを見て本質的に同じだと思うのか
用語の意味を都合よく解釈しているようにしか思えない
502:デフォルトの名無しさん
19/05/25 13:04:20.15 9EmqmScDr.net
>>484
誤差の大小と損失の大小は同じなのでここではどちらでも良い
503:デフォルトの名無しさん
19/05/25 13:07:36.46 t7lA5k1Lp.net
>>483
前から教師ありとなしの本質的な差がないと主張する人がいて、その真意を聞きたかった
例えばMNISTで教師なしで分類したとする
全部で10種類とクラスの数を固定すれば、教師なしでもおそらく正しく分類してもらえ、本質的な差がないという主張は理解できる
ではクラスの数が不明としたらどうだろう？教師なしではどんなにデータを増やしてもクラスの数が不明な限り同じ結果は得られないだろう
この辺りの説明をしないで本質的に同じと説明すると、機械学習は本質的には最小二乗法と同じと言ってしまい炎上したのと同じ危うさがある
504:デフォルトの名無しさん
19/05/25 13:53:46.85 S47qxAlEd.net
元々数学的な手法がいろいろあって、機械学習の分野のやつが勝手に2つに分類しただけ。
教師有りと無しで基礎原理は大きく異なる。
505:デフォルトの名無しさん
19/05/25 14:05:38.03 O1zpSt3I0.net
まあ何らかのモデルの式のパラメーターを最大/最小にする問題と考えると大差はないかもしれん
正解ラベルとの誤差で式を立てるかそれ以外の式で立てるかどうかの違いでしかない
数学的に考えれば
506:デフォルトの名無しさん
19/05/25 14:07:27.49 S47qxAlEd.net
？？？
507:デフォルトの名無しさん
19/05/25 14:07:51.79 S47qxAlEd.net
>>489
原理わかってないの？
508:デフォルトの名無しさん
19/05/25 14:09:45.78 S47qxAlEd.net
489の条件は絶対的でないよ
509:デフォルトの名無しさん
19/05/25 14:23:18.41 rW5FDb6DM.net
ディープラーニング使ったらCGとかも今よりずっと低コストで作れるんだろうな
個人でスターウォーズなみの映画とか作れたりとか
特に流体の表現でかなり効果を発揮しそう
510:デフォルトの名無しさん
19/05/25 15:42:51.81 /Qx1Z2J/a.net
3水準以上の多重比較検定は偶然の確率が上がるから棄却域を下げるっていうのが納得いかないんだけど
ABCの3水準があってAとBに差があるかだけが知りたい場合Cとの検定は関係ないのでは？(極論を言えばCとの検定を行わない)
どこかに差があるかを調べたい場合のみ有意水準を操作すればいいの？
511:デフォルトの名無しさん
19/05/25 15:49:22.03 LV9LUlXva.net
>>489
そうだな、犬も猫も人間も哺乳類と考えると大差はないかもしれん
512:デフォルトの名無しさん
19/05/25 16:19:05.08 997oQV33F.net
データサイエンティスト育成講座
URLﾘﾝｸ(www.hanmoto.com)
513:デフォルトの名無しさん
19/05/25 16:40:11.40 997oQV33F.net
・手取り足取りデータの前処理から予測モデルの作成、チューニングまで一通り網羅
・質の良い参考書がたくさん紹介されており、これから先もある程度示してくれる
・学術書でないので、安い
欠点: いずれも入門書である以上当たり前ですが
・アルゴリズムの数学的なところはすっとばし
・実務の前処理地獄はこんなもんじゃない
・この本の内容ができる程度で「AI人材」を名乗るな
514:デフォルトの名無しさん
19/05/25 16:42:30.74 uqI/ytR10.net
まず松尾豊の研究室から
論文とデータサイエンティストが生まれてから
本を出せや
515:デフォルトの名無しさん
19/05/25 16:45:51.62 997oQV33F.net
執筆者ではない
監修ですらない
516:デフォルトの名無しさん
19/05/25 17:10:51.99 UpoKtTek0.net
現在、AI事業が流行ってるわけではなく、AI事業を育成するための事業が流行中。
実績？わらわら。
517:デフォルトの名無しさん
19/05/25 17:21:31.34 MDBcKokxx.net
>>494
若干スレ違いとも思うけど検定の多重性問題だね
ロジカルに考えると分かると思うよ
例えば3学級A, B, Cの算数の試験で、学級Cは他学級よりも優秀か調べたい
つまり (C > A) AND (C > B) を調べたい
検定としては(A = C) OR (B = C)を帰無仮説としてこれを棄却したい
棄却域をそれぞれ5%とすると、5%の可能性で(A = C)がFalse, (B = C)がFalseとなる
(A = C)と(B = C)の両方がFalseにならない限り、(A = C) OR (B = C)はFalseにならない
この場合はA = Cを帰無仮説とした検定とB = Cを帰無仮説とした検定の2つを行って良い
別のケースで、学級Aあるいは学級Bが学級Cよりも優秀か調べたい場合を考える
つまり (A > C) OR (B > C) を調べたい
検定としては(A = C) AND (B = C)を棄却したい
上記同様に棄却域をそれぞれ5%とすると、5%の可能性で(A = C)がFalse, (B = C)がFalseとなる
(A = C)と(B = C)のどちらかがFalseになると(A = C) AND (B = C)はFalseになってしまう
つまり棄却されやすくなってしまっているので有意水準を調整する必要がある
518:デフォルトの名無しさん
19/05/25 17:36:49.30 suGe7WeyM.net
>>493
どゆふうに流体と関係あんの？
519:デフォルトの名無しさん
19/05/25 18:13:45.67 BEAwB+2w0.net
>>496
この本見たけど初心者には訳わからんし上級者には役に立たなさそうで何とも惜しい感じがした
520:デフォルトの名無しさん
19/05/25 18:20:19.51 69q3ULG00.net
>>502
流体の境界条件・初期条件に対する
521:流体の解析処理結果を学習データとして使用すれば、それをもとに自動的に流体のアニメーションを生成してくれるものができるはずって意味です 今までの流体解析はスーパーコンピュータ使ったりしてすごくコスト高かったけどAI使えば低スペックＰＣでもよりリアルな流体表現ができるよねって話
522:デフォルトの名無しさん
19/05/25 19:52:31.11 C+z4Q3r1a.net
>>501
出したい結論次第ということか
あと質問なんだけど、
前者の帰無仮説の(A=C)と(B=C)をそれぞれ棄却域5%で検定したら
全体では棄却域1-(1-0.05)*(1-0.05)=9.75%で検定したことになりませんか？
523:デフォルトの名無しさん
19/05/25 21:18:20.43 MDBcKokxx.net
>>505
前者は(A=C)の検定と(B=C)の検定を合わせて全体でという考え方はしない
帰無仮説の説明からしたほうが良さそう
「Aの平均とBの平均は異なる」を検証するのに、わざわざ帰無仮説として
「Aの平均とBの平均は同じである(A = B)」という仮説をするのか？
それは「同じである」ことはケースとして1ケースしかないが
同じでないことはケースが無限に存在し検証ができない
「平均が同じ」という仮説を立てることで、現在発生している状況が
どのくらい起こりにくいことなのかを計算することができる
後者の(A = B) AND (B = C)は書き直せばA = B = Cで
これはケースとしては1ケースしかないので帰無仮説として利用可能である
しかし前者の(A = B) OR (B = C)は、片方を満たせばもう片方は無限のケースを許してしまい
これは帰無仮説として設定しても計算できない
大元の質問に戻って、ABCの3水準がある場合にCの検定をする必要がないのでは?
という質問については、帰無仮説として「A=B=C」が設定できないのであれば
当然多重比較検定の前提条件を満たしていない
524:デフォルトの名無しさん
19/05/25 21:54:09.32 yOpOJb7D0.net
>今までの流体解析はスーパーコンピュータ使ったりしてすごくコスト高かったけどAI使えば低スペックＰＣでもよりリアルな流体表現ができるよねって話
ありえねーわ。
微分方程式の数値解求めるアルゴリズムと
補間曲線フィッティングするアルゴリズムは目的も用途も別。
ちなみにＣＡＥとＡＩは相性自体は良い。
ＣＡＥはデータを無限に生成できるからな。
昔からアンテナシミュレーションソフトに最適化っていう機能あって
古い機械学習アルゴリズムがついていたりした。
525:デフォルトの名無しさん
19/05/25 22:17:07.06 j+1UCpGZ0.net
>>506
同時にfalse positiveが発生しない限り間違って棄却されないから問題ないってことか
526:デフォルトの名無しさん
19/05/26 02:54:23.04 Twzbio4W0.net
>>507
AIを使った流体のCG表現が不可能である理由はなに？
人間には手書きで流体のアニメーションを書けたりするけどAIには無理ってこと？
527:デフォルトの名無しさん
19/05/26 15:06:35.97 Twzbio4W0.net
>>509
今ゲーム業界はレイトレーシングだなんだと騒いでるけどこの技術が確立されたらより現実と見分けがつかないグラフィックのゲームとかできそうだね
528:デフォルトの名無しさん
19/05/26 15:41:51.01 7eYATO63r.net
sim2realとか使って荒いシミュレーションで大雑把なグラフィックを作ってAIでリアルに仕上げたりできそうだね
529:デフォルトの名無しさん
19/05/26 15:43:31.27 FDD59Vgs0.net
今の機械学習では仮説形成と演繹ができないと言われているが
仮説と演繹と帰納を識別できる判別器を作れないものなの？
530:デフォルトの名無しさん
19/05/26 15:49:47.77 KAaQkTQwa.net
演繹しまくりじゃね
531:デフォルトの名無しさん
19/05/26 16:06:05.73 FDD59Vgs0.net
>>512
×機械学習
〇深層学習
532:デフォルトの名無しさん
19/05/26 16:07:30.86 jVNot2dUp.net
分類としては3つしかないけど難しそうだね
--(帰納)-->(仮説)--(演繹)-->
ループとかも問題になりそう
ニワトリ → 判別機 → 卵の演繹です！
卵 → 判別機 → ニワトリの演繹です！
533:デフォルトの名無しさん
19/05/26 18:28:41.21 ZW
534:+JHuoB0.net
535:デフォルトの名無しさん
19/05/26 19:59:54.33 MRHfC0tka.net
>>514
ニューラルネット自体が関数近似器でしか無いから根本的に厳しいような気もする
536:デフォルトの名無しさん
19/05/26 20:03:16.17 Suq0krAi0.net
その手のことは組合せ爆発を伴うから
機械学習で連続的な取り扱いで楽することが流行っとるわけよ。
537:デフォルトの名無しさん
19/05/26 20:05:37.77 MRHfC0tka.net
というか演繹って機械学習と真逆の考えだからなあ
出発点の事実から論理をどう組み上げるかだから学習の余地は無くて、組合せ最適化あたりだろうか
538:デフォルトの名無しさん
19/05/27 01:28:00.88 CXLCqwWfM.net
学習した識別器をつかって答えを予測することは演繹とは少し違うのかな
そこら辺の概念的なことをよく理解できていない
539:デフォルトの名無しさん
19/05/27 05:32:58.30 t6QjrYpW0.net
バックプロパゲーションについて勉強してます
URLﾘﾝｸ(qiita.com)
このページの式13.14.15に突然yって出てくるんですがこれはどういういみですか？
何故ここでyが出てくるのかわかりません
どなたかわかりやすく教えていただけないでしょうか？
540:デフォルトの名無しさん
19/05/27 07:48:28.29 DsUkLbuS0.net
>>521
(9)式の y のことだよ。(10)式の微分を考えると出てくる。
541:デフォルトの名無しさん
19/05/27 07:54:02.92 t6QjrYpW0.net
>>522
なるほど！ありがとうございます
542:デフォルトの名無しさん
19/05/27 11:50:06.57 KdEWqt5uM.net
初歩的な質問で申し訳ないのですが
2値分類の評価指標に関して教えて下さい
accuracyはデータが偏ってる場合には適さないという理由は理解できました
データの割合が均等な場合（正常50% 異常50%）の場合でもaccuracyは評価に適していないのでしょうか？
543:デフォルトの名無しさん
19/05/27 13:29:27.61 /16uSnZGp.net
>>524
例えば犬と猫の写真があって
犬の写真を犬と判断 TP
犬の写真を猫と判断 TN
猫の写真を猫と判断 FP
猫の写真を犬と判断 FN
Acc = (TP+TN)/(TP+TN+FP+FN)
だから、TPとTNは式の形から全く等価
犬を猫と判断しまくってもOKなの？
あなたのやりたいことがOKなら使ってもいいし
NGなら別の指標
544:デフォルトの名無しさん
19/05/27 14:54:42.55 /16uSnZGp.net
思いっきりミスってた
こういうのは犬とか猫より正常、異常のが間違いがないな
正常な写真をX枚、正常を正常と判断する確率をα
異常な写真をY枚、異常を異常と判断する確率をβ
とすると、それぞれの枚数は
TP = αX
TN = βY
FN = (1-α)X
FP = (1-β)Y
Acc = (αX + βY) / (X + Y)
仮にXとYが同じ枚数ならX=Yとして(α+β)/2
偏りがなければ使っても良いかといえば、αとβを等価に扱って良ければOKだし、等価に扱えないなら別の指標
545:デフォルトの名無しさん
19/05/27 17:23:55.48 KdEWqt5uM.net
>>526
とても分かりやすい説明ありがとうございます
正答率は説明頂いた特徴があり、それでも参考書や記事などで正答率を算出する事が多いのは単純に説明がしやすいからでしょうか？
546:デフォルトの名無しさん
19/05/27 17:28:43.12 KJQjBYp00.net
タスクとエラーのリスクに応じて個々で検討すべき事柄だから
大体は省略されてる
547:デフォルトの名無しさん
19/05/27 18:05:50.75 otLNcE2UH.net
機械学習にしろディープラーニングにしろデータを元に「学習」するわけじゃないですか
でその「学習した結果」に新しいデータを通すとそのデータに対応する答えを「結果」が弾き出しますよね
このときの「結果」って一体なんなんでしょうか。小人さんがマシンの中にいるわけでもなし
パラメータがx1x2...xnってあったときに結果としてf(x1, x2,....xn)な関数が生成されるみたいな理解でいいんでしょうか？
もしそうならその関数が実際どんな数式？なのか見る術はありますか？kerasで勉強しています
548:デフォルトの名無しさん
19/05/27 18:22:40.43 2deMEJc2a.net
補間
549:デフォルトの名無しさん
19/05/27 18:24:14.91 2deMEJc2a.net
一回単純なモデルでいいからライブラリ使わずに実装してみるといいよ
550:デフォルトの名無しさん
19/05/27 18:57:20.00 cl2rg6uY0.net
補間だが演繹
551:デフォルトの名無しさん
19/05/27 19:00:05.40 Ne4UfqvxM.net
あー、今日も仕事終わった
だりィ、
データ分析やらせろボケ上司！
書類仕事はイャダ－！
552:デフォルトの名無しさん
19/05/27 19:02:36.82 w8JoPjjJM.net
データ見せる為のWebUI作ってる。書類よりはマシだな
553:デフォルトの名無しさん
19/05/27 19:12:00.16 nYz1CYbBa.net
>>529
簡単な最小二乗法を試してみるといい
エクセルでできるから
554:デフォルトの名無しさん
19/05/27 19:20:32.76 w8JoPjjJM.net
AI人材って普通に理系なだけだな
騒ぐほどのモンではないと思うけど、文系を引きずり下ろせるチャンスなわけだ
555:デフォルトの名無しさん
19/05/27 19:59:53.30 T/hWbhauM.net
データサイエンスで経営戦略方面から射撃
AIエンジニアリングで花形現場からの射撃で十字放火や
556:デフォルトの名無しさん
19/05/27 20:01:57.78 mqq2cpZZa.net
それを安く使い捨てたいから文系様がAI人材量産計画を叫んでいるのが現状
557:デフォルトの名無しさん
19/05/27 20:01:58.26 cpnvt74A0.net
いや、sum関数やvba位の位置づけになるかと
558:デフォルトの名無しさん
19/05/27 20:10:01.28 T/hWbhauM.net
計算資源ドカ食いするExcelやでぇ
559:デフォルトの名無しさん
19/05/27 20:12:55.37 izC7ByhK0.net
エクセルの最小二乗法は怪しくなかったか？
560:デフォルトの名無しさん
19/05/27 20:23:42.82 /16uSnZGp.net
>>529
イメージとしては間違ってないと思う
kerasならmodel.layer[i].get_weights()で重み取れるから見ることはできるけど意味はないかな
AND OR XORくらいなら重み見て頑張れないこともないが
561:デフォルトの名無しさん
19/05/29 21:10:53.74 AMD232/i0.net
パーセプトロンの勉強してる
分類問題なら出力層は当然その分類する項目の数になるだろうとは思うのね。0から4を判別するのに学習データのラベルが[0 0 1 0 0]みたいな
んで回帰問題の出力層のノードが複数になるケースってある？住宅価格予想みたいに答が一つに定まるのが回帰問題だから当然出力層はノード一つだよなとか思ってたんだけど
なんかそうじゃないっぽい？
562:デフォルトの名無しさん
19/05/29 21:13:20.60 7nrnLjkN0.net
>>543
勉強にお勧めの書籍やサイトはありますか？
563:デフォルトの名無しさん
19/05/29 22:11:55.58 XEw54qYY0.net
「15分後の株価」と「30分後の株価」とか
564:デフォルトの名無しさん
19/05/29 22:17:48.69 qjKa/CEa0.net
>>545
株価予想って機械学習で一般人でできるのかね
どれだけ質のいい情報が入手できるかのほうが重要そう
トランプのツイッターが原因で中国の株が乱高下してても中国の個人投資家はなんで相場が動いてるのか分からんかったとかいう話聞いたし
565:デフォルトの名無しさん
19/05/29 22:32:21.01 tZl3oLaI0.net
株価って突発的な出来事の影響が大きそうだし予想できるもんなんかね
566:デフォルトの名無しさん
19/05/29 22:32:43.30 pf0Cg+pWx.net
>>543
銀行1の株価、銀行2の株価、とか？
同じ業種の株価は連�
567:ｮするから、入力も出力もグループ化するよ >>545 個人でも儲かる方法はあるよ 詳細は言わないけど、どうしても大手とは違うやり方になる
568:デフォルトの名無しさん
19/05/29 22:36:38.33 uNZ63kmU0.net
>>546
中国株触るのにトランプの動向チェックしないなんてありえないから
たぶん中華投資家は情報統制食らってるんじゃないかな。
569:デフォルトの名無しさん
19/05/29 22:37:08.35 pf0Cg+pWx.net
>>547
予想というより結果を大事にする
ボラティリティ(分散)はGARCHでかなり上手くモデルに当てはまる
ボラティリティが予想できるなら、オプションで儲けられるはずだけど、そもそものオプション価格がそれを見越した価格設定がされていて手数料負けする
なので違うやり方になる
株価自身の予想は統計的には予想できないことになっている
でも、儲ける方法はある
こんな感じ？
570:デフォルトの名無しさん
19/05/29 22:38:46.58 DaGU3Mz0a.net
株価は短期なら意外と当たるんだが、
たまに来る、予想と違う方向へどかんと動いて固定
これが怖い。大体これにやられて退場する人が多い
最近だとリーマンショックとか。
571:デフォルトの名無しさん
19/05/29 22:42:11.57 pf0Cg+pWx.net
あまり儲からないけど、ほぼ確実なのは鞘どりだね
連動する株価を反対売買する
これは機械学習するまでもなく従来の時系列データ解析で十分できるけど、今なら機械学習で簡単にできるよ
この方法は手数料がとにかく安くなるようにするのがポイント
572:デフォルトの名無しさん
19/05/29 22:53:33.08 qjKa/CEa0.net
>>549
中国国内からは通常の方法ではtwitterとかgoogleとかyoutubeとかは見られないらしいよ
573:デフォルトの名無しさん
19/05/29 23:20:45.39 w1YMyBUf0.net
VPNで何とでもなりそうだけど、どうなのかね
574:デフォルトの名無しさん
19/05/30 06:16:41.72 3VEQV70R0.net
vpnでどうにかなった
575:デフォルトの名無しさん
19/05/30 09:08:02.19 8juV0fmw0.net
機械学習で株価って、ずいぶん前からやられていることだから
結果については、その人の力量次第
576:デフォルトの名無しさん
19/05/30 10:22:31.99 3C4CVC+50.net
>>551
それでも儲けるハゲタカ
577:デフォルトの名無しさん
19/05/30 10:44:39.22 niFMShc3a.net
株価の予想に頼らない売買法さや抜き。
578:デフォルトの名無しさん
19/05/30 14:38:28.57 8juV0fmw0.net
>>558
株であれば会員業者
為替は取引業者じゃないと
手数料の関係で儲けるのは大変難しい
579:デフォルトの名無しさん
19/05/30 19:09:07.15 aU6K3cRFM.net
transformerてcnnなの？
580:デフォルトの名無しさん
19/05/30 19:20:01.02 Ec3P7ZkhF.net
>>543
出力5通りしかないなら3bit出力でもいけるはず
581:デフォルトの名無しさん
19/05/30 19:52:55.23 0qwHKIKpa.net
2進数表現は分散表現だから個々のbitに意味がない限りone-hotの方がいい
582:デフォルトの名無しさん
19/05/30 20:41:03.18 Ec3P7ZkhF.net
人間の脳だとどっちなんだろ
583:デフォルトの名無しさん
19/05/30 20:45:39.63 s4B+etfT0.net
理論上はデルタヘッジしときゃ儲かるんでないの？
584:デフォルトの名無しさん
19/05/30 22:19:08.77 PBHpgwjDp.net
>>564
鞘どりと同じで枚数を多く買って微調整が必要だから手数料負けする
デルタヘッジは相場が動けば儲かるように書かれてるけど、実際にやると始値終値で仕掛けない限り理想の価格で買えない
あとデルタ調整を毎日できるマメな性格と、急激に動いた時に即座に対応できる暇人の能力が必要になる
585:デフォルトの名無しさん
19/05/30 22:57:28.17 s4B+etfT0.net
>>565
なるほど。
>実際にやると始値終値で仕掛けない限り理想の価格で買えない
この視点は完全に抜けてたわ。
586:デフォルトの名無しさん
19/05/31 08:33:35.49 8Nq4J3at0.net
TJOの本名ってなに？
著書を読みたい
587:デフォルトの名無しさん
19/05/31 08:56:09.46 JBiczG6TM.net
>>566
俺は違う考え方。
予測と売買手法はペアで考えるべきと思います。
というか関係深いので、
予測手法と売買手法の
適切な組み合わせを
模索すべきでしょう。
使ってるデータも予測手法も明らかにしてないのに
始値と終値が理想と言われても
ピンときません。
588:デフォルトの名無しさん
19/05/31 09:50:20.29 vi/KBQMNM.net
板情報も予測に含めるのは、出来たらいいけどデータ集めが無理そう
589:デフォルトの名無しさん
19/05/31 12:06:44.13 Ff6e28/xH.net
ステップ関数で閾値を超えたら1超えなかったら0
閾値を移行して+b=-thresholdでバイアスに置き換えると計算楽でなるほどー
とか思ってたんだけどさ
シグモイドなんかだと断絶してないじゃん。どの値入力されても連続的に出力されて閾値無いじゃんと思うの
んで閾値が無いなら上の定義からバイアスも無いんじゃね？って思うんだ
バイアスってなんなんだろう閾値じゃないんか
590:デフォルトの名無しさん
19/05/31 12:25:46.27 anN+B1rmr.net
シグモイドが0.5を超えるかどうかが境目じゃね
591:デフォルトの名無しさん
19/05/31 13:41:13.67 kJS62wWPp.net
>>568
予測と売買手法はデルタヘッジという言葉に含まれていて分離されているわけではないよ
デルタヘッジは売買手法のことで、ボラが大きくなることを予想した場合にとる手法のこと
理想価格というのは、検証に使った価格と同じ価格で売買できるかという事
592:デフォルトの名無しさん
19/05/31 20:08:15.95 Y4zgyW5lM.net
【機械学習】株価予測
ｽﾚﾘﾝｸ(tech板)
過疎ってるこっちを使ってやってくれや
593:デフォルトの名無しさん
19/05/31 21:03:34.70 SYuh0ZxQ0.net
少なくとも今はボラティリティーはかなりでかい相場と見ていいだろう。
これでボラティリティー低いとか言ったら安定とはとか思い出すわ。
594:デフォルトの名無しさん
19/06/01 00:21:56.03 6lfNl3yX0.net
>>573
めっちゃ過疎ってたw
595:デフォルトの名無しさん
19/06/01 09:12:18.05 HfNJIaaua.net
正直株価予想興味ない
596:デフォルトの名無しさん
19/06/01 11:05:39.49 FEy0/cL3a.net
こんな素人レベルの考えで株価予想できるなら当然世界中の投資家が既にやっていて多額の金が動いている
そうすれば上がりそうなら買い、下がりそうなら売りが即座に入るので結果的に株価の変動がほぼなくなる
現状そうはなっていないので誰にもできていないということ
597:デフォルトの名無しさん
19/06/01 11:41:45.97 KmtNp3Ps0.net
今は予測どうこうより
他人より早く変動をとらえて
差額をかすめ取る方が勝つ
だからFPGAが流行る
598:デフォルトの名無しさん
19/06/01 14:42:54.57 RQeh12YpM.net
AIも結構負けてるらしいけどね
599:デフォルトの名無しさん
19/06/01 16:20:19.02 WS2F10M10.net
>正直株価予想興味ない
そこだよな
技術者って株やってるやつがそもそも少ないんだわ
600:デフォルトの名無しさん
19/06/01 16:30:05.62 hwSQjOfA0.net
取引用のAPIとか流行ってないのもあると思うけど
601:デフォルトの名無しさん
19/06/01 17:34:56.30 dhP+frpUx.net
>>581
GMO証券が昔やってたけど、プログラマーが業者間アービトラージやりすぎて禁止にしたんだわ
同じUSDJPYでも業者間で開きがあってね、でも基本は同じ価格だから監視して反対売買するだけでノーリスクだったんだ
そしたらシステムの不備をついての取引はなかった事にするって決められて取引ノーカン、待て待てお前らもシステムの不備で個人に損失押し付けてるだろってなって、GMOがめんどくせ、でAPIごと無くなったw
602:デフォルトの名無しさん
19/06/01 17:38:45.74 hwSQjOfA0.net
GMO API懐かしい。
なるほど、そんな裏話があったとはｗ
603:デフォルトの名無しさん
19/06/01 18:51:47.90 GYFwl+wK0.net
「手を動かしながら学ぶ ビジネスに活かすデータマイニング」尾崎 隆
禿げてるくせにアイコンではドフサなのなw
604:デフォルトの名無しさん
19/06/01 21:33:13.93 q5GNYH3B0.net
これはひどいw
フレーム問題は解決済みというこのブログの62からの書き込みをご覧下さい。
ななしさんvs田方さんの議論が続いているけど
田方さんはひたすらコピペを繰り返すのみw
どちらの意見の方が正しいと思いますか？
URLﾘﾝｸ(robomind.co.jp)
605:デフォルトの名無しさん
19/06/01 22:20:06.45 6lfNl3yX0.net
>>585
わたしはナナシさんに一票ですかねー
606:デフォルトの名無しさん
19/06/01 22:41:25.66 2XldKqBd0.net
双方、定義が曖昧で詰め切れてないような
言葉で説明するより、数式化した方が解りやすい議題では？
607:デフォルトの名無しさん
19/06/01 22:47:35.18 6lfNl3yX0.net
確かにそんな感じはするよね
ナナシさんの方は人間すら解けない一般化フレーム問題について言及してそうだし
田方さんの方は条件が揃えば有限推論にまで落とし込めるレベルまで来てるって話してる
自分はまだ後者すら怪しいと思ってる
608:デフォルトの名無しさん
19/06/02 03:44:15.71 2KxPItQH0.net
ボーナス出たらPC買い替えたいんだけどみんな自宅でどんなPC使ってる？
コンペ出てる人とかはモンスタースペックなんだろうか
今使ってるのが下のスペックなんだけどGPU積んでるやつそろそろほしい
ノートPC
メモリ8G
SSD128G
609:デフォルトの名無しさん
19/06/02 06:15:33.28 IIH/Ft8W0.net
>>589
ゲーミングPCにUbuntu入れてる
Core i7-8700
32GB
RTX-2080Ti
30万円くらいしたけど15万円くらいのノートPCにして残りはクラウドでも良かったかな
610:デフォルトの名無しさん
19/06/02 08:49:41.97 sOEEtAtn0.net
automlでいいじゃん
611:デフォルトの名無しさん
19/06/02 11:39:59.34 KRm86vg2a.net
colabでタダで使えるGPUが50万ぐらいするやつだから、それ以上の金をつぎ込むかどうしてもオフラインで使えなければならないとかでなければ
PCはできるだけ安価にして機械学習の実行はcolab使った方が圧倒的にマシ
612:デフォルトの名無しさん
19/06/02 11:42:57.91 +FZaNNUF0.net
EC2のp2インスタンスで優雅に実行してる
613:デフォルトの名無しさん
19/06/02 11:49:22.08 fhCQazd50.net
URLﾘﾝｸ(headlines.yahoo.co.jp)
614:デフォルトの名無しさん
19/06/02 16:16:23.54 sOEEtAtn0.net
向こうにデータが流れちゃうんだっけ？
615:デフォルトの名無しさん
19/06/02 16:54:44.09 bAFc1zkP0.net
>>594
だれが責任取るんだろうな
616:デフォルトの名無しさん
19/06/02 19:01:56.94 J26IJNP50.net
AIも居眠りするんか
617:デフォルトの名無しさん
19/06/03 00:44:11.05 ovfSzwnAM.net
seq2seqをrnnではなくcnnでやる論文が出たの、まだ一年前か
あまりにも技術の進歩が早すぎて辛い。学習コストが高すぎてプライベートを侵食してる
618:デフォルトの名無しさん
19/06/03 00:59:05.77 XztrACRT0.net
初歩的な質問ですいませんがAI系の論文てどこで見れるんですか？
619:デフォルトの名無しさん
620:sage
https://arxiv.org/
621:デフォルトの名無しさん
19/06/03 01:39:49.35 XztrACRT0.net
>>600
英語なんすね・・・(^_^;)
ありがとうございます
622:デフォルトの名無しさん
19/06/03 07:44:41.95 uDEDVvyl0.net
グーグル翻訳かけろよ
623:デフォルトの名無しさん
19/06/03 08:08:44.21 3/CobnB+0.net
てかクソみたいな日本語解説よりも良い論文てのは読みやすいもんだから。
624:デフォルトの名無しさん
19/06/03 08:52:30.51 laJYrrTta.net
英語なんすねと言ってる時点で論文読むのは無理
625:デフォルトの名無しさん
19/06/03 09:05:36.33 lmgaybdAM.net
日本語の論文?で完結する分野あるのかね。歴史、宗教、文学くらいかや
626:デフォルトの名無しさん
19/06/03 09:51:04.68 NMMhu3n80.net
>>605
だとしても前者ふたつは古文書という難関が待っているｗ
627:デフォルトの名無しさん
19/06/03 10:21:07.26 KMfIyW070.net
美人シリーズ第４弾
URLﾘﾝｸ(youtu.be)
628:デフォルトの名無しさん
19/06/03 12:03:19.08 e0wnqHBFa.net
今中国がアメリカ追い越したからアメリカ人は中国語に四苦八苦してるって聞いたが
629:デフォルトの名無しさん
19/06/03 12:12:24.36 ZJy6OnVgF.net
日本語で書いてあっても読めんとか言うよこういうモンスターは
630:デフォルトの名無しさん
19/06/03 12:55:46.32 4oSq2JT3a.net
数学と英語苦手な時点でこの分野はやめた方がいい
これまでのIT土方と違ってそれなりに頭は必要な分野
631:デフォルトの名無しさん
19/06/03 15:18:59.46 KMzFsLrVM.net
そう
英語と数学は勉強したほうがいいね
じゃないと仕事にならんでしょ
632:デフォルトの名無しさん
19/06/03 15:24:19.33 IZ54YEPMp.net
プログラマー、ソフトウエアを目指す限り、英文からは逃れられないよ。
そこがクリアできてもIT土方が沢山いるのに。
そもそも何かわからなかった時に、どうやって解決法を見つけてるんだよ。 日本語で間に合ってる？ よほど時代遅れの知識だな。
633:デフォルトの名無しさん
19/06/03 16:28:44.31 dNq8yLNDM.net
そこそこなアプリ作るのと機械学習ってどっちが難しい？
634:デフォルトの名無しさん
19/06/03 18:06:46.78 S2kjcDL10.net
【速報】クオカード五百円分とすかいらーく優待券をすぐ貰える
URLﾘﾝｸ(pbs.twimg.com)
① スマホでたいむばんくを入手
② 会員登録を済ませる
③ マイページへ移動する。
④ 招待コード→招待コードを入力する [Rirz Tu]（スペース抜き）
今なら更に4日18時までの登録でクオカードとすかいらーく優待券を両方ゲットできます
数分で出来ますのでお試し下さい
635:デフォルトの名無しさん
19/06/03 18:44:54.25 IFRF1HL70.net
>>613
機械学習だけやるならそんなに難しくないでしょ
フレームワーク使えば理論知らなくても結果だけはだせるし
基本的にバッチ処理だし
この地味な作業を楽しいと思えるかが重要
636:デフォルトの名無しさん
19/06/03 19:02:00.26 KMzFsLrVM.net
今のところPythonのライブラリに
データ突っ込むだけで仕事になってしまうからなあ。
今後はそれだけじゃあダメだと思うけどね。
若い人は今のうちに英語と数学を
勉強しておくべきと思いますね。
637:デフォルトの名無しさん
19/06/03 19:11:49.90 K3p1xLZi0.net
>>614
CM見てインスト済み
638:デフォルトの名無しさん
19/06/03 19:36:10.22 TWqm3GopM.net
そんな仕事あるんか
解釈性もくそもないな
639:デフォルトの名無しさん
19/06/03 19:50:11.89 3/CobnB+0.net
英語は必要だとは思うがそもそも日本語で十分�
640:ﾈところもできてない奴は多い。 そういう意味では英語わからんでも十分。
641:デフォルトの名無しさん
19/06/03 20:03:16.10 uDEDVvyl0.net
chainer(笑)のやつか
松尾豊(笑)のやつなら日本語だろ
642:デフォルトの名無しさん
19/06/03 20:29:56.17 VGERDnng0.net
>>619
意味不明、日本語を勉強したらｗ
643:
19/06/03 20:36:09.49 4mhHvrQR0.net
>>608
アメリカ人に中国語は無理でしょうね…
まず漢字を1万ほど覚えなくちゃならないですから
644:デフォルトの名無しさん
19/06/03 20:53:44.42 VGERDnng0.net
帰化シナ畜の発言は重い
645:デフォルトの名無しさん
19/06/03 20:57:59.06 uC3eXgjBM.net
なんで日本人が作るAIってレベル低いの？
646:デフォルトの名無しさん
19/06/03 21:06:24.06 9zscLiuLM.net
AIは日本人の仕事を奪うからな。
647:デフォルトの名無しさん
19/06/03 21:12:54.57 tuBqQaKmM.net
ジェネラリストに作らせるからじゃない?
648:デフォルトの名無しさん
19/06/03 22:12:54.02 3/CobnB+0.net
アメリカだろうと中国だろうとまともに応用されてる機械学習技術なんてそう多くはない。
単純に当たりづらいものに規模で負けてりゃそりゃそうなるわ。
649:デフォルトの名無しさん
19/06/03 22:21:54.97 XztrACRT0.net
最新の論文を読んでないと仕事にならないとか思い込んでるからなんだよな
人のアイデアをパクってても新しいものは生まれない
650:デフォルトの名無しさん
19/06/04 00:45:55.87 8xHD1vRka.net
大半のエンジニアはパクる能力から発展して新しく生み出す能力を身につけるんだけどな
無から生み出せるのなんて一握りの天才だけなのでそんなのを前提に物事考えてはならない
651:デフォルトの名無しさん
19/06/04 02:01:41.10 KLSsoQXNM.net
無から生み出せるなんて
神のみだよ
人は脳の物理的限界を
超えられないんだ
サルと同じようなものさ
652:デフォルトの名無しさん
19/06/07 22:31:32.71 NFFQc2wE0.net
>>616
>今のところPythonのライブラリに
>データ突っ込むだけで仕事になってしまうからなあ。
将来的には、似たようなことが主流になるだろう。
通常言われる専門の技術者が作ったものは信用されなくなると思う。
信用度の高いものが、パッケージのような形で供給され
それを使うのが一般化してくると思う。
今までの数理技術系と同じ流れになると思うよ。
653:デフォルトの名無しさん
19/06/07 22:51:34.40 SEIOZ3Zi0.net
機械学習の難所は、その突っ込むデータの選定としかるべき前処理かと
654:デフォルトの名無しさん
19/06/08 00:17:58.14 K02PGDcbH.net
その前処理もAIがやるようになるだろうなあ
スペシャリストの中のスペシャリスト以外は働けない世の中になりそう
655:デフォルトの名無しさん
19/06/08 00:39:31.90 VVVFFkBt0.net
>>632
それはその通りなんだが
AI関係の人はほとんどが、旧来からの分析者に比べると
その辺りを嫌う傾向、および軽視するがあるように見受ける。
656:デフォルトの名無しさん
19/06/08 05:49:01.12 2hi7btAr0.net
データは社内のデータベースにある
そこから引っ張るとしてとりあえずSQL文は書けないといけないが
AI系の人でまともにデータベースやSQL知ってる人を知らん
画像処理や自然言語処理も知らん
コモディティ化した今のディープラーニングなら
理論知らなくても解析できるし
その辺理解してるデータエンジニアだけが生き残りそう
657:デフォルトの名無しさん
19/06/08 08:18:18.40 JxaHk6L10.net
>>631
知ったかしてるところ悪いが「数理技術」はそこまで安定したことは一度もない。
658:デフォルトの名無しさん
19/06/08 08:23:50.60 5drHbnb00.net
機械学習やってる研究者って天才の実装パックてるだけやん。。。
まあ数学者じゃないから仕方ないけどもう少し数学的なとこを考えてほしい
659:デフォルトの名無しさん
19/06/08 08:28:17.16 JxaHk6L10.net
CNTK とか数学的アプローチはある。ただ恐ろしく実用的ではない。
660:デフォルトの名無しさん
19/06/08 09:45:57.34 VVVFFkBt0.net
>>636
おそらく言っている意味と、あなたが捉えている意味が異なるんだとおもう。
たとえば、医薬など、学会や国際的な組織に亭主るする際に、この手法は
私があらたにプログラムしましたでは、信用してもらえない。
その論文などのために、みんながデバックしろという話になってしまう。
661:デフォルトの名無しさん
19/06/08 10:29:12.95 o8w0Fi6UF.net
そやな、閉じた世界なら何でもいいけが信頼性考えるとご免こうむる。
金融の資金運用でも自己資金ならどうでもいいが、預託資金の運用だと
説明責任もあるから、分析などのコアには信頼度の高いもの使う。
662:デフォルトの名無しさん
19/06/08 10:42:37.12 3e6+W68wH.net
AIやってて画像処理も自然言語処理も知らないって何やってた人なのだろうか
663:デフォルトの名無しさん
19/06/08 10:43:11.34 o8w0Fi6UF.net
考えたら機械学習でPython利用が多いというのも、流用できるからが多いわけだから、このの世界も次第にそうなって行くだろ。業務と手法のインターフェースに成れる人、あるいは、商用パッケージ作る人以外は職が難しくなるかもまだ先だろうけど。
664:デフォルトの名無しさん
19/06/08 11:01:05.35 o8w0Fi6UF.net
>>641
AIで画像処理中心は今に始まった話だからね
665:デフォルトの名無しさん
19/06/08 11:03:57.06 pkTweyaS0.net
>>639
馬鹿乙
666:デフォルトの名無しさん
19/06/08 11:10:54.44 ryWt2GlsF.net
日本が遅れてる理由を垣間観た気がする
667:デフォルトの名無しさん
19/06/08 12:03:39.89 uBDMoQSsa.net
ベイジアン最適化は学習を自動化させる目的で使われてるよ
次ページ最新レス表示スレッドの検索類似スレ一覧話題のニュースおまかせリスト▼オプションを表示暇つぶし2ch
110日前に更新/249 KB
担当:undef