【オセロ,将棋】ボードゲーム Part2【囲碁,War】

【オセロ,将棋】ボー� ..

740:535
19/02/26 23:53:19.73 veq8AgWN.net
負けたけど、7連までの手数が絡んだ微妙な駆け引きが素晴らしい名局だった。
勝つチャンスはあったと思うけどな～惜しいな～
(;SZ[19]
;B[jj];W[kj];B[jk];W[ki];B[kk];W[kh];B[il];W[lk]
;B[ll];W[ml];B[in];W[ji];B[im];W[ih];B[nm];W[hi]
;B[jo];W[gi];B[li];W[fh];B[ij];W[ii];B[io];W[ei]
;B[ip];W[fi])

741:535
19/02/27 21:30:22.80 Y++kUwc3.net
モンテカルロ木探索とDNNと組み合わせてみようかなぁ
そのほうがランダム性も出せるし
でも遅くなったらやだな。うーん

742:535
19/02/27 22:03:24.47 Y++kUwc3.net
なんか取れないシチョウを追いかけたｗ
シチョウルーチンにバグがあるのか、DNNの評価値でシチョウを追いかけてしまったのかイマイチ判断がつかないな。

743:535
19/02/27 22:47:59.69 Y++kUwc3.net
ん、なんかLV2にコロコロ負けるようになった。
自分のAI vs lv 3 の棋譜を取り入れたせいで序盤DBが狂っちゃったかな。

744:535
19/02/28 22:39:23.34 VN3HTH0V.net
なんか新しいアイディアが欲しいな。
>>712のサイクルはちょっと手詰まり感。

745:535
19/03/04 20:07:01.61 +UlAfF8J.net
ここ数日さぼりっぱなし。
棋譜取りも逆に弱くなりそうでさぼってます。

746:535
19/03/04 22:26:37.19 +UlAfF8J.net
やっぱ序盤の大局観で優位に立ちたいんだよなぁ。
中盤、終盤はある程度読みでカバーできるけど序盤はマジ謎が多いからな。

747:310
19/03/04 23:03:17.87 2gMEJXd0.net
バグでドツボ中。
再現性がなさすぎて、よーわからん。
頻度の低さと、再現性の無さから、置換表の二重更新だと思うんだけど…
それっぽい箇所も見当たらない。

748:535
19/03/09 21:06:39.62 jNDDSRBd.net
完全にさぼり状態。
アイディアも枯渇したし。
どこかにネタ落ちてないかな。

749:535
19/03/10 00:25:59.41 BU7hKn7v.net
禁断の人間（俺）vs lv3の棋譜取りをやろうかと思ってます。
これは手間が半端ないｗ

750:535
19/03/10 00:40:34.55 BU7hKn7v.net
早くもギブアップｗｗｗｗｗ
なかなかいい棋譜が取れない
基本的に無理筋orz.

751:535
19/03/10 20:17:25.17 BU7hKn7v.net
自分のAI vs lv3 で　手筋炸裂！！
うって返しでました！
(;SZ[19]
;B[jj];W[ki];B[ii];W[kj];B[kk];W[ih];B[hh];W[gg]
;B[ll];W[mm];B[mk];W[jk];B[jl];W[ik];B[il];W[hk]
;B[hl];W[gl];B[gk];W[ji];B[hj];W[ij];B[jj];W[hi]
;B[jk];W[gi];B[ik];W[nk];B[lk];W[ok];B[hk])

752:535
19/03/11 19:47:21.03 X4t/4BPO.net
棋譜取り再開しました。
弱くなる可能性は潰せてないのですが、何もしないよりはましだと思って。

753:535
19/03/11 21:55:27.12 X4t/4BPO.net
10並列　対戦結果
30局目黒(airandom.dll)の勝利回数: 16 白(ai-lv3.dll)の勝利回数: 14
21局目黒(airandom.dll)の勝利回数: 10 白(ai-lv3.dll)の勝利回数: 11
29局目黒(airandom.dll)の勝利回数: 12 白(ai-lv3.dll)の勝利回数: 17
22局目黒(airandom.dll)の勝利回数: 6 白(ai-lv3.dll)の勝利回数: 16
24局目黒(airandom.dll)の勝利回数: 14 白(ai-lv3.dll)の勝利回数: 10
27局目黒(airandom.dll)の勝利回数: 14 白(ai-lv3.dll)の勝利回数: 13
27局目黒(airandom.dll)の勝利回数: 14 白(ai-lv3.dll)の勝利回数: 13
30局目黒(airandom.dll)の勝利回数: 15 白(ai-lv3.dll)の勝利回数: 15
23局目黒(airandom.dll)の勝利回数: 10 白(ai-lv3.dll)の勝利回数: 13
28局目黒(airandom.dll)の勝利回数: 13 白(ai-lv3.dll)の勝利回数: 15
トータル 124勝137敗勝率 47.5%
悪くない

754:535
19/03/12 20:57:52.00 ACQKgt0P.net
LV3に勝利。
途中負けかけたけど相手がミスした。
終盤の数手が素晴らしい一局だった。
(;SZ[19]
;B[jj];W[ki];B[ji];W[jh];B[ih];W[ig];B[kh];W[jg]
;B[kj];W[hf];B[li];W[kg];B[lg];W[gf];B[lk];W[mj]
;B[hi];W[fg];B[eg];W[mi];B[lf];W[lj];B[fi];W[gi]
;B[gj];W[gh];B[ej];W[fk];B[fj];W[ij];B[ik];W[ge]
;B[ii];W[hj];B[hk];W[fd];B[ki];W[me];B[ij];W[ne]
;B[hj])

755:535
19/03/12 21:01:50.73 ACQKgt0P.net
それにしてもディープラーニングの学習がメモリ20GB食ってるんだがｗ
奮発してメモリ32GBにしといてよかった。
やっぱハードウェア性能は正義だな。
Zen2のスリッパ出たらうっかり買いそうで自分が怖いｗ

756:535
19/03/13 20:46:36.19 7rSi15yT.net
12並列対戦
29局目黒(airandom.dll)の勝利回数: 12 白(ai-lv3.dll)の勝利回数: 17
30局目黒(airandom.dll)の勝利回数: 17 白(ai-lv3.dll)の勝利回数: 13
28局目黒(airandom.dll)の勝利回数: 11 白(ai-lv3.dll)の勝利回数: 17
28局目黒(airandom.dll)の勝利回数: 10 白(ai-lv3.dll)の勝利回数: 18
36局目黒(airandom.dll)の勝利回数: 13 白(ai-lv3.dll)の勝利回数: 23
25局目黒(airandom.dll)の勝利回数: 11 白(ai-lv3.dll)の勝利回数: 14
31局目黒(airandom.dll)の勝利回数: 14 白(ai-lv3.dll)の勝利回数: 17
28局目黒(airandom.dll)の勝利回数: 13 白(ai-lv3.dll)の勝利回数: 15
32局目黒(airandom.dll)の勝利回数: 13 白(ai-lv3.dll)の勝利回数: 19
33局目黒(airandom.dll)の勝利回数: 17 白(ai-lv3.dll)の勝利回数: 16
31局目黒(airandom.dll)の勝利回数: 17 白(ai-lv3.dll)の勝利回数: 14
25局目黒(airandom.dll)の勝利回数: 8 白(ai-lv3.dll)の勝利回数: 17
156勝200敗　勝率　43.8%
弱くなったのか誤差の範囲なのか、うーん。

757:535
19/03/14 23:27:52.29 V04VYcAB.net
>>742の棋譜を序盤DBに取り込んで、その序盤DBをもとにDNNの学習をやり足しました。
DNNは序盤DB拡張と学習のサイクルを繰り返し行っているので秘伝のタレみたいになってますｗ
これで今夜からもう一度対LV3対戦やってみます。

758:535
19/03/14 23:40:56.98 V04VYcAB.net
7局目黒(airandom.dll)の勝利回数: 3 白(ai-lv3.dll)の勝利回数: 4
7局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 3
7局目黒(airandom.dll)の勝利回数: 3 白(ai-lv3.dll)の勝利回数: 4
5局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 1
7局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 3
5局目黒(airandom.dll)の勝利回数: 3 白(ai-lv3.dll)の勝利回数: 2
4局目黒(airandom.dll)の勝利回数: 1 白(ai-lv3.dll)の勝利回数: 3
5局目黒(airandom.dll)の勝利回数: 3 白(ai-lv3.dll)の勝利回数: 2
9局目黒(airandom.dll)の勝利回数: 7 白(ai-lv3.dll)の勝利回数: 2
6局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 2
6局目黒(airandom.dll)の勝利回数: 2 白(ai-lv3.dll)の勝利回数: 4
7局目黒(airandom.dll)の勝利回数: 4 白(ai-lv3.dll)の勝利回数: 3
42勝33敗　勝率56%
出だしは好調！
明日一日回してどうなるか… 👀
Rock54: Caution(BBR-MD5:1341adc37120578f18dba9451e6c8c3b)

759:535
19/03/14 23:44:29.21 V04VYcAB.net
ありゃなんかRock54ついとる。
文章の繰り返しが駄目なんか？

760:535
19/03/15 20:06:11.54 PqqnV2Up.net
残念ながら駄目でしたorz
155勝 209敗　勝率 42.6%
やっぱ対局回数増やすとこの辺に落ち着くのか、うーん

761:535
19/03/16 18:31:00.14 7iioDFjE.net
>>746から対戦を止めずに継続していましたが
211勝289敗勝率42.2%
となりました。
やっぱこの辺が真の値なのかな。

762:535
19/03/17 00:52:38.93 5SZpbjE6.net
更に学習を続けます

763:535
19/03/17 21:35:48.21 5SZpbjE6.net
まじでZen2スリッパでたら買ってしまいたい衝動に駆られる

764:535
19/03/18 00:19:09.18 eJisfZab.net
8勝2敗だと95%の確率で強いといえるらしいが、12並列もしてると１つは8勝2敗ぐらいになったりするw。
まあ確率的にはそうなのかも。
結局1000局くらいやらないと駄目ってことかな?

765:535
19/03/18 21:25:08.42 eJisfZab.net
やっぱ弱くなってるかもT△T
143勝 220敗　勝率　39.4%
このままこの学習サイクルを進めていいか迷うorz

766:535
19/03/18 21:37:35.02 eJisfZab.net
禁断のモンテカルロ木探索の封印を解くか？
しかしあれは計算時間が半端ないからな。
出来れば避けたい。

767:535
19/03/18 21:52:51.93 eJisfZab.net
プロのタイトル戦が7番勝負とかだけど7番ぽっちじゃ真の強者はわからんってことやなｗ

768:535
19/03/18 23:53:39.58 eJisfZab.net
モンテカルロ実装したけど、なんか素朴な手を選ぶようになってしまった。
うーん、コレジャナイ感がorz

769:535
19/03/19 21:06:00.35 87DWY+/2.net
なんかおかしい。
LV3が強すぎる気がするｗ
もしかしてLV3には学習機能がついていて計算回せば回すほど強くなるとか？ｗ
んなわけないか。

770:535
19/03/21 03:04:06.19 gYmqCPQ5.net
祝日だって油断してたらこんな時間ｗ
弱くなってもいいから計算量削る方向で調整しています。

771:535
19/03/21 17:29:13.47 gYmqCPQ5.net
対戦統計とってます。
66勝 70敗　勝率48.5%
今のところむしろ勝率上がってます！
速度も若干だけど速くなったはず…
勝率50%が欲しい！

772:535
19/03/22 19:55:26.77 9WNMIpie.net
161勝188敗　勝率 46.1%
悪くない。

773:535
19/03/22 20:13:46.91 9WNMIpie.net
次のアイディアが欲しいところだ

774:310
19/03/23 00:07:59.98 QKAaRf+n.net
久々です。
新型版はテストのためにいちいち学習を止めるのが面倒で、放置しています。
一晩耐久テストやらないとわからないので。
で、未だずーっと棋譜作成＆学習を続けています。
もともと８００件強の記譜をベースに間違い訂正をしたり、確定しているところ以降
の全分岐を作成したりして学習データにしていたのですが、昔作った記譜なので
序盤で結構間違いが多く、効率よく学習できないのではないかと考えました。
で、最近は序盤の定石６～２０手からスタートして記譜を作成したりしていました。
そこそこ序盤の間違いが訂正されてきたのですが、まだところどころおかしい
ところがあって、Zebraで並べてみながら、多分間違えたであろう箇所を特定して
それ以後の記譜を作らせる事で、強制的に正しい手順に戻すなんていう、禁断の
ドーピング技を始めてしまいました。
現在は１２００記譜くらいまで増えていますが、まだまだ間違いも散見されますし、
パブリックドローの変化っぽいのに、記譜が無いものもあり、まだまだ記譜が足り
ていない感じです。
あと、ドーピング作業やりながらZebraの評価値見ていると、２０～３０手目あたりは
進行の種類によってはZebraの評価値もあまりあてにならないなぁと言う事に気付い
てしまいました。ここら辺の精度を上げると、もっと強くできるのではないかと思います。
自動対戦してくれる序盤DB付きのオセロプログラムがあると、ドーピング作業が更に
楽になるんだけど（汗
現在残り２０手目以後の学習に使う盤面は７０万件くらいになっています。それでも
残り２０手以後の初見の盤面の評価値では結構な誤差があります。本当にBuroさん
の線形評価関数で良いのかというのも相変わらず悩ましいところです。

775:535
19/03/23 09:44:42.00 C9QFpANM.net
197勝 233敗勝率 45.8%
悪くない。
一旦対局中断します。

776:535
19/03/23 17:57:32.40 C9QFpANM.net
やっぱ1手1秒くらいで打ちたいなぁ。
そうすれば対戦統計も棋譜も全然もっと取れるのに

777:535
19/03/23 21:04:03.52 C9QFpANM.net
LV2と対戦してみました。
50局目　黒(airandom.dll)の勝利回数: 48　白(ai-lv2.dll)の勝利回数: 2
勝率 96%

778:535
19/03/24 10:11:30.45 IEpX66ro.net
LV1ともやってみました。
50局目　黒(airandom.dll)の勝利回数: 45　白(ai-lv1.dll)の勝利回数: 5
勝率 90%

779:535
19/03/24 21:21:09.27 IEpX66ro.net
ふーむ、損失が減らない地点まで学習が進んでしまったようです。
一回止めるか。

780:535
19/03/24 21:27:42.78 IEpX66ro.net
うーん、やっぱ現状を打破する画期的なアイディアが必要かな。
ちなみにいまは強さよりも速度が欲しいかも。

781:535
19/03/25 05:48:57.06 9reqTGkG.net
対戦してます。
黒番　対 LV3　107勝 102敗勝率 51.2%
200戦以上して勝率50%超えはすごい！
今日一日回してみます。

782:535
19/03/25 21:18:02.28 9reqTGkG.net
結局負け越しでした
165勝 174敗勝率48.7%
でも決して悪い結果ではない！

783:535
19/03/26 21:11:49.41 AISc91ZO.net
まだ回してました
239勝 237敗勝率 50.2%
キター！
まあ、今だと50%行くかどうかはホント運しだいなんだろな。

784:535
19/03/26 21:12:45.47 AISc91ZO.net
そろそろ対局止めて次の学習のターンに入ります。

785:535
19/03/26 21:59:22.07 AISc91ZO.net
うお、棋譜が多すぎてls */*.sgfがコアダンプするようになったｗ
分割しないと駄目か～

786:535
19/03/27 21:35:10.22 4D2b4lCy.net
そろそろ人間（俺）相手に勝利が欲しいところだがまだむずかしいかな。
素人相手なら勝てるんだろうか？

787:535
19/03/28 19:32:56.94 ZCt2CXW9.net
165勝 176敗勝率 48.4%

788:310
19/03/30 20:46:31.09 IsrC9h82.net
既知のパブリックドローのリストが見つかったというか、
今年になってブログでまとめて発表してくれている人がいた。
ちょうど良いタイミングすぎる（汗
２種類あるのと、自分がZebraから拾った奴を合体して、３２手目まででカット。
ソートして重複削除したら４５０件程度に。多分既存の記譜と多少重複してると思う。
全部やるとかなり記譜が偏る気がするけど、やっちゃうかな。

789:535
19/03/30 23:47:00.24 o6pzrkpp.net
序盤DBを劇的に改善する方法ないかな？
不利なオープニングを避けるだけで勝率めちゃくちゃ上がりそうな予感がするんだが。

790:310
19/03/31 01:39:32.24 5poc64Oc.net
棋譜から序盤DB作れない？

791:535
19/03/31 09:41:09.06 eFSA5935.net
作ってるですがそれでも不利な局面になったりしますorz

792:310
19/03/31 20:14:25.76 5poc64Oc.net
棋譜から序盤DB作る時に、その盤面からの勝率入れて、勝率が高い手を指す
ようにするとか。まあ、ぶっちゃけ記譜単位でmctsやってるような事になるの。

793:535
19/03/31 20:34:17.11 eFSA5935.net
いや、それに近いイメージのものはすでに実装してあるんですが、たまに変な手を打つのです。

794:310
19/04/01 20:17:52.98 JaNWOXQ3.net
普通DB化すると同じ手順だと毎回同じに間違えるはず。
だとするなら、DBの棋譜をテキストに吐き出すなどして、チェックしたら？
間違いっぽい分岐見つけたら、正解着手させてその後を対戦させて記譜を
強制的に正しい分岐を学習させるの。そのあとでも間違えて、なかなか治らない
事もあるけど。
これが >>760で書いたドーピング。

795:310
19/04/01 20:22:42.07 JaNWOXQ3.net
>>774のリスト。パブリックドローはFJT分だけだった。
２種類あって、もう一つは代表的な序盤定石から適度に着手した後で、
残り３０手を読み切ったリストで、ドローとは限らなかった。
遡りチェックの時にあり得ない奴があったので、気が付いた。
試しにZebraで並べて評価値見てみたら、中盤で結構変な手順になっていたりする。
まあ記譜の足しにはなるかなぁという感じ。

796:535
19/04/01 22:13:58.23 58wx0Qom.net
手動でDB書き換えるのは工数的に地獄の苦しみなのですｗ
まあ、負けた棋譜だけ水増ししてDBに登録するのはあるかも？

797:535
19/04/01 23:15:44.55 58wx0Qom.net
自動対局プログラムに手を入れて棋譜のファイル名に黒が勝ったか白が勝ったか入れるようにしました。

798:535
19/04/02 20:42:13.63 IVxd4rzM.net
やっぱ手動で棋譜を訂正するのはムリゲーだなぁ。
棋譜訂正も自動化すべきかな。
うーん

799:310
19/04/02 20:42:16.77 BP3gZfVl.net
そうか。オセロだとある程度定石はあるし、ZebraやEdaxで並べれば
終局スコアの予想はできて、間違いが見つけやすいけど、囲連星では
そうはいかないですね。
途中で変な手を打つのは、恐らく記譜が足りていないからではないかと
思います。オセロでもドーピングやらないで純粋に自己対局学習だけで
やった場合、１万～１０万対局くらいは必要かなと思っています。

800:535
19/04/02 22:11:14.64 IVxd4rzM.net
勝った棋譜水増しするのと負けた棋譜水増しするのどっちがいいんだろ？
おんなじ割合で水増ししたら意味ないかもｗ
とりあえず負けたほう増やすか

801:535
19/04/03 22:07:38.48 +wdY9CJ5.net
とりえあず、負けた棋譜を100倍にして序盤DBに注入してます。
定型パターンにはまりやすいLV2にはかなり効果あるのですが
変幻自在なLV3には今一つみたいです。

802:535
19/04/04 20:30:39.10 QG8xddyq.net
負けた棋譜だけ増やすとバランス崩れるかも？と思い始めました。
うーん。

803:535
19/04/04 22:06:44.84 QG8xddyq.net
やはり大量、多種類の棋譜が欲しい。
棋力が下がっても計算量を抑えて、速度を稼ぐ方向で行くべきか？

804:535
19/04/04 22:52:58.55 QG8xddyq.net
2手読みだったところを1手読みにしたら大分早くなったけど、やっぱ棋力は落ちるな。
これはちょっと採用するか迷う。

805:535
19/04/05 22:13:28.38 6lxF2ret.net
ん、なんか白番が絶望的に負けてる。
なんか評価値の計算まちがえたか？

806:535
19/04/05 22:26:12.15 6lxF2ret.net
それとも棋譜水増しで入れた序盤DBが狂ったのかな？

807:535
19/04/06 00:52:52.21 Uoezh941.net
白番で、相手が初手端のほうに打ってきたときに、盤が狭くなって序盤DBどおりに打つのが悪くなるみたい？
とりあえず、白番持った時に相手が初手天元付近に打たなかったときは、中央寄りの斜めに打つように変えた。
これで少しでも緩和されるといいな。

808:535
19/04/06 01:11:14.50 Uoezh941.net
水増しした分の棋譜はいったん削りました。
確率の理論を根底から壊してしまうみたいなので。
やっぱ遅いようでもじっくり行くのが確実っぽい。

809:535
19/04/10 20:58:12.46 x47ianNw.net
今、極端な水増しはやめてほどほどの水増しにしてます。
新しい棋譜が古い棋譜の１～2%程度になるくらいに水増ししてます。

810:310
19/04/10 23:44:48.34 R42Zvvs5.net
どんより…
バグを見つけてしまった。
今ある記譜５０万件の数％くらいに間違いがありそう。
直管的には、全データに対して読み切り処理を噛まさないと間違いの有無すら確認できない。
多分、逆順探索処理を簡素化した時にバグが入り込んだのだと思う。
暇なのでログ書き出しの処理を作ってたら見つかった。
うぐぐ。
もうしばらく様子を確認して、他にもバグが無いか見た上で…どうしよう。
一旦記譜をリセットして作り直すべか。

811:310
19/04/10 23:48:12.99 R42Zvvs5.net
と、書いた直後に気が付いた。
ログの側のバグだった事に…
お騒がせ様でした。

812:535
19/04/15 23:21:56.01 +vRjXb2F.net
いままで8対称中4

813:対称で学習してましたが、のこりの4対称も学習させてみることにしました。 8対称すべてはメモリに収まらないので半分づつ学習させます。

814:535
19/04/16 20:45:49.68 +pjTjN+Q.net
178勝192敗勝率 48.1%
8対称、勝率あんまり上がらないですね。
うーん、うち筋は悪くないと思うんだけど。
なにかブレークスルーが欲しいですね。

815:535
19/04/16 21:15:27.46 +pjTjN+Q.net
2手読みに戻したら勝率上がるかな？
うーん。

816:535
19/04/16 22:50:30.94 +pjTjN+Q.net
まじでZen2スリッパ欲しい。

817:535
19/04/17 20:33:59.36 5Verubd2.net
154勝178敗　勝率46.4%
2手読みに戻したらかえって勝率さがりましたね。
誤差の範囲かもわかんないですが。

818:535
19/04/18 22:39:13.48 Bi+APi3V.net
お、素晴らしい勝ち方した。
必勝形のダブルリーチ
これほど少ない石数でこの形を作れるとは…
(;SZ[19]
;B[jj];W[kj];B[jk];W[li];B[ji];W[lh];B[kl];W[jm]
;B[ih];W[lk];B[ig];W[jf];B[il];W[ik];B[hk];W[if]
;B[im];W[ij];B[hj];W[lg];B[ii];W[in];B[ik];W[jn]
;B[ij])

819:535
19/04/19 21:34:26.27 NHUtwCQF.net
ふーむ、いままで勝率のいい手かつ沢山選ばれた手を優先的に選択するように序盤DB周りを組んでいたのだけど、
それだと手が固定されてしまうかなと思って勝率のいい手かつあまり選ばれてない手を優先的に選ぶようにしたら
147勝 220敗勝率40.1%
これは誤差とは言えないほどの差ですねぇ。

820:535
19/04/23 20:49:51.89 rLrZWc/a.net
205勝 246敗勝率45.5%
棋譜取り＆序盤DBへの取り込みを継続したら少し勝率戻りました。
50%付近まで頑張ろう。

821:535
19/04/24 19:17:49.68 DcbjCIK3.net
なかなかの快勝だった
こういう風に毎回打てるといいんだけど
(;SZ[19]
;B[jj];W[ij];B[ki];W[ii];B[ik];W[ih];B[jh];W[ji]
;B[kj];W[jg];B[kh];W[if];B[hj];W[ig];B[lk];W[jk]
;B[jl];W[hk];B[kk];W[km];B[hl];W[gk];B[gm];W[fn]
;B[kg];W[kf];B[lf];W[mg];B[lg];W[gi];B[le];W[lh]
;B[mh];W[mi];B[li];W[ie];B[id];W[md];B[lh];W[nd]
;B[lj])

822:535
19/04/25 23:58:43.25 DQ0GFyMT.net
192勝 212敗勝率 47.5%
棋譜取り、序盤DB更新、DNN更新だけでは50%の壁は突破できないかもな。

823:535
19/04/26 20:16:53.04 F5QY8KS+.net
130勝 195敗勝率40.0%
ん、勝率かなり落ちた。
何が起きた？

824:535
19/04/27 23:11:18.27 zszgzhMg.net
ん、序盤DB壊れたか？

825:535
19/04/27 23:25:35.40 zszgzhMg.net
序盤DB外したほうが勝率あがるかも？

826:310
19/04/30 03:48:07.73 RyvRJxq2.net
どもです。
ひたすら記譜作成中に、やっぱり暇なので、記譜管理周りをリニューアルしていたら、
結局記譜ファイルの形式を大きくいじってしまい、かなり全面的なリニューアルに。
そしたら、あちこちバグが出て、結局記譜作成より新作デバッグ優先に（汗
 >>809-810
序盤DBは、記譜溜めていくと途中で弱くなるけど、いずれ直ってくるものだと思う。
正しい手順があるとして、１回間違えると、間違えた側が負ける記譜ができる。
負ける事で、その手は選ばれない事が記譜に登録される。
しかし、探索の精度が低い状態で記譜作ると、２回間違える記譜ができて、本来
負けのルートで勝ってしまう。これが記譜に登録されると、この２回目の間違いが
訂正されるまでは勝率が下がる。
どのくらいで直るのかは、直接なのか評価関数経由の間接なのかなど、フィード
バックのかかり方で変わってくる。直接的なら割とすぐに直るはず。
自分のは間接なのでかなり時間がかかりそうで面倒なので、Zebraで２つ目の間違い
箇所を特定して、そこまで着手した後探索をする棋譜を作って、かなり強制的に直し
ちゃった。
序盤は大体良いのだけど、確定値で学習している箇所と、序盤DBで学習している
箇所の境目で、確定値が足りないまま過学習になっている評価値ステージがあって
そこらあたりで大抵間違える

827:（汗

828:535
19/05/02 21:41:13.81 uWEPsgK5.net
天頂の囲碁を使って9路を徹底的に調べたら面白いかも
ま、やらないけどね

829:535
19/05/04 19:08:14.82 wk+bg2Ip.net
GWは何もしませんでした(過去形)

830:310
19/05/04 22:14:44.08 fzBCFIZ6.net
新作の探索周りを、例のバグ付のやつにしたら、案の定バグ発生。
色々と入れ替えながらバグ発生箇所を特定に成功しました。
が、なぜそこでバグっているのかわかりませんorz
まともに動いたから良しとするしかない感じ。
あと２か所改良したいところがあります。
あと２日では無理だなぁ。

831:310
19/05/04 22:17:34.69 fzBCFIZ6.net
と思ったら、またいきなりバグ発生。
原因は複数ありそうですorz

832:310
19/05/05 20:55:26.72 GksqIPP4.net
原因判明。アホなミスでした。
やっぱり当初の置換表に変なデータが登録されているのが正解だった。
残した課題のうち１つもできた。

833:310
19/05/05 23:26:28.04 GksqIPP4.net
最後の課題は、学習の速度アップを目論みましたが、まったくダメでしたorz
さて、何をしよう。

834:535
19/05/06 19:55:01.10 uIBlT68N.net
長連対策そろそろしなければ…

835:535
19/05/06 20:33:01.71 uIBlT68N.net
序盤DBがおかしくなってたので、序盤DBの手の採用基準をもとに戻しました。
あと中盤終盤でDNNの値の比重を大きくしました。

836:535
19/05/07 22:40:16.02 hqvfZJCN.net
59勝 62敗勝率48.8%
なんとか勝率50%弱まで戻せました。

837:535
19/05/08 21:43:00.75 c2FYdM3E.net
来たっ
262勝 248敗勝率51.4%
誤差の範囲かもしれないけど嬉しいっ

838:535
19/05/08 21:52:12.23 c2FYdM3E.net
そろそろ白番も着手していくか、もうちょっと黒番を突き詰めるか。
悩ましいい。

839:535
19/05/09 20:06:42.08 w95MoSGU.net
ありゃ、わずかな棋譜を序盤DBに加えただけなのに勝率めっちゃさがった
149勝 202敗勝率 42.5%
そんなに微妙なものではないと思ってたが？？

840:535
19/05/09 20:28:40.86 w95MoSGU.net
棋譜さらっと見てみたけど序盤DBが壊れたって感じでもないなぁ
実は微妙なものだったのか、誤差の範囲なのか？

841:535
19/05/09 22:32:58.01 w95MoSGU.net
なんか誤差の可能性が微レ存

842:535
19/05/10 21:38:12.73 5KPSEUAN.net
163勝 202敗勝率44.7%
±5%くらいは誤差ででるのかもしれないなぁ

843:535
19/05/10 21:42:26.07 5KPSEUAN.net
こんな時統計の知識があれば真の勝率は○○%～××%の間とか論じられるんだろうなぁ

844:535
19/05/11 11:49:39.90 fuy9y7gB.net
うお、すげぇ
179勝 149敗勝率54.6%
この数字をどう解釈すればいいのか…

845:535
19/05/11 17:43:16.57 fuy9y7gB.net
まだ勝ってる。
222勝 194敗勝率53.4%
そろそろ棋譜反映させるか。

846:535
19/05/11 22:40:54.90 fuy9y7gB.net
長連対策、完全じゃないけど簡単な判定入れてみた。
さてどうかな？

847:535
19/05/12 10:03:08.61 7HaK6dtp.net
かなりいい
対LV2 白番はもうちょっと勝ちたいかな
対LV1
黒番　61勝 9敗勝率87.1%
白番 49勝 4敗勝率92.5%
対LV2
黒番　57勝 0敗勝率100.0%
白番 10勝 28敗勝率26.3%
対LV3
黒番　25勝 16敗勝率61.0%
白番 13勝 28敗勝率31.7%

848:535
19/05/12 18:17:47.41 7HaK6dtp.net
ふむ。かなりいい。
一回止めるか。
対LV1
黒番 90勝 10敗勝率90.0%
白番 64勝 6 敗勝率91.4%
対LV2
黒番 78勝 0敗勝率100.0%
白番 14勝 33敗勝率29.8%
対LV3
黒番 39勝 23敗勝率62.9%
白番 19勝 40敗勝率32.2%

849:535
19/05/12 18:46:46.62 7HaK6dtp.net
ここらでドカンとブレークスルーが欲しいところだ。

850:535
19/05/13 20:57:06.68 rQSLa/J8.net
お、すごい
249勝 204敗勝率55.0%

851:535
19/05/13 21:55:46.89 rQSLa/J8.net
LV3 vs LV3の黒番の勝率が65%くらいだったはずだから、黒番で勝率70%位いけばLV3越えといえるかも

852:535
19/05/13 23:06:54.58 rQSLa/J8.net
地味な学習も必要だとは思うけどアイディア一発でドカンと強くなるのも諦めきれない。

853:535
19/05/14 21:30:20.81 kAvibZwR.net
ん、なんかDNN学習させたらうち筋はそんなに悪くなってないと思うんだけど勝てなくなったな。
なんだろう？

854:535
19/05/15 21:00:42.40 ce+jhpkV.net
173勝 176敗勝率 49.6%
対戦してみたけど思ったほど負けてないな？

855:535
19/05/15 21:22:39.79 ce+jhpkV.net
初期アルファ碁のようにポリシーネットとバリューネットに分けてみるか？

856:535
19/05/15 21:35:41.77 ce+jhpkV.net
そこそこの精度でも軽い評価関数は結構ほしいかも。
モンテカルロで役に立つし。

857:535
19/05/15 22:07:54.43 ce+jhpkV.net
というわけで、今使ってるDNNより大幅に簡素化したネットワークで学習させてみる。
データは同じ。

858:535
19/05/15 22:45:22.49 ce+jhpkV.net
あれ、大幅に簡素化したのに学習時間が思ったより短くならないな。
10倍速くらい早くなると思ってたのに3倍速くらいだ。

859:535
19/05/15 23:06:58.43 ce+jhpkV.net
更に簡素化して10倍速くらいにしました。
ちょっと簡素化しすぎかも？

860:310
19/05/15 23:27:46.15 2Iqikd3t.net
新バージョンで色々プログラム見直し。
探索部は全く改善していませんが、その他の部分が大幅にスピードアップ。
自動記譜作成時のオーバーヘッド（探索以外の時間）がかなり減った。
あとは学習の時間を減らしたい。

861:535
19/05/16 19:50:22.50 bKmJMMur.net
大きい方のネットワークの損失が3500位なのに対して小さい方のネットワークの損失が5300位。
さて、使い物になるかな？

862:535
19/05/16 20:26:43.20 bKmJMMur.net
うおお，遅え!
モンテカルロに使おうと思ったらプレイアウト回数かなり減らさなきゃだめだな。

863:535
19/05/16 20:40:14.63 bKmJMMur.net
一回打ってみたけど打ち筋は決して悪くない。
だが激遅。
だかが300プレイアウトでここまで遅いとは…

864:535
19/05/16 20:49:50.51 bKmJMMur.net
ん、でも打ち筋がいい。
ブレークスルー来たか？？

865:535
19/05/16 21:05:06.63 bKmJMMur.net
すごいな、こちらの打ち筋は相当改善されたのにLV3がその上を行ってくる。
奥が深い。

866:535
19/05/16 22:04:27.02 bKmJMMur.net
ん、まだ学習飽和してないみたい。
ジリジリ損失減ってる。

867:535
19/05/16 22:42:50.95 bKmJMMur.net
LV1と対戦させ始めてみたけど、かえって勝率落ちてるな？
まだ対戦回数少なすぎて結論出すのは早いけど、もっと50連勝くらいするかと思った。
対LV1
黒番 17勝 3敗勝率85.0%
白番 13勝 3敗勝率81.3%

868:535
19/05/17 21:14:13.13 Af3ltV5Z.net
勝率上がってるみたいです。やった！
対LV1
黒番 156勝 15敗勝率91.2%
白番 109勝 8敗　勝率93.2%

869:535
19/05/17 21:17:20.41 Af3ltV5Z.net
小さいネットワークの損失も5180くらいまで減ってます！
次は本丸、LV3と決戦や！

870:535
19/05/17 22:31:13.53 Af3ltV5Z.net
対LV3 黒番
47勝 34敗勝率58.0%
ふーむ、まあ悪くないけど、正直もっと期待していたｗ
400～500戦くらいはしないとまだ結論は早いけど。

871:535
19/05/18 01:00:18.55 NdCkwblz.net
ほほう、6割行った。
120勝 80敗勝率60.0%

872:535
19/05/18 16:28:24.45 NdCkwblz.net
291勝 231敗勝率55.7%
ふーむ、まあ悪くないけど。
最終的には対LV3黒番勝率 70% を目指したい。

873:535
19/05/18 21:21:56.33 NdCkwblz.net
そういえば、勝率ばかり気にして肝心の棋譜をあまり見てなかったな。
どんな負け方してるのかちゃんと把握せねば。

874:535
19/05/18 22:11:34.39 NdCkwblz.net
ふーむ、必敗を避けるルーチンに若干バグがあるな。

875:535
19/05/19 07:21:38.98 GRYTxzHT.net
GPU使いたいなぁ。
せっかくいいの買ったんだから。

876:535
19/05/19 07:52:25.50 GRYTxzHT.net
ライフゲーム囲碁も平行で開発しようかなぁ。
アルファゼロアルゴリズムが心のどこかで捨てきれない。

877:535
19/05/19 13:54:34.49 GRYTxzHT.net
ライフゲーム囲碁　コード書き始めました。
ルール実装が結構効率的な奴思い付いて、1000万プレイアウト/s位出ました。
並行でやるっつっても計算資源が問題だなぁ。
囲連星はアイディアないしちょっとお休みかなぁ。

878:535
19/05/19 17:10:04.89 GRYTxzHT.net
GUIがないと不便だなぁ。うーん。

879:535
19/05/21 00:59:34.87 rSRUkqQW.net
うお、ついに人間（俺）に勝った！
内容的にも文句ない勝ち方だ！
(;SZ[19]
;B[jj];W[ji];B[ii];W[ih];B[ki];W[jh];B[kk];W[kh]
;B[lj];W[ij];B[hi];W[hk];B[hh];W[lg];B[gl];W[mg]
;B[gg];W[ff];B[gk];W[gj];B[ll];W[mm];B[fj];W[fi]
;B[gi];W[hj];B[hl];W[jk];B[ik];W[hj];B[gj];W[gf]
;B[gm];W[gh];B[fn];W[fh];B[lh])

880:535
19/05/21 01:06:56.53 rSRUkqQW.net
ここまでくると囲連星はいったん公開してもいいかもな。
本当は白黒総合勝率でLV3に勝ってからが理想なんだけど。
あとDBのファイルサイズでかいんだよなぁ。

881:535
19/05/21 23:53:55.55 rSRUkqQW.net
現状の囲連星のAIを公開します。
ちなみに対LV2黒番必勝ではなくなってしまっているようです。
あと思考時間かなり長いです。
URLﾘﾝｸ(drive.google.com)

882:535
19/05/23 20:03:18.47 boQDU2Sa.net
反応がなくて寂しい。。。
まあもともと過疎スレだからしかたないか。

883:310
19/05/25 01:28:48.60 rX0QQhRb.net
すんまそん。
ダウンロードしたけど、記譜作成中なので、CPU食いたくなくて（汗

884:535
19/05/25 21:14:03.65 LKgjurKe.net
囲碁ディープラーニングプログラミングという本があったので買ってみた

885:535
19/05/25 22:41:49.53 LKgjurKe.net
このサイトも面白そう
URLﾘﾝｸ(medium.com)

886:535
19/05/25 22:44:29.26 LKgjurKe.net
C#からC++を呼び出すの結構難しい。
マネージドコードとアンマネージドコードがどうたらとか、、、

887:535
19/05/27 14:54:14.96 6xYMMPUB.net
AMD Ryzen 3900来た

888:535
19/05/27 17:52:37.02 8VbKHTBW.net
囲碁ディープラーニングプログラム読んでるけどすっごい目が滑る
でも12章のactor critics法というのが面白そうで頑張って読みたい

889:535
19/06/01 23:30:05.61 bijpxRGI.net
俺のマザーボードRyzen3000シリーズに対応しないらしいorz
ショック

890:535
19/06/02 18:07:27.02 rgij2qjY.net
はぁ～だめだあぁ
目が滑る
頭に入ってこない

891:535
19/06/02 21:33:07.07 rgij2qjY.net
うお、betago(>>868の本のプログラム)動いた。
そして意外と強い。

892:535
19/06/02 21:38:17.03 rgij2qjY.net
ん、終局の仕方がわからん。
終局は実装されてないのかな？

893:名前は開発中のものです。
19/06/02 21:42:02.90 pCuEsXAG.net
いまからやってみるか

894:310
19/06/04 01:18:15.20 11K0AF4X.net
強化学習本興味あります。
棋譜作成がいまいち上手く行っていないので。

895:535
19/06/04 21:25:33.03 eotmjR11.net
くそう、時間が欲しい。
金さえあればニートになるのにｗｗ

896:535
19/06/05 21:45:28.39 tAUB+cOz.net
これから仕事が忙しくなりそうな予感。
まあさすがに土日は休めるだろうけど。

897:535
19/06/08 18:42:48.95 bTp76tLI.net
うおお、目が滑りまくりorz
一日無駄になったorz

898:535
19/06/08 21:38:02.44 bTp76tLI.net
目が滑るのは取り組み方が間違�

899:ﾁてる証拠。

900:名前は開発中のものです。
19/06/10 12:52:10.55 /Ra7JNmg.net
囲碁は完全に人工知能に負け人間が追いつくことはないとおもうが。
これや将棋は微妙な線で、人間に勝ち目あるかもしれん。
囲碁より勝ち方、有利のさせ方が分かりやすい差。
人工知能なしの人間技で、人工知能に勝てる方法あるんじゃないかと。

901:名前は開発中のものです。
19/06/10 17:27:02.16 sKxIYoYq.net
大人も子供も白熱！最新ゲーム「ノッカノッカ」が面白い
URLﾘﾝｸ(ima.goo.ne.jp)
ビビットカラーを使ったポップなデザインの二人用ボードゲーム「ガブル」
URLﾘﾝｸ(boardgame-kikou.blog.jp)
LOGY GAMES ボードゲームカタログ
URLﾘﾝｸ(www.logygames.com)
オシャレで簡単、だけど深いボードゲーム
URLﾘﾝｸ(sweetint.com)
コンポーネントに酔いしれて、戦略にゆったり溺れる「箱庭の国」
URLﾘﾝｸ(sake.saloon.jp)
『すずめ雀』初心者でも本格的な駆け引きを楽しめるミニマル麻雀ゲームが登場
URLﾘﾝｸ(www.inside-games.jp)
エクストリーム将棋の企画から販売まで
URLﾘﾝｸ(nakagawa-hands.com)

902:535
19/06/11 18:15:44.55 a3oKL+Tm.net
「来た！」「16コア来た！」「メイン16コア来た！」「これで勝つる！」

903:535
19/06/11 22:20:28.87 R+B8a+a7.net
囲碁ディープラーニングプログラミング相変わらず目が滑ってるんだけど、
しつこく食らいついてたらすこしずつ目が滑らなくなってきてる。
何とかものにしたい。

904:535
19/06/12 19:47:45.91 UjRskMNa.net
githubのリポジトリbetagoとは別に囲碁ディープラーニングプログラミング用のやつがあんのか！
気が付かなかったぜ！
これで勝つる！

905:535
19/06/13 21:23:37.11 ip5cHIAR.net
囲碁ディープラーニングプログラミングのgithubのコードいいかも。
マルチスレッドにも対応してるっぽいし。
これはかなり期待できる。

906:535
19/06/13 21:36:37.70 ip5cHIAR.net
GPUが使えてないみたいだな。
tensorflow-gpuうまく入ってないみたいだ。

907:535
19/06/13 21:38:46.69 ip5cHIAR.net
それにしてもZen2 スリッパが欲しい。
16C32Tじゃ足りない。
64C128Tが欲しいｗｗ

908:535
19/06/14 21:40:47.35 AD5EB04u.net
ん、27000回学習を回した時点から過去のAIに対する勝率が10%～30%位しか行かなくなったみたい。
なぜ？
こんなことってあるのか？

909:535
19/06/14 22:09:53.32 AD5EB04u.net
ん、学習したネットワークと対戦する方法がわからんなぁ。
web_demo.pyあたりで行けそうな気もするが…

910:535
19/06/15 17:55:00.43 ANVzDRfZ.net
human_v_bot.pyというのでランダムAIと対戦できるようなので、これをちょっといじれば自作AIと対戦できそう。

911:535
19/06/15 19:41:51.27 ANVzDRfZ.net
ヤバイ、待ってる時間がじれったい。
やはり zen2 スレッドリッパー買うしか…

912:535
19/06/15 21:21:58.56 ANVzDRfZ.net
LifeGameGoのルールを早く移植したいけど、もうちょっとgithubコードの感触つかんでからかな。

913:535
19/06/15 22:03:51.50 ANVzDRfZ.net
ふーむ、まじで >>891の状態から抜け出せないな。
ネットワークが小さすぎるんだろうか？

914:535
19/06/16 19:35:53.70 OMA3ZwQu.net
あかんな、遅すぎる。
うーん。アルファゼロに幻想持ちすぎかも知れんな。

915:535
19/06/16 20:37:51.38 qjgvbRbv.net
囲碁よりもシンプルなLifeGameGoならもっと速く学習できるという可能背もありますが…
とりあえず、GPUを使えるように頑張るのが先かなぁ？

916:310
19/06/17 17:09:51.93 pTM6WQ3W.net
Surface Pro2の液晶が割れたorz
仕事で使うPCなので慌ててPro6の発注をかけました。
一応コア数２倍の４コア８スレッド、メモリーも１６Gになる予定。
そろそろスピードの限界を感じていたので、痛しかゆしなところ。
ようやくIntelの呪縛から解放されるAVX2対応のCPUがAMDから出るというのに、
専用新型PCが遠のきました。

どのくらいスピードアップするかなぁ…。

917:535
19/06/17 19:55:14.11 KSoga8dR.net
仕事で使うpcが自腹なんかよ？
乙です

918:535
19/06/21 20:05:05.51 wxbtZaxz.net
なんかちょっとモチベが落ちてます。
せっかく週末なのになぁ。

919:535
19/06/22 20:40:40.51 s675JLMo.net
あああああ、だめだ完全に気持ちがしぼんでしまった。

920:535
19/06/23 23:02:35.16 wqGRreNQ.net
つかやっぱpythonはちょっと厳しいんだよなぁ…

921:310
19/06/25 22:00:54.87 i36dK7DH.net
あ、会社のPCです。流石に性能２倍なので、買うモチベーションが下がったのです。
現在液晶の表面パネルバキバキで、タブレット機能止めて、
セロテープで補強してだましだまし使ってますが、発熱によって
内部が歪んじゃっているみたいで、通常状態でも液晶が湾曲してます。

で、将棋の探索の深さが意味不明だったので、色々考えていましたが、
なんとなく想像がついてきました。多腕バンディット使って、反復深化と
絞り込みを行っているのではないかと思います。
現状中盤探索の速度がいまいち遅く、シングルプローブカットすると
何故かさらに遅くなるという状態。棋譜作成メインだったので、あまり
気にしていなかったのですが、新しいPC来たらちょっとトライしてみよう
かなと思っています。

922:310
19/06/28 22:23:55.68 jdIE39If.net
新PCセットアップ中。
前回思いついた中盤探索ロジック。具体的に実装を考え始めたら、
MCTSでいいじゃんということに（汗
これからVisual Studioのダウンロードです。

923:名前は開発中のものです。
19/06/29 09:41:43.34 aAhzQFUl.net
セットアップ完了して、開発環境の移行も終わりました。
VS2017→VS2019でエラーチェックが厳格化したものがあったようで、ソース修正。
Win8→Win10でコマンドプロンプトがなんか変わって、CTRL-Sの動作がよくわからない。
などなど、細かい点はいくつかありますが、速度的には思いのほか効果が出ていて、
ほぼ倍速くらいな感じです。並列のオーバーヘッド増加分を、クロック他CPU単体の
パフォーマンスアップで吸収していると思われます。

924:310
19/06/29 09:42:10.63 aAhzQFUl.net
↑は僕です。

925:535
19/06/29 17:06:05.94 6alt1Zxx.net
倍速はなかなかいいですね。おめでとうございます。
俺も頑張らねば。。。

926:535
19/06/30 17:26:00.32 5SElYd7b.net
逃げちゃだめだ、逃げちゃだめだ、逃げちゃだめだ(pythonから)

927:535
19/07/04 18:51:35.21 JLZZWsF4.net
VMWareだとどうにもtensorflow-gpuが使えないのでネイティブubuntuを入れるか迷い中
SSD丸ごと1個あけて別ドライブにインストールすればwin10とも干渉しないはず…

928:535
19/07/05 20:11:11.37 gv5AG18i.net
一応ubuntu入ったっぽい。
でも環境構築する根性が湧いてこない。
あしたにするか。。。

929:535
19/07/06 17:14:44.78 YqSGwJgi.net
あかん、ubuntuすっごい固まるorz
今日だけで4回フリーズしたorz

930:535
19/07/07 19:22:27.22 8kGyRN1E.net
ここまで固まられるとネイティブubuntuは正直、撤退かなぁ
うーん。惜しいなぁ。

931:535
19/07/07 22:36:19.30 8kGyRN1E.net
VMWareのubuntuは固まらないんだよなぁ
バージョンが違うからかなぁ

932:535
19/07/08 23:58:39.11 J+Oysvfm.net
50万局学習させても知性とは程遠い打ち筋orz
絶望した！

933:535
19/07/12 20:02:35.26 5KSDfXOV.net
さんれんきう

934:535
19/07/14 01:02:14.40 BHfYEZqG.net
AQZという囲碁AIが50万局の学習でプロに勝ったそうな。
なんで俺が試したプログラムとそんなに違うんだ？

935:535
19/07/15 07:10:16.79 U2als8ec.net
徹夜してしまった
反省（反省するとは言っていない）

936:535
19/07/21 20:03:14.96 E/xzPLNe.net
二進も三進もいかないorz
しばらく休憩するか…

937:535
19/07/21 21:27:54.74 E/xzPLNe.net
URLﾘﾝｸ(github.com)
気分を変えてこれに手を出そうかと思ってます。

938:535
19/07/28 15:53:29.60 afiNgtjO.net
すっかりさぼってしまっています。

939:310
19/07/31 22:58:56.92 RoaGFb2p.net
地味に改良＆棋譜作成継続中。
評価値で黒番＋２、白番－１くらいの差が生じているので、
評価関数にバイアス項を導入しました。
他、若干の高速化ネタ。
中盤探索でProbcutすると遅くなる問題を回避。本格修正するか悩み中。
というか、そもそもZebraより圧倒的に遅い原因がわからん。

940:535
19/08/04 00:47:49.68 kSURYkNt.net
ようやっと >>920のプログラムにライフゲーム囲碁のルールを実装しました。
python 超つらい…

941:535
19/08/04 01:56:43.25 kSURYkNt.net
CPU使用率10%か。。。切ない。。。

942:535
19/08/04 20:02:48.59 kSURYkNt.net
計算がある程度進むと必ずOSごとフリーズするorz
きょうびOSごと落ちるってどういうことだよ？

943:535
19/08/04 20:18:18.16 kSURYkNt.net
これはもうアルファゼロには手を出すなという神のお告げかもorz orz orz

944:535
19/08/07 20:34:05.86 cRW9S7xJ.net
そもそも、気温が高すぎて留守にしてる最中計算回しっぱなしにするの怖いってのもあるんだよなぁ

945:310
19/08/10 21:39:26.19 iTdjAaDm.net
中盤探索を改良。
一つは、普通に無駄な処理を見つけて修正。
もう一つは、評価値の計算に差分計算を取り入れました。
今まで並列処理で差分ってどうやるんだろうと思っていましたが、
単にDepth=1のところ（次がLeaf）で、順次評価値計算するのを
差分すればよかったのね。
この２つで、中盤探索で２手ほど深く読めるようになりました。

946:535
19/08/13 19:47:02.79 wzsq2qR8.net
今、実家に帰省してるんですが >>865のAIを動かしてみようとしたけどdllが認識されませんね？
何が悪いんだろう？

947:310
19/08/15 23:44:11.68 NhTCTcJa.net
小人閑居して不善をなす…。
思い切って、不要そうに思える棋譜をバッサリ削除してみました。
削除しすぎたかも。
いろいろ細かく修正と、デバッグ用表示の改良。
とかやっていたら、丸１日近く動かしたところで、なぜか急激にパフォーマンス低下。
もともと空きが少なかったSDDが一杯になっている…。とはいえ30Gはあったはず。
再起動していたらもとに戻った。原因不明。
対症療法で不要プログラムアンインストールしていたら、使っているOfficeを間違えて
アンインストールしてしまった。
HDD一杯が原因なのか、評価値のファイルが壊れていた。
ギリギリ間に合ってバックアップから復旧できた…と思う。

948:310
19/08/16 14:28:22.00 MY5mY5kZ.net
SDD一杯の犯人判明。
セキュリティー対策ソフトの監視対象管理DBのファイルが合計で400G越え（汗
ところが、管理者権限ないと停止できず、ファイル掴んでいるため削除できない。
今日は管理者休暇中。
logファイルを頻繁に追記しすぎて、ファイルサイズ変化する都度DBファイルが
作られているのではないかと想像。棋譜バッサリ削除して、一気に遡り探索やり直し
していて、これまでと比較にならないペースと数で追記処理が起きているので、
その影響の可能性が。

Officeは再インストールしてもらったけど、何故かセキュリティ解除キーの入力ができない。
来週月曜日は出張なので、来週火曜日までだましだまし行きます。
古い方のPCがまだ生きているので、Excel作業はそちらでやる事にしました。

949:535
19/08/23 19:05:38.98 KljXhF7+.net
AQZ敗退か
残念

950:名前は開発中のものです。
19/08/23 19:13:36.62 KljXhF7+.net
囲碁は現在のコミで白番有利説もあるようですがどうなのか

951:310
19/09/05 22:24:16.41 NIzTzKyA.net
棋譜の作り方全面改訂。
分岐のチェックで、以前は全ての分岐を棋譜化していたけど、今度のは軽い探索で
怪しい評価値（同一評価値～－４程度まで）のものだけ棋譜化するようにして、
棋譜数を大幅節約。学習が楽になるという算段です。
棋譜づくりが順調になり暇ができると、細かく気になっていた、どーでもよいところを
改良し始めて、バグとりで棋譜づくりが滞るという悪循環orz

よくよく考えたら、PCのパワーアップしたので、またDCNNトライとかしてみようかな
とか思い始めた。tiny-dnnしか選択肢無いんだけど。

952:535
19/09/11 20:42:08.54 EGEM/7RV.net
googleがminigoというオープンソースやってるらしいですね。
最近さぼりっぱなしだったけど、ちょっと見てみるか。

953:535
19/09/12 19:49:22.62 qOi8eRBu.net
すげー難しそう
まだちゃんと見てないけど

954:310
19/09/17 23:33:38.68 KoOw8EHX.net
相変わらずしこしこ棋譜作って学習繰り返してます。
もう無いだろうと思いつつ、ちょこっとした事に気づいて修正を繰り返してます。
置換表のハッシュ関数を改良。
格納効率が結構良くなったので、衝突が減ったはず。
終盤探索の時にBOOK（確定）も参照して余計な探索を減らしました。
基本遡りで確定させているので、運が良い時に滅茶苦茶早くなりました。
無い時は今まで通り（汗
学習データが不足しているのではないかと、置換表内に残っているスコアが確定
した局面FIFOで貯めて、折々に学習に回してみました。１回探索で１００～５００件
程度。これをFIFOで５００万件。棋譜に残っていない局面で学習する事で、過学習
が防止できるかなと思っていますが…。
現在、２７手確定局面で大体１４０００件の棋譜とその分岐で合計２３万件ほどですが、
まだ棋譜が足りていない感じです。が、件数が増えすぎて手に負えません。
BOOKの確認ができるWindowsアプリ作ろうかと思い始めています。

955:535
19/09/22 19:52:21.38 ctBLCdpw.net
このまま失踪しそうな感じです。
やっぱアルファゼロは手を出してはいけないかったんや。

956:310
19/09/22 19:56:33.01 x3eDgHtk.net
DCNNになってから、一般人のPCでは手が出せなくなってるからね。
計算プロセス自体は、NNを極端に単純化したものが線形回帰だと思えば、
NNで生まれた計算ノウハウが流用できますよ。
というか、今の時代、ただのLRでDCNNとほぼ同じ強さ、とかの方がオシャレ
ではないかと思う、ひねくれものの僕。

957:310
19/09/23 19:34:01.85 taOqGsoO.net
所詮趣味なので、あまり無理せず、やる気になるときにやればよいかと思います。

958:535
19/09/23 20:58:22.95 T5ohU9uM.net
うーむ、やりたい気持ちはあるのですが、いかんせん難しすぎて…
githubにもっと易しそうなのでてくるまで待つか？うーん。

959:535
19/09/25 21:31:58.87 /O9j0jn/.net
気温が徐々に下がってますね。
そろそろ計算回しっぱなしにしてもいいかな。
つっても回せるプログラムがないけど。

960:535
19/09/28 22:43:07.40 upFNPupL.net
またgithub漁ってます。
URLﾘﾝｸ(github.com)

961:535
19/10/01 22:13:53.83 r/X1idNR.net
3日くらい計算回したけど全く強くなる気配がないなorz
もしかしたら微妙に強くなってるのかもしれないけどあまりに成長速度が遅すぎる
やっぱアルファゼロは計算時間が半端ないのかも？

962:535
19/10/01 23:21:06.21 r/X1idNR.net
やっぱアルファゼロはいったん諦めて、囲連星でやったようにモンテカルロAIの棋譜取り&勝率DB作り&教師ありDNNでライフゲーム囲碁やるべきか？
うーむ

963:310
19/10/02 01:57:09.42 FIHYKLNY.net
DCNN強化学習はマシンパワーが恐ろしいほど必要だからね。
満足できる教師データがそろってから評価関数に使ってみる程度にしないと…。
自由度が高すぎるので、まともな評価関数に収束するまでに、相当な試行回数が
必要なんじゃないかと思う。
自分は棋譜作成をずーっとやっていますが、現在は棋譜作りの目的がBook充実
になりつつあります。なんというか、現在の形はいつの間にかQ学習＋ε-Greedy
っぽくなってきています。
アルファ様のお陰で、目標を見失いましたので、手段のためなら目的を選ばない感じ
で、プログラム作る楽しみという方向になっています(^^;

964:535
19/10/02 22:58:01.64 BtKMO/4x.net
ライフゲーム囲碁、モンテカルロAIの棋譜取り始めました。
ヒューリスティックなしのモンテカルロで1手10000プレイアウトで1局に約1分かかります。
それを16並列で1分当たり約16局採取できる予定。
棋譜の質があまりよくないのが難点ですがとりあえず、これでやってみます。

965:535
19/10/03 21:37:56.85 tdDOcoA1.net
18257局分棋譜が取れたようです。大体13.2局/分くらい取れるっぽい。
全コア動かすとシングルよりやっぱ少し遅くなるみたいですね。

966:535
19/10/06 00:55:35.61 V0Jk6SKR.net
DB作成まで来ました。
ライフゲーム囲碁は囲連星と比べてもっと沢山の棋譜が必要になるかもしれません。
オープニングのバリエーション的に。

967:310
19/10/11 20:52:12.13 Tdz7win8.net
評価関数を変えたくなってきた。
偶数手番と奇数手番の癖が顕著になってきたので、スムージングをしたく
なったのだけど、キーを手番優先にしているので、１手進むと盤面がひっくり
返ってしまい、連続性が無くなってしまう。
キーを黒番優先にして、評価値も黒番サイド（白番の場合は－１を掛ける）に
統一するとスムージングしやすくなる。
ただし、評価関数からBookから、あちこち影響が出る。
そろそろソースの整理がしたくなってきていたので、バッサリやっちゃおうかな。
台風で暇だし。

968:
19/10/12 09:18:22 acZ84t7K.net
一晩考えてやっぱ辞めました(^^;
単純じゃない。

次ページ