こんにちは.今回は前回に引き続き,Deep Learningの現在注目されている分野,今後伸びていくであろう分野について解説をしたいと思います.
Self-Play is Automated Knowledge Creation
昨年はAlpha Go がプロの囲碁棋士に勝つという非常に衝撃的な出来事がありましたね.Self - Playとはその言葉の通り「自分自身と遊ぶ」ということで,自分と競争してお互い強くなっていくということに近いです.
以下の動画に具体的な様子が描かれていますので,ぜひご覧ください.
以下の動画に具体的な様子が描かれていますので,ぜひご覧ください.
Competitive Self-Play
via www.youtube.com
今後の展開
10 Alarming Predictions for Deep Learning in 2018には以下のように記述されていました.
AlphaGo Zero and AlphaZero’s “learn from scratch self play” is a quantum leap. In my opinion, it is of the same level of impact as the discovery of Deep Learning. Deep Learning discovered universal function approximators. RL self-play discovered universal knowledge creation. DeepMind doesn’t have a word for this yet, but another research group employs the dual process model of cognition to explain it and calls it “ExIt”.
Do expect to see a lot more advances related to self-play.
Alpha Go Zero はプロ棋士のデータなどの情報を使わず,Self-Play のみで成長をしました.本記事では,これを「Deep Learning の発明と同程度のレベルのインパクトを持つ」と記述しています.
確かにそうですね.人間のプロ棋士の棋譜データを学習して強くなったのならまだしも,コンピュータのみで人間より強くなってしまったわけですから...
確かにそうですね.人間のプロ棋士の棋譜データを学習して強くなったのならまだしも,コンピュータのみで人間より強くなってしまったわけですから...
いずれにせよ,近い将来欠かせない技術であることは間違いないです.今後の発展を見守りたいと思います.
引用記事
1. 10 Alarming Predictions for Deep Learning in 2018
https://medium.com/intuitionmachine/10-fearless-predictions-for-deep-learning-in-2018-bc74a88b11d9
2. Competitive Self - Play
https://www.youtube.com/watch?v=OBcjhp4KSgQ
3. Self-learning computer eclipses human ability at complex game Go
https://www.thenational.ae/uae/self-learning-computer-eclipses-human-ability-at-complex-game-go-1.670818
https://medium.com/intuitionmachine/10-fearless-predictions-for-deep-learning-in-2018-bc74a88b11d9
2. Competitive Self - Play
https://www.youtube.com/watch?v=OBcjhp4KSgQ
3. Self-learning computer eclipses human ability at complex game Go
https://www.thenational.ae/uae/self-learning-computer-eclipses-human-ability-at-complex-game-go-1.670818
11 件
より引用です.OpenAIさんの動画は非常にわかりやすいです.