<div dir="ltr"><br><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Dec 9, 2017 at 12:43 AM, spike <span dir="ltr"><<a href="mailto:spike66@att.net" target="_blank">spike66@<span class="" id=":1rq.94" tabindex="-1" style="">att</span>.net</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><br>
<br>
Conclusion: AlphaZero has accomplished something crazy cool here.<br></blockquote><div><br></div><div>### <span class="" id=":1rq.95" tabindex="-1" style="">AlphaZero</span> is one of the lesser harbingers foretold by our list-prophet <span class="" id=":1rq.96" tabindex="-1" style="">Eliezer</span> in the waning years of the last millennium. Very neat, especially if you realize that compared to a human brain <span class="" id=":1rq.97" tabindex="-1" style="">AlphaZero</span> is a tiny-<span class="" id=":1rq.98" tabindex="-1" style="">teensy</span> device that consists of hundreds of modules operating on a very simple input (board game rules). It may be difficult to discern which neural structures are equivalent to the modules in <span class="" id=":1rq.99" tabindex="-1" style="">AlphaZero</span> but I would venture that the human brain is for the most part a bloated blob of millions of such modules, fed on complex inputs but running on a very slow substrate. These differences account for both the advantages and the disadvantages of <span class="" id=":1rq.100" tabindex="-1" style="">AlphaZero</span> <span class="" id=":1rq.101" tabindex="-1" style="">vis</span>-a-<span class="" id=":1rq.102" tabindex="-1" style="">vis</span> the human: its incredible speed of learning and the for now very limited scope of learning. Once you let <span class="" id=":1rq.103" tabindex="-1" style="">AlphaZero</span> grow big so it can successfully feed on richer input, only the advantages will remain.</div><div><br></div><div>But <span class="" id=":1rq.104" tabindex="-1" style="">AlphaZero</span> is just a lesser harbinger: it is <span class="" id=":1rq.105" tabindex="-1" style="">AutoML</span> that gives me the goose flesh. Again, the prophet <span class="" id=":1rq.106" tabindex="-1" style="">Eliezer</span>, about 25 years ahead of the time, wrote once about "<span class="" id=":1rq.107" tabindex="-1" style="">codic</span> modality" - the <span class="" id=":1rq.108" tabindex="-1" style="">AI's</span> specialized/instinctual ability to write software. <span class="" id=":1rq.109" tabindex="-1" style="">AutoML</span> is where the reinforcement learning algorithm starts turning its gaze upon itself, and brings to bear the advantages of speed to the building of a self. The step from mere awareness to consciousness occurs when a mind turns its eye inward to model and manage its own subunits, as the prophet Hofstadter said. <span class="" id=":1rq.110" tabindex="-1" style="">AutoML</span> is thus the beginning of machine consciousness, an infinitesimal and limited spark, but a spark nevertheless.</div><div><br></div><div>We will see more harbingers before the Day of Nerd Rapture comes. The end and the beginning are nigh!</div><div><br></div><div>Rafał</div></div>
</div></div>