<html><head></head><body><div><span data-mailaddress="rafal.smigrodzki@gmail.com" data-contactname="Rafal Smigrodzki" class="clickable"><span title="rafal.smigrodzki@gmail.com">Rafal Smigrodzki</span><span class="detail"> <rafal.smigrodzki@gmail.com></span></span> , 6/4/2015 8:19 AM:<blockquote class="mori" style="margin:0 0 0 .8ex;border-left:2px blue solid;padding-left:1ex;"><div><div class="mcntgmail_extra"><div class="mcntgmail_quote">On Thu, Apr 2, 2015 at 3:25 PM, John Clark <span><<a href="mailto:johnkclark@gmail.com" target="_blank" title="mailto:johnkclark@gmail.com" class="mailto">johnkclark@gmail.com</a>></span> wrote:<blockquote class="mcntgmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;"><div><div class="mcntgmail_extra"><div class="mcntgmail_quote">On Thu, Mar 26, 2015 at  Rafal Smigrodzki <span><<a href="mailto:rafal.smigrodzki@gmail.com" target="_blank" title="mailto:rafal.smigrodzki@gmail.com" class="mailto">rafal.smigrodzki@gmail.com</a>></span> wrote:<br><br><blockquote class="mcntgmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;"><div class="mcntgmail_extra"><div class="mcntgmail_quote"><div>> there will be a trade off between spawning independently goal-oriented processes (copies) and running non-sentient optimization and search processes.</div></div></div></blockquote><div><br></div><div>You may create a copy of yourself to accomplish some specific sub-goal and after that has been accomplished you might want him to self destruct. However given the fact that he's identical to you as soon as he's created he would think it's a much better idea if you not him accomplish the sub-goal and then self destruct. In fact he might insist and sincerely believe that he is the original and you are the copy and it might be exceedingly difficult to convince him that is not the case. Actually it doesn't matter which is the original and which is the copy because they are identical.   </div></div></div></div></blockquote><div><br></div><div>### Well, I don't know about your copies, but my copy, after looking up its location and determining it is a copy created to accomplish a goal, would self-destruct in accordance with the decision that I, a mind identical to it, made before being copying.</div></div></div></div></blockquote></div><div><br></div><div>Meanwhile the Anders-clan, believing 'Anders' to be the equivalence class of all sufficiently Anders-like processes is fine with having a lot of brief twigs on the main branches. It will have more resources running very fast Anderses, and it will also counteract the tendency of getting side tracked (since Anderses derived from my current instance likely have a high tendency for that).</div><div><br></div><div>The interesting case is how much I/we would consent to neural upgrading experiments. On one hand I am a bit more cautious there, but on the other hand I am also rather in favor of self-experimentation. Might be fun to see how it plays out.</div><div><br></div><div>My point is that some people may be very different in the styles they run their clans. Some do not accept at all being used as tools for somebody like them. Others think it is entirely OK. </div><br><br>Anders Sandberg, Future of Humanity Institute Philosophy Faculty of Oxford University</body></html>