<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=utf-8"><meta name=Generator content="Microsoft Word 15 (filtered medium)"><!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:Wingdings;
        panose-1:5 0 0 0 0 0 0 0 0 0;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Aptos;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        font-size:12.0pt;
        font-family:"Aptos",sans-serif;}
h2
        {mso-style-priority:9;
        mso-style-link:"Heading 2 Char";
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:18.0pt;
        font-family:"Aptos",sans-serif;
        font-weight:bold;}
span.Heading2Char
        {mso-style-name:"Heading 2 Char";
        mso-style-priority:9;
        mso-style-link:"Heading 2";
        font-family:"Calibri Light",sans-serif;
        color:#2F5496;
        mso-ligatures:none;}
span.EmailStyle20
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
/* List Definitions */
@list l0
        {mso-list-id:1276672286;
        mso-list-template-ids:-1346703516;}
@list l0:level2
        {mso-level-number-format:bullet;
        mso-level-text:o;
        mso-level-tab-stop:1.0in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:"Courier New";
        mso-bidi-font-family:"Times New Roman";}
@list l0:level3
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:1.5in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:Wingdings;}
@list l1
        {mso-list-id:1723558614;
        mso-list-template-ids:-852467898;}
@list l1:level1
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:.5in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:Symbol;}
@list l1:level2
        {mso-level-number-format:bullet;
        mso-level-text:o;
        mso-level-tab-stop:1.0in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:"Courier New";
        mso-bidi-font-family:"Times New Roman";}
@list l1:level3
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:1.5in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:Wingdings;}
@list l1:level4
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:2.0in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:Wingdings;}
@list l1:level5
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:2.5in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:Wingdings;}
@list l1:level6
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:3.0in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:Wingdings;}
@list l1:level7
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:3.5in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:Wingdings;}
@list l1:level8
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:4.0in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:Wingdings;}
@list l1:level9
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:4.5in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:Wingdings;}
@list l2
        {mso-list-id:1989237849;
        mso-list-template-ids:390485148;}
@list l2:level2
        {mso-level-number-format:bullet;
        mso-level-text:o;
        mso-level-tab-stop:1.0in;
        mso-level-number-position:left;
        text-indent:-.25in;
        mso-ansi-font-size:10.0pt;
        font-family:"Courier New";
        mso-bidi-font-family:"Times New Roman";}
ol
        {margin-bottom:0in;}
ul
        {margin-bottom:0in;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-US link=blue vlink=purple style='word-wrap:break-word'><div class=WordSection1><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'><o:p> </o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'><o:p> </o:p></span></p><div style='border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in'><p class=MsoNormal><b><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'>From:</span></b><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'> extropy-chat <extropy-chat-bounces@lists.extropy.org> <b>On Behalf Of </b>BillK via extropy-chat<br><b>…</b></span><o:p></o:p></p></div><div><div><div><div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal><span style='font-family:"Arial",sans-serif;color:black'>I asked CHATGPT-5 to explain more about the dangers of AI-controlled weapons.<o:p></o:p></span></p></div><div><p class=MsoNormal><span style='font-family:"Arial",sans-serif;color:black'>The answer was rather frightening. <o:p></o:p></span></p></div><div><p class=MsoNormal><span style='font-family:"Arial",sans-serif;color:black'>BillK<o:p></o:p></span></p></div><div><p class=MsoNormal><span style='font-family:"Arial",sans-serif;color:black'><o:p> </o:p></span></p></div><div><p class=MsoNormal><span style='font-family:"Arial",sans-serif;color:black'>CHATGPT-5:<o:p></o:p></span></p></div><div><p><span style='font-family:"Arial",sans-serif;color:black'>Alright, let’s slow it down and walk through both sets of risks — the ones <i>The Register</i> article explicitly pointed out, and the extra ones I added that sit just under the surface.<o:p></o:p></span></p><div class=MsoNormal align=center style='text-align:center'><span style='font-family:"Arial",sans-serif;color:black'><hr size=2 width="100%" align=center></span></div><h2><span style='font-family:"Arial",sans-serif;color:black'>Risks the article itself highlighted<o:p></o:p></span></h2><ol start=1 type=1><li style='color:black;mso-list:l2 level1 lfo1'><b><span style='font-family:"Arial",sans-serif'>Misidentification of targets</span></b><span style='font-family:"Arial",sans-serif;color:windowtext'>…</span><span style='font-family:"Arial",sans-serif'><o:p></o:p></span></li></ol><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'><o:p> </o:p></span></p><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'>BillK, my son is the software lead for a club at his university where they build flying robots and task them with various things.  It flies about the grounds the size of a regional airport (which is where this year’s international was held in the Washington DC area) identifying targets and in some cases taking action.  The course had been set up with manakins dressed a certain way to represent such things as fleeing felon, nude sunbather, injured hiker, dangerous wild animal and so on.  I might have written about this before, I vaguely recall that I did.<o:p></o:p></span></p><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'>Points could be scored by dropping the appropriate payload on the correct target, such as a food and water capsule on the injured hiker, a fragmenting grenade on the fleeing felon (hey, that guy might be dangerous ya know (that’s how its done over here BillK.))<o:p></o:p></span></p><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'>Well now think about it for a minute or less.  We watched as the various teams did their competition runs, and those bots routinely misidentified their targets and did the wrong things.  They didn’t have their uniforms, but you know damn well there was military brass out there watching, listening and learning, perhaps scouting for talent to recruit.  Hell we were right there in their back yard.  The Pentagon was on our side of the river.  That’s where I would be if I were in that biz.<o:p></o:p></span></p><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'>How the hell can we even imagine those bots won’t be pressed into service?  Doesn’t take a prophet for profit (me) to foresee such things, for it has already happened and is happening right now: the commies and the Ukrainians are both using autonomous drones, and we aren’t told if they are making mistakes because that information is classified up the kazoo.<o:p></o:p></span></p><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'>Fun aside: my son has joined a team doing a related AI competition which I think he is more suited for: they are rigging up an honest-to-evolution open-wheel Indycar, completely autonomous, to race against other schools’ robo-racers (Stanford, the Bears are soooo gonna catch you guys (next year if not this year.))  Well when you think about it, get a car capable of a coupla hundred (over 300 for you BillK) that is a terrific playground for AI.  That is a game where you will program out to the limit, and even if there are occasional spectacular crashes, you don’t need to worry if you just paid to see some hapless prole slay himself.  No actual humans are harmed in any way in the making of this absurd sport.<o:p></o:p></span></p><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'>Second fun aside: I wondered how a university sports team afford a million dollar play toy like that, well turns out… a worn out or outdated open-wheeler Indy isn’t worth all that much after its technology is stale or the rules change.  What are you going to do with it?  Make a redneck lawn ornament?  (Hey spike, now that you mention it, that would be a delightfully tacky yet refined application…)  But even after they are outdated, they are still capable of going a coupla hundred down the back stretch, so why not let the old stallion run, this time with no one on his back?  Cool, let’s RACE!<o:p></o:p></span></p><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'>spike<o:p></o:p></span></p><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'><o:p> </o:p></span></p><p><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'><o:p> </o:p></span></p></div></div></div></div></div></div></body></html>