<div dir="ltr">As I said I was blown away when GPT-4 told me it made a mistake by coloring below the horizon in his helicopter drawing with the same color of the sky. I simply told it that I think it made a mistake and to tell me what I thought it was. Not sure how it went through the steps of analyzing this, in particular, because it was all SVG code. This is not something that it could have been solved by accessing some archived information. Gordon never addressed how an autocomplete can achieve this type of analysis and recognize a subtle error like this. As I mentioned before if were sitting with a child and he went through this reasoning process we would recognize the child as highly intelligent (of course it depends on the age, but I would say even a 4-5-year-old child would have problems in coloring different parts of the drawing consistently). </div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Apr 28, 2023 at 5:16 PM Jason Resch via extropy-chat <<a href="mailto:extropy-chat@lists.extropy.org">extropy-chat@lists.extropy.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="auto"><div><br><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Apr 28, 2023, 5:53 PM efc--- via extropy-chat <<a href="mailto:extropy-chat@lists.extropy.org" target="_blank">extropy-chat@lists.extropy.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><br>
<br>
On Thu, 27 Apr 2023, Jason Resch via extropy-chat wrote:<br>
<br>
> I thought this was interesting and relevant to discussions of what GPT-4 understands.<br>
> Here a professor graded it's responses to the final exam questions of a test which was not in the training set used by GPT since it<br>
> was never put online.<br>
><br>
<br>
But were any papers or data related to the subject in the training set?<br>
<br>
I did this myself for my own exams and alpaca passed it. My exam was not<br>
"in it" but since knowledge of the domain (linux) is in it, of course I<br>
can answer the questions.<br></blockquote></div></div><div dir="auto"><br></div><div dir="auto">I'm sure some related material is out there, but I've also seen GPT solve logic puzzles written from scratch for the purposes of testing GPT, so it must have some reasoning ability beyond rote memorization.</div><div dir="auto"><br></div><div dir="auto">Jason</div><div dir="auto"><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
</blockquote></div></div></div>
_______________________________________________<br>
extropy-chat mailing list<br>
<a href="mailto:extropy-chat@lists.extropy.org" target="_blank">extropy-chat@lists.extropy.org</a><br>
<a href="http://lists.extropy.org/mailman/listinfo.cgi/extropy-chat" rel="noreferrer" target="_blank">http://lists.extropy.org/mailman/listinfo.cgi/extropy-chat</a><br>
</blockquote></div>