<div dir="ltr">Hi Adrian,<div>I'm using GPT-4 and when I want to test its spatial relationship I ask GPT-4 to write code in vector graphics. Then I copy and paste the code in HTML and I see the results. <br>They are pretty amazing and this is the sort of the experiments that actually can really tease the cognitive abilities of these systems. To me the fact that GPT-4 can go across media, understand where the tail of a helicopter is, draw a cockpit when you ask to add a human (and it can explain why it did it), and use superimposed circles to describe the fuzziness of clouds is completely mind-blowing. Claiming there is no understanding in these operations is just being in some high-level denial and cognitive dissonance. <br>One think you can try is to look for puzzles maybe or some of the typical theory of mind tests that psychologists perform on young children. Some scientists have done a very systematic study of these capabilities and concluded that GPT-4 has the theory of mind of 9 years hold human. <br><br><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Wed, Apr 26, 2023 at 11:45 PM Adrian Tymes via extropy-chat <<a href="mailto:extropy-chat@lists.extropy.org">extropy-chat@lists.extropy.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr">On Wed, Apr 26, 2023 at 10:55 PM Giovanni Santostasi <<a href="mailto:gsantostasi@gmail.com" target="_blank">gsantostasi@gmail.com</a>> wrote:<br></div><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Adrian try to develop clever tests to determine GPT-4 cognitive abilities. Also I see you use GPT-3 or 3.5 that is vastly different from GPT-4 in terms of capabilities.<br></div></blockquote><div><br></div><div>I use what I have access to.  My experiments so far have been via <a href="https://chat.openai.com/?model=text-davinci-002-render" target="_blank">https://chat.openai.com/?model=text-davinci-002-render</a> .  Is there somewhere else I should try?  Note that I have a budget of $0 for this, so anything that requires me to pay is right out.</div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Did you see some of my cognitive experiments? In particular, the one where I asked to draw objects using vector graphics? <br></div></blockquote><div><br></div><div>Yes.  I suspect you are using some other interface.</div><div><br></div><div>I make no apologies for being more of an experimentalist than a theorist, which is  why I have been ignoring most of this conversation.  This is why I was looking for ways to show that experiments with actual AIs could be valid at all, rather than dismissed on theoretical grounds.  Based on the responses, I am not sure how well that worked.</div></div></div>
_______________________________________________<br>
extropy-chat mailing list<br>
<a href="mailto:extropy-chat@lists.extropy.org" target="_blank">extropy-chat@lists.extropy.org</a><br>
<a href="http://lists.extropy.org/mailman/listinfo.cgi/extropy-chat" rel="noreferrer" target="_blank">http://lists.extropy.org/mailman/listinfo.cgi/extropy-chat</a><br>
</blockquote></div>