Een woord Turing Test suggereert ‘kak’ is wat ons onderscheidt van de machines

Stel je voor dat je leeft in een aantal dystopische toekomst, en je beschuldigd wordt van een geavanceerde AI, dat is verboden in deze maatschappij. De straf is de dood, en om te overtuigen van de rechter, die zal beslissen over uw lot, u kunt spreken slechts een woord, een woord dat u wilt van het woordenboek, om te bewijzen dat je vlees en bloed. Welke woorden kies je?

Het klinkt als de setup voor een cheesy sci-fi korte, maar dit is eigenlijk een onderdeel van een nieuwsgierige papier van een paar van de onderzoekers aan het MIT op iets wat ze noemen de “Minimale Turing Test.”

In plaats van een machine proberen te overtuigen van iemand die ze de mens door middel van gesprek — dat was het uitgangspunt van de oorspronkelijke Turing Test, beschreven door de Britse wetenschapper Alan Turing in zijn invloedrijke 1950 “Computing Machinery and Intelligence” — de Minimale Turing Test vraagt een enkel woord, ofwel gekozen volledig vrij of geplukt uit een paar woorden.

De onderzoekers verantwoordelijk, John McCoy en Tomer Ullman, te verduidelijken dat de Minimale Turing Test is niet een maatstaf voor AI vooruitgang, maar een manier van aftasten hoe mensen zichzelf zien in relatie tot de machines. Deze vraag zal steeds relevant in een wereld gevuld met AI-assistenten, deepfaked mensen, en Google automatische antwoord in de afhandeling van uw e-mail. In een wereld van de mens-zoals AI, wat we denken dat ons onderscheidt? Wat maakt ons anders?

In de eerste van McCoy en Ullman de twee tests, 936 werden de deelnemers gevraagd om te selecteren welk woord ze vond dat ze dachten dat het zou een bewijs zijn van hun menselijkheid. Ondanks de gratis reeks van keuzes, resultaten geclusterd rond een aantal thema ‘ s. De vier meest geplukt woorden waren “de liefde” (134 antwoorden), “compassie” (33 antwoorden), “human” (30 antwoorden), en “alstublieft” (25 antwoorden), die samen een kwart van alle reacties. Andere clusters werden empathie (woorden als “emotie”, “feelings” en “sympathie”), en het geloof en de vergeving (woorden als “genade,” “hoop” en “god”).

Al met al, de 936 antwoorden bedekt 428 afzonderlijke woorden, die een opvallende bedrag van de samenhang.

In de tweede test, 2,405 deelnemers moesten kiezen tussen paren van woorden, het beslissen welke van de twee ze dachten dat werd gegeven door een mens en een machine. Nogmaals, woorden als “liefde,” “de mens,” en “alstublieft” scoorde sterk, maar de winnende woord was eenvoudiger en duidelijk biologisch: “kak.” Ja, van alle word-koppelingen, “kak” is geselecteerd meest vaak om aan te geven dat de essentie en de ziel van de mensheid. Kak.

Spreken tot De Rand, McCoy van MIT ‘ s Sloan Neuroeconomics Laboratorium, benadrukt dat de test werd meer over de sociale psychologie is dan de wetenschap van de computer.

“We zien het niet wordt gebruikt als de volgende CAPTCHA,” McCoy zegt. “De praktische toepassingen heeft in de AI computer ruimte is meer wanneer je na te denken over user interface design en dat soort dingen. In die context, is het misschien wel handig om te weten hoe mensen denken over computers en wat ze denken dat hen onderscheidt.”

De Turing Test is niet een goede benchmark van AI intelligentie van zichzelf

Dit is logisch, als zelfs de originele Turing Test is lang uit de gratie geraakt met de computer wetenschappers als een test van de machine-intelligentie. Critici zeggen dat het testen van het vermogen van de programmeurs te vinden conversatie hacks die truc mensen meer nog dan intelligentie.

Bijvoorbeeld, in 2014, nieuws uitgesproken, dat de Turing Test had doorgegeven door een chatbot. De programmeurs bedrogen rechters door hun bot identificeren zich als een 13-jarige oekraïense jongen genaamd Eugene Goostman. Dit is de perfecte cover voor de bot van de vele fouten en het onvermogen bepaalde vragen te beantwoorden. Als critici als informaticus Gary Marcus opgemerkt, “Wat Goostman de overwinning echt laat zien … is niet de komst van SkyNet of cyborg cultuur maar het gemak waarmee we anderen voor de gek kunnen houden.”

Maar dit wil niet zeggen dat de Turing Test is nutteloos. Het maken van computerprogramma ‘ s die kunnen chatten overtuigend is een vruchtbare uitdaging voor AI-onderzoekers die in aanmerking komen voor de mensheid. De test is ook nog steeds een fantastische gedachte-experiment dat ons kan helpen bij het verkennen van complexe vragen met betrekking tot ons begrip van intelligentie. We kunnen ook wijzigen naar een sterkere gerichtheid door het stellen van computers niet om gewoon te chatten, maar om het beantwoorden van vragen die vereisen dat er een genuanceerd en rijk begrip van de wereld. (Een voorbeeld is het stellen van een computer, “Wat zijn de meervoudsvormen van ‘platch’ en ‘snorp’?” Een mens zou waarschijnlijk antwoord “platches” en “snorps,” ondanks het feit dat deze woorden zijn onzin en kan niet gevonden worden in een woordenboek.)

Het is in dit kader dat de Minimale Turing Test is het beste gewaardeerd als een gedachte-experiment, niet van een benchmark voor AI vooruitgang. McCoy zegt wat verbaasde hem het meest over het onderzoek, was hoeveel creativiteit er was in de antwoorden. “Mensen kwamen met allerlei interessante shibboleths en woordspelingen,” zegt hij, met woorden als “bootylicious” “supercalifragilisticexpialidocious.” (Probeer spelling, die zonder Google.)

“Het vertelt je iets over de kloof tussen de mens en de slimme robots”, zegt McCoy, “dat de mensen die het nooit hebben gehad om na te denken over deze situatie voor kwam met veel slimme en grappige resultaten.” Het is iets, met andere woorden, dat een computer zou worstelen.