FYI.

This story is over 5 years old.

Tech

Vergeet Turing, de Lovelace Test is een betere indicator van intelligentie

Om te slagen voor de Lovelace Test moet het systeem zelf iets origineels creëren, zonder daarvoor geprogrammeerd te zijn.
Afbeelding: Shutterstock

In juni slaagde chatbot Eugene Goostman zogenaamd voor de beroemde Turingtest, een meting voor computerintelligentie, ontworpen door Alan Turing. De chatbot deed zich voor als een Oekraïense tiener met een middelmatige beheersing van de Engelse taal. De hele wereld was in opschudding door de prestatie van Eugene, tot iedereen zich realiseerde dat de robot nog niets te maken had met het niveau van menselijke intelligentie en eigenlijk best dom was.

Er is hier duidelijk iets mis. Als de Turing Test voor de gek gehouden kan worden door simpele trucjes, wordt het dan niet tijd voor een nieuwe standaard? Misschien moeten we overstappen op de Lovelace Test.

Advertentie

"Ik ben een grote fan van Turing, maar zijn test voldoet helaas niet," vertelt Selmer Bringsjord aan me in een interview. Hij is één van de ontwerpers van de rigoureuzere kunstmatige-intelligentietest.

De aard van de Turing Test is dat een menselijke gesprekspartner tegenover een computerprogramma wordt gezet. De computer moet de persoon doen laten geloven dat het een mens is. De programmeur hoeft dus alleen een programma te maken dat een gesprekspartner kan laten denken dat het intelligent is. In het geval van Eugene, waren de jonge leeftijd en de buitenlandse nationaliteit onderdeel van de truc.

Chatbots worden dus ontworpen om de Turing Test op gespeelde taalkennis door te komen, in plaats van het laten zien dat ze een daadwerkelijke kunstmatige intelligentie hebben. De chatbot is gemaakt op het overtuigend ordenen van woorden en zinsdelen, zonder echt te weten wat die woorden betekenen.

Volgens Lovelace kan de intelligentie van een computer pas vergeken worden met menselijke intelligentie, als het systeem iets kan creeëren, iets waar het niet voor ontworpen is.

De Lovelace Test is daarentegen ontworpen als een rigoureuzere manier om ware machinecognitie te testen. De test is begin deze eeuw ontworpen door Bringsjord en een team computerwetenschappers waaronder David Ferrucci, die later de Watsoncomputer voor IBM ontwikkelde, waarmee hij de wedstrijd Jeopardy won. Ze vernoemden de test naar Ada Lovelace, de grondlegger van de computerwetenschap.

Advertentie

De Lovelace Test neemt het potentieel weg voor manipulatie - door het programma zelf of door de ontwerpers - en toetst op ware autonome intelligentie – menselijke creativiteit en bewustzijn – in plaats van op het vermogen om te manipuleren door middel van taalkunde.

Een kunstmatig intelligent systeem komt alleen door de Lovelace Test als het een 'programma' kan genereren waar het systeem niet voor ontworpen is. Het product van dat programma – een idee, een roman, een muziekstuk, of wat dan ook – mag niet voortkomen uit de hardware, het moet een resultaat zijn van de processen die het systeem kan genereren. En nu komt het: De test is pas volbracht als de ontwerpers van het systeem niet uit kunnen leggen hoe hun originele code tot het nieuwe programma heeft geleid.

Kortom, om de Lovelace Test door te komen moet de computer iets origineels creëren, zonder hulp van anderen.

In 1843 schreef wiskundige Ada Lovelace dat computers nooit zo intelligent als mensen zouden kunnen zijn, omdat ze alleen kunnen doen waarvoor wij ze voor programmeren. Tot een computer een idee voort kan brengen, zonder dat dit vooraf ingeprogrammeerd is, kunnen ze niet als intelligent beschouwd worden, in ieder geval niet op dezelfde manier zoals mensen intelligent beschouwd worden.

"We weten allemaal dat de ontwerpers precies weten wat ze van hun systeem kunnen verwachten," zegt Bringsjord. "Er is misschien een klein verassingselement, maar in essentie weten ingenieurs precies wat er zal komen, het is een mechanisch gebeuren."

Advertentie

Met de huidige stand van zaken is het moeilijk om in te beelden dat een computer ooit de Lovelace Test zal halen. Tot dusver is de grootste prestatie van een lerend systeem het Artificial Neural Network van Google, dat zichzelf leerde om een kat te herkennen. Dat is een indrukwekkend gegeven, maar de overwinning is lichtjaren verwijderd van het soort creatieve intelligentie dat vergelijkbaar is met dat van mensen.

Maar vanuit Bringjords perspectief is het idee dat de Lovelace Test misschien wel nooit gehaald wordt, precies waar het om gaat.

"Als je echt denkt dat vrije wil van de meest zelf-deterministische, autonome aard een vereiste is voor intelligentie, gaat het heel moeilijk worden om je voor te stellen dat computers dat ooit zullen bereiken," vertelt Bringsjord me.

Zelfs het meest geavanceerde zelf-lerende neurale netwerk kan alleen taken uitvoeren die in eerste instantie zo geprogrammeerd zijn, en dus eerst gemathematiseerd en in een code gevat zijn. Tot dusver kunnen menselijke functies zoals creativiteit, empathie en wederzijds begrip – onderdelen van sociale cognitieniet gevat worden in wiskunde of codes.

"De eerste stappen van machine-evolutie brengen kunstmatig intelligente systemen dichter bij ons niveau, ook voor de mensen die in Singularity geloven. We zullen moeten ontdekken hoe we de nieuwe ontwikkelingen vorm kunnen geven," legt Bringsjord uit.

"Het lukt ons maar niet om de creativiteit en culturele subjectiviteit van bijvoorbeeld een krantenartikel of een roman mathematisch te voorspellen – het is heel moeilijk te doorgronden," zegt hij.

Ondanks dat Bringsjord vastberaden is in zijn geloof dat kunstmatige intelligentie nooit dat van mensen zal evenaren, is hij optimistisch over lerende systemen die zich met andere dingen bezig houden dan een compleet bewustzijn hebben.

"Ik ben heel optimistisch over wat computers, die misschien tekort schieten wat betreft menselijke intelligentie, met de kracht van menselijke bouwkunde kunnen bereiken. Binnen een bepaald bereik zijn de mogelijkheden eindeloos," zegt hij.

Met andere woorden, misschien zouden we wat meer moeten focussen op praktische toepassingen van beperkte kunstmatige intelligentie, zoals zelfrijdende auto's, in plaats van het fantasierijke streven dat een computer zou kunnen denken, voelen en creëren, zoals wij dat doen.

Meer over bijvoorbeeld autonome robots? Op vrijdag 25 september vindt Discovery Festival plaats, een wetenschaps-, kunst-, muziek- en technologiefestival, met als thema Autonomie. Kijk hier voor kaartjes en hier voor het programma.