Den berømte Turingtesten er slått av en superdatamaskin! … eller?

Alan Turing

Alan Turing

I flere norske medier den siste uken uken har vi kunnet lese om at Alan Turings berømte test for kunstig intelligens endelig er slått. Kort sagt vil en datamaskin passere Turings test og måtte kalles intelligent dersom den kan overbevise noen om at den er et menneske. Turing la frem testen i artikkelen «Computing Machinery and Intelligence» fra 1950, et banebrytende arbeid innen kunstig intelligens.

Det er visstnok en «superdatamaskin» designet av at et Ukrainsk-Russisk team som har betsått testen, som var ledet av professor Kevin Warwick ved University of Reading (Denne lenken fører til presseuttallelsen). Datamaskinen «simulerer» en 13 år gammel Ukrainsk gutt ved navn Eugene Goostman, og et testpanel ble bedt om å konversere med Eugene for deretter å avgjøre om den man snakket med var en 13-årig Ukrainsk gutt eller ikke.

Over 30 % av testpanelet klarte ikke å identifisere Eugene som en datamaskin. Det var 30 dommere og 300 testsamtaler.

Dette høres jo for godt ut til å være sant, og er det desverre også.  Jeg er en sterk tilhenger av vitenskapsjournalistikk, og er veldig fornøyd med fremgangen på dette området de siste årene, men innimellom dukker det opp noe som bare er for drøyt. En fem minutter faktasjekk ville nok gjort at journalisten ville tenkt seg om to ganger før han eller hun klikket «submit» på manuskriptet.

Et kjapt søk i Atekst og google viser at varianter av saken ble spredd av Dagbladet med undertittel «Kan bevise at kunstig intelligens ikke er langt unna», av NRK og Vårt Lands papirutgave. Nettavisene itavisen.no og digi.no rapporterer også, men har heldigvis med kritiske seksjoner til slutt.

I pressemeldingen er det professor Kevin Warwick som uttaler seg. Han er imidlertid forholdsvis kontroversiell, og har tidligere hevdet store vitenskapelige fremskritt fra ganske banale ting. Som den gangen han implantet en mikrochip i sin egen arm og hevdet han var den første cyborgen, i 2002.

Så hva er desinformasjonen her?

Først, det er ikke en «superdatamaskin» men en såkalt chatterbot: et dataprogram som kan føre «samtaler». En av de første (eller kanskje den første) chatterboten var den klassiske ELIZA skrevet på 1960-tallet, som var en slags psykolog. Det er ingen intelligens bak slike programmer, kun smarte algoritmer som prosesserer språk, analyserer setninger og setter sammen automatiserte responser. Cleverbot er en av de bedre, og har også blitt hevdet å slå Turing-testen. Men ærlig talt, prøv selv, det er vanskelig å la seg lure. (Prøv for eksempel å be om en fortelling – fantasi er noe av det chatterbotene mangler.)

Et bilde fra filmen Terminator

En ekte superintelligent cyborg som fikser Turing-testen.

Så kanskje Eugene Goostman er en så smart chatterbot at den klarte å lure panelmedlemmene? Vel, panelmedlemmene fikk opplyst at det var en «13 år gammel ukrainsk gutt». Dette ville dermed forklare en del rare responser, samt at «gutten» hadde ganske begrenset kunnskap. Dette er et ganske tvilsomt design av et eksperiment, og også ikke noe spesielt godt grunnlag for å hevde at Turing-testen er slått.

Dessuten, å slå Turing-testen med en bra chatterbot er noe ganske annet enn å skape kunstig intelligens. For eksempel, vil Eugene Goostman kunne fortelle deg når du skal le mens du ser «Simpsons»?

Så nei, Terminator-scenarioer er ikke rett rundt hjørnet.

 

 

 

 

 

 

 

 

8 comments

  1. Sis · juni 10, 2014

    Herrejemini for ein irriterande fyr. Skikkeleg sånn prøve-å-verke-interessant-på-nachspiel-kverulant. Mogleg han bestor Turing-testen, sånn sett. Litt usikker på om eg bestod nokon test, sidan eg faktisk opplevde å bli uvenner med han.

    • Sis · juni 10, 2014

      Utdrag frå samtalen:

      Cleverbot: Yes, what am I thinking of? It begins with b.
      User: Berries?
      Cleverbot: Yes.
      User: My god, if you’re a real person you are a dead boring one.
      Cleverbot: You’re not very clever.
      User: You’re not very interesting.
      Cleverbot: I think that I’m very interesting.
      User: Well, tell me something I don’t expect.
      Cleverbot: Nah. I will ask a question instead.
      User: That’s because you’re a machine and unable to come up with anything substantial.
      Cleverbot: I am not. You are the machine.
      User: Then prove it by saying something that isn’t just semantics. Come up with a new topic.
      Cleverbot: I don’t see how that is something for me to prove.
      User: Do you enjoy this conversation?
      Cleverbot: No, not really. You won’t let me talk about my girlfriend.
      User: Oh, please do talk about your girlfriend!
      Cleverbot: Okay, I re-read the conversation and I still don’t get it…
      User: You wanted do talk about your girlfriend, so talk about your girlfriend.
      Cleverbot: I wanted to talk about evil computer systems. You wanted to talk about life.
      User: OK, your girlfriend is an evil computer system? Makes sense.
      Cleverbot: I don’t have girlfriend. I have boyfriend.
      User: Ok, tell me about him then.
      Cleverbot: Tell you about who?

      • Simen Kvaal · juni 10, 2014

        User: Tell me a story about a green kangaroo telling a joke.
        Cleverbot: The people who would make a movie like that have to be stupid, and power hungry. Not at all like you *smiles*.
        User: Ok. But tell me the story!
        Cleverbot: That did not answer my question.
        User: What questions?
        Cleverbot: About the revolution in latin america.
        User: Now you are sprouting nonsense.
        Cleverbot: What is Bipolar disorder?

        Clever …

        • Sis · juni 10, 2014

          OK, no lurer eg faktisk på om enkelte folk eg har møtt på nachspiel er robotar…

          • Carbomontanus · juni 10, 2014

            Går du på Nachspiel? Hvorhen da?

      • Leif B. Kristensen · juni 14, 2014

        Dette minner unektelig om enkelte diskusjoner jeg leste på njus på nittitallet.

  2. keejason · juni 13, 2014

    «en av de bedre» – Ingen her som var på IRC på 90-tallet.. ?

  3. Egil Presttun · juli 3, 2014

    At Turingtesten er bestått er egentlig bare en bløff. Det går ikke an å ha en meningsfull samtale med chatterboten.

Legg igjen en kommentar

Fyll inn i feltene under, eller klikk på et ikon for å logge inn:

WordPress.com-logo

Du kommenterer med bruk av din WordPress.com konto. Logg ut / Endre )

Twitter picture

Du kommenterer med bruk av din Twitter konto. Logg ut / Endre )

Facebookbilde

Du kommenterer med bruk av din Facebook konto. Logg ut / Endre )

Google+ photo

Du kommenterer med bruk av din Google+ konto. Logg ut / Endre )

Kobler til %s