211service.com
Het brein achter Watson
In februari, de spelshow Gevaar! zette zijn twee meest succesvolle deelnemers op tegen een IBM-computersysteem genaamd Watson, dat hen degelijk versloeg. Verschillende van de strategieën die Watson gebruikte, waren gebaseerd op onderzoek van Boris Katz, een hoofdonderzoeker in het Computer Science and Artificial Intelligence Laboratory.
In het begin van de jaren tachtig begon Katz met de ontwikkeling van een systeem voor het beantwoorden van vragen in natuurlijke taal, START genaamd, dat in 1993 online ging. Maar het automatisch beantwoorden van vragen maakte uiteindelijk plaats voor zoekmachines zoals Yahoo en Google, die minder precieze antwoorden gaven maar veel gemakkelijker te implementeren.
In 2003 lanceerde de National Security Agency echter een programma voor de ontwikkeling van een systeem voor het beantwoorden van vragen in natuurlijke taal, dat vooraanstaande onderzoekers in het veld samenbracht, waaronder Katz en een IBM-groep.
Halverwege dit programma was vrijwel alles wat in Watson wordt gebruikt al uitgevonden, zegt Katz. Een ontwerpprincipe dat Watson van START leende, was Katz' notie van ternaire uitdrukkingen. Katz illustreert het idee met een clausule uit Tom Sawyer : Tom bekeek twee grote naalden die in de revers van zijn jasje waren gestoken. START vertegenwoordigt de semantische beweringen van de clausule als een reeks relaties van drie termen, elk bestaande uit een onderwerp, een relatie (zoals een werkwoord of voorzetsel) en een object of eigenschap: Tom onderzocht de naalden, Tom heeft een jasje, het jasje heeft revers, de naalden zijn groot, de naalden zijn gepaard. Veel natuurlijke-taalverwerkingssystemen ontleden zinnen in bomen van grammaticale relaties, vergelijkbaar met zinsdiagrammen. Maar de ternaire uitdrukkingen, legt Katz uit, zijn veel gemakkelijker te begrijpen, op te slaan en te matchen als je vragen wilt stellen.
De IBM-onderzoekers, zegt Katz, gebruikten verschillende technieken voor het ophalen van informatie, waaronder eenvoudig zoeken op trefwoorden en START's parsering en analyse. Maar ze voerden ze een orde van grootte beter uit dan alle anderen, zegt hij. Voor Katz was het belangrijkste aspect van Watsons ontwerp het vermogen om de relatieve verdiensten te evalueren van de duizenden kandidaat-antwoorden die door die technieken werden geleverd.
Hoewel Watson de wedstrijd won, zegt Katz, tonen de incidentele blunders aan dat het niet in staat is tot zoiets als menselijke cognitie. Gegeven een vraag in de categorie Amerikaanse steden, bijvoorbeeld, antwoordde Watson, Toronto. Een knappe prestatie, vindt Katz, maar het is nog niet de heilige graal.