Een nieuw computerprogramma dat schetsen en tekeningen kan herkennen hoe ze ook zijn getekend: of het nu konijnen zijn of donuts. Het is tevens het eerste computerprogramma dat volledig begrijpt wat een tekening moet voorstellen, wat ook wel ‘semantic understandig’ wordt genoemd. Het onderzoek in het programma is afgelopen maand gepresenteerd op SIGGRAPH, de grootste conferentie in de wereld als het gaat om computergraphics. In bijgevoegde video is meer te zien over dit programma.
Computers zijn al erg goed in het herkennen van tekeningen, zolang ze maar iets weghebben van de werkelijkheid. Maar abstracte tekeningen zijn lastiger te herkennen. Wanneer je een konijn wilt tekenen, komt er meestal een cartoonachtige variant uit met grote oren en een opvallend grote tand. Bugs Bunny is er niets bij. Een mens heeft geen problemen om hier een konijn in te herkennen, maar computers hebben dit wel.
Het programma is gemaakt op basis van een grote database vol met schetsen en tekeningen. Om deze database te maken, hebben de onderzoekers een lijst gemaakt met alledaagse objecten waar mensen gemakkelijk een tekening van zouden kunnen maken. Uiteindelijk kwamen hier 250 categorieën uit. Vervolgens zijn er via crowdsourcing in totaal 20.000 sketches gevonden die door het programma meteen werden herkend. Momenteel herkent het programma tekeningen met 56% zekerheid. Sommige tekeningen worden herkend met 73% zekerheid. De gat tussen het menselijk herkennen en die van de computer is hierdoor steeds kleiner geworden.