10.09.2019
Mobile

Een jaar StorySign: 5 boeken en een film verder!

By: Onno Rompa

BlogMobile

Lezen is leuk en ongelofelijk belangrijk voor de ontwikkeling van ieder kind. Voor dove en slechthorende kinderen is leren lezen een extra uitdaging. Eind vorig jaar heeft Huawei de StorySign app gelanceerd. StorySign is een innovatieve en vooruitstrevende app die dove of slechthorende kinderen helpt bij het leren lezen. En dat zijn er nogal wat. Wereldwijd zijn er namelijk 32 miljoen dove kinderen. De app StorySign zet tekst door middel van Artificial Intelligence om in gebarentaal. Het project is echt een voorbeeld van een product of technologie t wat mensen daadwerkelijk kan helpen in hun dagelijkse leven.

StorySign

Het concept is simpel, maar de uitwerking is uitermate moeilijk en complex. Zeker als je je realiseert dat gebarentaal één van de meest ingewikkelde vormen van taal is. Daar komt dan ook nog eens bij dat gebarentaal voor 70 procent bestaat uit je mimiek en gezichtsuitdrukking. Het gaat hier dus om honderden, zo niet duizenden, details die cruciaal zijn. Het duurt dan ook weken, soms zelfs maanden om een ogenschijnlijk simpel kinderboekje te vertalen in gebarentaal welke vervolgens door de avatar Star middels de StorySign app kan worden uitgebeeld. Dankzij deze app kunnen ouders hun dove of slechthorende kinderen gaan voorlezen, wat de basis vormt om überhaupt te leren lezen. Het opent letterlijk een wereld van boeken!

De app helpt dus dove kinderen met lezen door de tekst uit boeken te vertalen naar gebarentaal. Door de kracht van AI en Augmented Reality brengt StorySign deze boeken tot leven in de vorm van een avatar met als naam Star.

De film

Het project StorySign gaat verder en gisteren heeft Huawei samen met ambassadeur Kim Feenstra de eerste Nederlandse film over StorySign gelanceerd in het Eye Filmmuseum. De hoofdrolspelers Bettie (5), die sinds haar geboorte doof is, en Jim Bakkum leggen in deze korte film uit waarom dove en slechthorende kinderen meer moeite hebben met lezen.

In deze korte film, geregisseerd door Chris Overton, staat het belang en vooral plezier van lezen centraal. Leren lezen is voor de ontwikkeling van ieder kind erg belangrijk, maar weinig mensen weten dat dit voor dove en slechthorende kinderen een grote uitdaging is. In de film met als hoofdrolspelers Bettie, Douwe en acteur, vader en kinderboekenschrijver Jim Bakkum laat zien hoe de StorySign-app kan helpen. Door de kracht van Huawei’s kunstmatige intelligentie brengt de app populaire kinderboeken tot leven in gebarentaal en kan ieder kind genieten van de mooiste verhalen.

Twee nieuwe kinderboeken

Naast de bestaande kinderboeken ‘Waar is Dribbel’, ‘Dappere Max’ en ‘Dribbel naar de bieb’ worden nu de boeken ‘Dribbel naar het museum’ (1-3 jaar) en ‘Er zit een draak in je boek’ (4-6 jaar) toegevoegd aan de app. De populaire boeken komen tot leven door de kindvriendelijke avatar Star. Star is ontwikkeld in samenwerking met animatiestudio Aardman (makers van o.a. Wallace & Gromit) en deskundigen uit de dovengemeenschap. Star vertaalt de woorden en zinnen in realtime naar gebarentaal, waardoor een echte (mee)leeservaring ontstaat.

StorySign is gratis te downloaden in de Google Play Store en de Huawei AppGallery. Voor meer informatie, ga naar http://www.storysign.com.

Share this post