Story Sign

StorySign – HUAWEI KI App – neues Leseerlebnis für Gehörlose

HUAWEI nutzt Künstliche Intelligenz, um die gemeinsame Märchenstunde für gehörlose Kinder und Eltern nachhaltig zu verbessern. Weltweit gibt es 32 Millionen gehörlose Kinder, für die besonders das gemeinsame Lesen mit den Eltern eine große Herausforderung ist, da viele Eltern hörend sind und die Gebärdensprache nicht sprechen. Zudem gibt es grundlegende Unterschiede zu der geschriebenen und gesprochenen Sprache. Um diese Barriere zu überwinden, brachte HUAWEI bei der Entwicklung von StorySign seine Expertise im Bereich der Künstlichen Intelligenz (KI) ein. Gemeinsam mit starken Partnern aus der Gehörlosengemeinschaft hat das Technologieunternehmen eine einzigartige Leseerfahrung erschaffen, die gehörlosen Kinder den Zugang zu Geschichten in Büchern ermöglicht und sie mit ihren Eltern auf ganz neue Weise zusammenbringt.

StorySign - HUAWEI KI App - neues Leseerlebnis für Gehörlose 1

Den Eltern beim Vorlesen einer Gute-Nacht-Geschichte zuhören oder gemeinsam mit dem Lehrer in der Schule Sätze wiederholen – dies gehört zu den wichtigen Meilensteinen, wenn es um das Lesen lernen geht. Gehörlosen Kindern bleibt dies verwehrt, denn sie können Gesprochenes meist nicht mit dem geschriebenen Wort in Verbindung bringen: während bei der Lautsprache die Wörter nacheinander zu Sätzen geformt werden, können in der Gebärdensprache mehrere Informationen gleichzeitig in einem Gebärdenzeichen ausgedrückt werden. Darüber hinaus kann ein schriftlicher Text nicht eins zu eins in Gebärdensprache übersetzt werden. Das bedeutet, dass gehörlose Kinder in einer ganz eigenen Sprache lesen lernen. Hier setzt die StorySign-App an: in Verbindung mit einem Smartphone und einem Buch bietet sie das beste Erlebnis für Eltern und ihre Kinder.

Mithilfe der Künstliche Intelligenz von HUAWEI, die Funktionen wie Bild- und optische Zeichenerkennung bietet, wird ein optimales Leseerlebnis gefördert. Die Bilderkennung erkennt die Wörter während die optische Zeichenerkennung für eine größere Genauigkeit sorgt. Dabei kann das Smartphone in einem Winkel von bis zu 45 Grad zum Buch gehalten werden. Auf dem Bildschirm des Smartphones wird dann die Interpretation des Textes in Gebärdensprache angezeigt – ein echter mobiler Dolmetscher für Gehörlose in der Hosentasche. Die KI-Performance erhöht dabei gleichzeitig die Geschwindigkeit, mit der Seiten aus dem Buch in die App geladen werden können, sodass Kinder nicht zu lange warten müssen, um herauszufinden, wie die Geschichte weitergeht.

„Wir sind von der Leistung, die Künstliche Intelligenz bietet, überzeugt und denken, dass Technologie einen positiven Beitrag in der Welt leisten kann“, sagt Andrew Garrihy, HUAWEI Chief Marketing Officer, Consumer Business, Western Europe.

„Für die StorySign-App setzt HUAWEI Künstliche Intelligenz und innovative Technologien sinnvoll ein“, sagt Mark Wheatley, Geschäftsführer European Union of the Deaf (EUD). „Wir sind sehr zuversichtlich, dass wir mit der App einen signifikanten Mehrwert in der Gehörlosengemeinschaft schaffen und Kindern helfen können, Bücher ebenso wie hörende Kinder zu lesen. Wir hoffen auch, dass StorySign eine breite Debatte über die Gleichstellung gehörloser Menschen in allen Aspekten ihres Lebens auslösen wird.“

StorySign wurde in Zusammenarbeit von HUAWEI mit Experten und Wohltätigkeitsorganisationen aus der Gehörlosengemeinschaft, dem Verlag Penguin und Aardman zusammen entwickelt, um gehörlosen Kindern und ihren Familien ein nützliches Lesewerkzeug bieten. 

StorySign - HUAWEI KI App - neues Leseerlebnis für Gehörlose 2

Die App steht ab dem 3. Dezember 2018 kostenlos in der HUAWEI App Gallery und im Google Play Store in Deutschland zum Download zur Verfügung. Das erste mit StorySign lesbare Buch ist zum Marktstart das beliebte Kinderbuch „Peter Hase – Ein Guckloch-Abenteuer“. Dank StorySigns freundlichem Avatar „Star“ und der leistungsstarken KI von HUAWEI übersetzt die App das Buch Seite für Seite in perfekte Gebärdensprache und bietet so ein nahtloses Nutzererlebnis. Die Unterstützung für weitere Bücher ist geplant.

Hier könnte Ihre Werbung stehen! :)
StorySign - HUAWEI KI App - neues Leseerlebnis für Gehörlose 3

Die StorySign-App wird gleichzeitig mit einem neuen Kurzfilm von Oscar-Preisträger Chris Overton und der 7-jährigen Schauspielerin Maisie Sly vorgestellt, die bereits zusammen am Oscar-prämierten Kurzfilm „The Silent Child“ gearbeitet haben. Der Kurzfilm sowie weitere Informationen stehen auf der offiziellen Homepage zur Verfügung – Spenden können ab sofort ebenfalls darüber getätigt werden. Die Einnahmen werden Projekten zur Förderung der Alphabetisierung gehörloser Kinder in ganz Europa zu Gute kommen.

https://youtu.be/qQj42Gs1KcM

Hier geht es zur App im Play Store: StorySign

Ich finde die Idee wahnsinnig gelungen und hoffe, dass man so vielen gehörlosen Menschen ein wenig helfen kann. Was gibt es schöneres, als seinen Kindern abends vor dem Schlafengehen noch ein Buch vorzulesen. Natürlich ersetzt die App das Erlebnis des Vorlesens nicht, aber sie unterstützt sie.

Wenn man noch ein Stück weiterdenkt, könnten unsere täglichen Wegbegleiter, die Smartphones, uns nicht nur beim Vorlesen helfen. Ich stelle mir gerade vor, wie ich im Videochat mit einem Gehörlosen durch die KI unterstützt werde und diese das Gespräch in Echtzeit in dessen Video in einem kleinen Fenster in Gebärdensprache übersetzt. 

Was haltet ihr von dieser Entwicklung? 

Hier könnte Ihre Werbung stehen! :)

Schreibe einen Kommentar

Die folgenden im Rahmen der DSGVO notwendigen Bedingungen müssen gelesen und akzeptiert werden:
Durch Abschicken des Formulares wird dein Name, E-Mail-Adresse und eingegebene Text in der Datenbank gespeichert. Für weitere Informationen wirf bitte einen Blick in die Datenschutzerklärung.