Das Projekt „CapisciAMe“ – eine Trainings- und Spracherkennungs-App für Menschen mit Dysarthrie (1) – gewann den internationalen Wettbewerb #MaketoCare bei der europäischen Ausgabe der Maker Faire 2020 gleichberechtigt mit der #Intelligenter Stuhl von Égalité. Wir brauchen jetzt Spender von „besonderen Stimmen“, um bei der Entwicklung zu helfen.
virtuelle Assistenten Die beliebtesten - Google Assistant, Amazon Alexa, Apple Siri - bieten nicht nur der allgemeinen Bevölkerung neuen "Komfort", sondern stellen bereits eine außergewöhnliche Innovation für Menschen mit schweren motorischen Behinderungen dar. Die Sprachunterstützung ermöglicht es Ihnen jetzt, dank der Entwicklung der Betriebssysteme von immer mehr mit der externen Umgebung zu interagieren Smartphone und Hausautomation.
Die Herausforderung Jetzt geht es um die Zugänglichkeit dieser Werkzeuge für diejenigen, die aufgrund von Krankheiten und neuromotorischen Störungen Schwierigkeiten im Stimmausdruck haben. Da aktuelle automatische Spracherkennungstechnologien (Automatische Spracherkennung, ASR) sind nicht in der Lage, „besondere Stimmen“ zu erkennen. Und die IT-Giganten waren, obwohl sie über galaktische Ressourcen verfügen, noch nicht daran interessiert, einen Weg zu finden, diese Herausforderung anzugehen.
#Verstehe mich ist die kostenlose App, erhältlich im Google Play Store, entwickelt von seinem Freund Davide Mulfari. Verantwortlicher Informatiker der Einheit Assistive Technologie für besondere Bedürfnisse an der Universität von Messina, Ph. D. an der Universität von Pisa, erlebt Davide aus erster Hand die Erfahrung von Dysarthrie und motorischer Behinderung. Und er widmete seine Schöner Verstand zur Entwicklung eines Systems sprecherabhängig in der Lage, eine Reihe von Sprachbefehlen zu erkennen, die von Menschen mit Dysarthrie gegeben werden.
Die App Es kann der Person mit Dysarthrie ermöglichen, sie selbst leicht auszusprechen und aufzuzeichnen Smartphone die Wörter, die nützlich sind, um Ihre Geräte zu aktivieren. Und es ist mit integriert Open-Source-Framework für Hausautomation offenHab, sowie mit Google Assistant und anderen Plattformen. Jeder Nutzer kann seine spezielle Stimme mehrfach aufzeichnen – mit der einzigen Empfehlung, in einer möglichst von Hintergrundgeräuschen freien Umgebung zu sprechen – damit CapisciAMe sie erkennen und mit einem System von verarbeiten kann Artificial Intelligence (AI).
Die Instrumente der automatischen Spracherkennung - im Umgang mit "besonderen Stimmen", also Sprache mit Dysarthrie - stoßen auf das Problem der knappen Verfügbarkeit spezifischer Sprachbeiträge im Vergleich zu der enormen Anzahl von Erscheinungsformen. Angesichts der Vielfalt der körperlichen Probleme, die potenzielle Sprecher plagen, ergänzen sie ein Kaleidoskop von Klangfarben, Sprachen, Akzenten und Kadenzen.
Verstehe mich – durch ein angewendetes Convolutional Neural Network-Modell TensorFlow, einem Open-Source-Framework di Maschinelles Lernen von Google - Sprachbeiträge und überarbeiten Datei Audiodateien, die sie enthalten, die über das Internet über seine App gesammelt wurden. Die Aufnahmen, nach erneuter Bearbeitung, bereichern die Datenbank von Stimmen mit Dysarthrie, in italienischer Sprache zu beginnen.
Il Datenbank von CapisciAMe wird dann dank des Beitrags jedes einzelnen aktualisiert und im PlayStore neu geladen. Also das alles Smartphone wo es installiert wurde, kann aktualisiert werden. Dieselben Benutzer, die daran mitgearbeitet haben, indem sie ihre eigenen Stimmen und Wörter hinzugefügt haben, können somit von ihrer Erkennung profitieren, ohne dass eine weitere Verarbeitung erforderlich ist.
Wirksamkeit und Nützlichkeit der Spracherkennung wurden zunächst mit den 13 Wörtern experimentiert, die für die Steuerung von Haushaltsgeräten, die Steuerung einfacher Roboter und die Interaktion mit einigen ausgewählt wurden Videospiele. Unter Verwendung sehr kostengünstiger Geräte, wie z. B. i Werkzeug di offene Nabe und Registerkarten Himbeere. Ebenso können Sie Befehle mit verwenden IFTTT-Protokoll.
Die Entwicklungen kurzfristig behoben:
die Entwicklung des Projekts wird das Einzugsgebiet deutlich vergrößern und die Erkennung auf die natürliche Sprache ausdehnen. Mit dem Ziel, die produzierenden Unternehmen zu stimulieren virtueller Assistent um die Einbindung derer zu fördern, die diese Geräte tatsächlich am meisten benötigen, ohne sie zu zwingen, die enormen Kosten für dedizierte Tools in Kauf zu nehmen. (2)
Alle diese die eine „besondere Stimme“ haben und Schwierigkeiten bei der automatischen Spracherkennung mit Dysarthrie haben, werden von Davide und uns allen herzlich eingeladen, zur Entwicklung von CapisciAMe beizutragen.
Genug kostenlos herunterladen die App auf Google Play und nehmen Sie die vorgeschlagenen Wörter mit Ihrer eigenen Stimme auf. Der Beitrag jedes Einzelnen wird dazu dienen, das Training dieses neuronalen Netzes zu verbessern, um das Leben aller zu erleichtern.
Thanks!
Dario Dongo
Note
(1) Dysarthrie ist eine neuromotorische Sprachstörung, die häufig mit körperlichen Behinderungen, einschließlich schwerer, verbunden ist, die aus infantiler Zerebralparese, Parkinson, ALS, Multipler Sklerose, Schlaganfall, etc.
(2) Davide Mulfari hat auf jeden Fall die Möglichkeit der Entwicklung vorgesehen Software. und / oder Hardware dedizierte, wie z. B. echte Schnittstellen für die Anwendungen, an denen Sie arbeiten. Indem man dem Geist die Treue hält gemeinnützig und originelle Ziele
Dario Dongo, Rechtsanwalt und Journalist, PhD in internationalem Lebensmittelrecht, Gründer von WIISE (FARE – GIFT – Food Times) und Égalité.