SpeakSee

Wat gezegd wordt, mag gezien worden

Een app die spraak omzet in geschreven tekst op een smartphone of ander scherm
1000
ambachten nodig
Ik wil helpen

Het verhaal

Klik hier voor de instructie video

Waar doven en slechthorenden zich in een-op-een situaties vaak nog wel kunnen redden, zijn groepsgesprekken heel lastig ‘af te lezen’. Het jonge Nederlandse bedrijf SpeakSee is druk bezig daar een oplossing voor te lanceren. SpeakSee bestaat uit een set draagbare microfoons en een app die spraak omzet in geschreven tekst op een smartphone of ander scherm. SpeakSee maakt gebruik van verschillende spraak-naar-tekst engines. Voor de Nederlandse taal kwam het jonge Amsterdamse bedrijf Contexta als beste uit de bus. Maar Contexta werkt nog niet zuiver genoeg. De engine moet verder getraind worden om natuurlijke groepsgesprekken, zoals vergaderingen, goed om te zetten. En daar gaan wij, alle T-Mobilers samen, bij helpen!

Hoe Yunis, SpeakSee en Contexta verbonden werden.

De crowdfunding video van SpeakSee

1000
ambachten nodig

DONEER JE STEM

Maak de tekstanalyse nog beter. Spreek in met je mobiele telefoon.

Updates

fase 3

Execute experiments

Hoe twee jonge startups en T-Mobile de handen ineenslaan om doven en slechthorenden beter te connecten

Het Probleem

In de volksmond heet het liplezen, maar een betere naam is spraakafzien. Spraakafzien wordt door doven en slechthorende mensen gebruikt om te begrijpen wat mensen zeggen die geen gebarentaal beheersen. Het is mengsel van liplezen en het aflezen van mimiek en lichaamstaal.

Spraakafzien is al een kunst op zich in gerichte een-op-een gesprekken. Wordt de situatie complexer, dan is spraakafzien al snel ondoenlijk. Colleges waarbij de spreker op grote afstand staat, natuurlijke gesprekken met meerdere deelnemers, verjaardagsfeestjes, vergaderingen – het zijn omstandigheden waaronder doven en slechthorenden noodgedwongen moeten afhaken. Een taaie dobber voor 466 miljoen mensen op deze aarde.

De oplossing

SpeakSee, mede-opgericht door Jari Hazelebach, zelf kind van dove ouders, gaat spraakherkenning inzetten om groepsgesprekken te ontsluiten. Deelnemers aan een groepsgesprek krijgen een – zeer fraai vormgegeven – draadloos microfoontje. Met een simpele clip haak je ‘m aan je bovenkleding. Ieder microfoontje heeft een eigen kleur en is in een wifi-netwerk (een dubbelrol voor de oplader van de microfoontjes) verbonden met de SpeakSee-app. Wat iemand zegt, wordt realtime naar tekst omgezet en verschijnt, in de kleur van de spreker, op het scherm van de dove of slechthorende participant. Voilà, gesprek ontsloten!

De uitdaging

Voor het omzetten van spraak naar tekst is SpeakSee afhankelijk van hiervoor bestemde engines. Het is een wereld van grote spelers, zoals marktleider Nuance, en Google. Binnen de Engelse taal schieten deze engines grotendeels raak. Van het Nederlands raken ze nog wel eens in de war. Daar komt bij dat SpeakSee de lat hoog heeft. Juist in complexe situaties (meerdere stemmen, achtergrondruis, spreektaal) moet het systeem feilloos werken.

Gelukkig bleek er een partner op eigen bodem: Contexta, een jong Amsterdam bedrijf met een innovatieve aanpak. Machine learning, tekst mining – Contexta zet juist in op de wat meer complexe interacties. Maar Contexta is nog niet feilloos in de beoogde context van SpeakSee. Er is extra training nodig: van ingesproken scripts tot opnames van vele vergaderuren. Voor deze uitdaging komt T-Mobile om de hoek kijken. Wij, alle medewerkers van T-Mobile samen, gaan Contexta de fijnere kneepjes leren.

Waarom wij dit belangrijk vinden

T-Mobile staat voor een verbonden wereld. SpeakSee verbindt een grote groep mensen die nu die verbinding missen. Dat alleen al is onze inspanning waard. Ook binnen T-Mobile werken dove en slechthorende mensen, net als binnen ieder groot bedrijf in Nederland.

De toepassingen van SpeakSee en Contexta zijn bovendien breder inzetbaar. Het kan voor organisaties bijzonder handig zijn als vergaderingen of andere gesprekken automatisch op papier staan. De software van Contexta biedt bovendien de mogelijkheid om binnen gesprekken extra informatie te destilleren, over bepaalde soorten inhoud of sentimenten.

De technologie in dit project gaat op voorziene en nog onvoorziene wijze impact hebben op de manier waarop we met elkaar verbonden zijn. Daar willen we graag over meedenken en bij helpen. Dit project is een perfect voorbeeld wat laat zien dat we iedereen kunnen verbinden met de mogelijkheden van nu.

Team (7)

Jari
Jari Chief SpeakSee
Marcel
Marcel Chief techniek SpeakSee
Marc
Marc Chief Contexta
Tim
Tim Chief Techniek Contexta
Herald
Herald Ambachtelijke business bouwer
Yunis
Yunis De aanzwengelaar van onze missie
Heel T-Mobile
Heel T-Mobile Helpt mee
Heb jij een baanbrekend idee? Samen zetten we jouw start-up in de volgende versnelling!
Meld start-up aan