Spreekvaardigheidstraining met behulp van ASH (Helmer Strik, Radboud Universiteit Nijmegen)
Upcoming SlideShare
Loading in...5
×
 

Spreekvaardigheidstraining met behulp van ASH (Helmer Strik, Radboud Universiteit Nijmegen)

on

  • 1,054 views

 

Statistics

Views

Total Views
1,054
Views on SlideShare
1,053
Embed Views
1

Actions

Likes
0
Downloads
0
Comments
0

1 Embed 1

http://www.kennispodium.org 1

Accessibility

Categories

Upload Details

Uploaded via as Adobe PDF

Usage Rights

© All Rights Reserved

Report content

Flagged as inappropriate Flag as inappropriate
Flag as inappropriate

Select your reason for flagging this presentation as inappropriate.

Cancel
  • Full Name Full Name Comment goes here.
    Are you sure you want to
    Your message goes here
    Processing…
Post Comment
Edit your comment

Spreekvaardigheidstraining met behulp van ASH (Helmer Strik, Radboud Universiteit Nijmegen) Spreekvaardigheidstraining met behulp van ASH (Helmer Strik, Radboud Universiteit Nijmegen) Presentation Transcript

  • Spreekvaardigheidstraining met behulp vanAutomatische Spraak-Herkenning (ASH)Helmer StrikAfdeling TaalwetenschapCentre for Language and Speech Technology (CLST)Radboud Universiteit Nijmegen Radboud University Nijmegen
  • Overview Introductie ASH: automatische spraakherkenning ASH & CALL (computer assisted language learning) ASH & spreekvaardigheid Projecten Conclusies IvTI, Rotterdam, 20-11-2008 2 Radboud University Nijmegen
  • IntroductieStudenten die 1-op-1 instructie krijgen presteren even goed als de top 2% van de studenten die traditionele klassikale instructie krijgen [Bloom 1984]Een privé docent voor iedere leerling is niet haalbaar ² computertutorCALL: computer assisted language learning Toenemende belangstelling Veel tekst-gebaseerde systemen Hoe zit het met spraak? IvTI, Rotterdam, 20-11-2008 3 Radboud University Nijmegen
  • TNS: tekst-naar-spraakEr zijn wel applicaties met ‘spraak’: Reading pen Screen readers [] Mobiele telefoon: foto + OCR + TNSEnkele zijn ook bruikbaar voor CALL TNS: tekst-naar-spraak TTS: text-to-speech Kwaliteit goed genoeg? IvTI, Rotterdam, 20-11-2008 4 Radboud University Nijmegen
  • TNS: tekst-naar-spraak (vervolg)Applicaties met ‘spraak’ Screen readers, reading pen, etc.Enkele zijn ook bruikbaar voor CALLEchter, meestal kan de leerling alleen luisteren (TNS: tekst-naar-spraak) of, ook spreken, maar … geen evaluatie, of de leerling moet zelf de evaluatie doen bijv. door te vergelijken met voorbeeldenAutomatische evaluatie en feedback² gebruik ASH, spraaktechnologieWat zijn de mogelijkheden? IvTI, Rotterdam, 20-11-2008 5 Radboud University Nijmegen
  • ASH: automatische spraakherkenning Acoustic Lexicon Language Models Model Decoder W1 W2 W3 W4Speech Signal Words Input Output IvTI, Rotterdam, 20-11-2008 6 Radboud University Nijmegen
  • ASH: automatische spraakherkenningWat is ASH? spraak-naar-tekst conversieApplicaties: Dicteren (spreken i.p.v. typen) Command and control (PC besturen) Gesproken dialoogsystemen (informatie) etc.ASH is niet perfect, zal dat waarschijnlijk nooit worden, zeker niet voor niet-moedertaal sprekersDit is ook het geval voor mensen! IvTI, Rotterdam, 20-11-2008 7 Radboud University Nijmegen
  • Spraakherkenning mii IvTI, Rotterdam, 20-11-2008 8 Radboud University Nijmegen
  • ASH & CALLWat is al gedaan?TNS: tekst-naar-spraak de PC ´ spreekt ´ De leerling luistertReading tutors de leerling leest de PC luistert []Interactive BooksVnl. leesvaardigheid IvTI, Rotterdam, 20-11-2008 9 Radboud University Nijmegen
  • ASH & spreekvaardigheid Niet-moedertaal sprekers; projecten:afge- Computergestuurde Spreekvaardigheidstoetslopen Dutch-CAPTnog DISCO deze presentatielopend TST-AAP Mensen met communicatieve beperkingen Trainen van spreekvaardigheid Feedback over fouten => ASH ASH is niet perfect, en zal dat waarschijnlijk nooit zijn met name voor niet-moedertaal sprekers Weten wat wel / niet mogelijk is met ASH en daar goed rekening mee houden! IvTI, Rotterdam, 20-11-2008 10 Radboud University Nijmegen
  • Dutch-CAPTDutch-CAPT project (Computer Assisted Pronunciation Training)Trainen van spreekvaardigheid: uitspraak IvTI, Rotterdam, 20-11-2008 11 Radboud University Nijmegen
  • Video: een voorbeeld IvTI, Rotterdam, 20-11-2008 12 Radboud University Nijmegen
  • IvTI, Rotterdam, 20-11-2008 13 Radboud University Nijmegen
  • Maximaal 3 keer proberenIvTI, Rotterdam, 20-11-2008 14 Radboud University Nijmegen
  • IvTI, Rotterdam, 20-11-2008 15 Radboud University Nijmegen
  • IvTI, Rotterdam, 20-11-2008 16 Radboud University Nijmegen
  • Een les !IvTI, Rotterdam, 20-11-2008 17 Radboud University Nijmegen
  • Een les " !IvTI, Rotterdam, 20-11-2008 18 Radboud University Nijmegen
  • IvTI, Rotterdam, 20-11-2008 19 Radboud University Nijmegen
  • Dutch-CAPT (vervolg) (CAPT: Computer Assisted Pronuciation Training)Evaluatie Exp. group: used the Dutch-CAPT system Control group: didn’t use Dutch-CAPT Studenten positief (leuk, nuttig, etc.) De verbetering (reductie in het aantal uitspraakfouten) was significant groter voor de exp. groep die het Dutch-CAPT systeem gebruikte.Training: slechts 4 weken x 1 sessie van 30-60 minuten IvTI, Rotterdam, 20-11-2008 20 Radboud University Nijmegen
  • Percentage fouten % errors (relative to type) 25.00% 20.00% 15.00% pre-test 10.00% post-test 5.00% 0.00% Exp. NiBu Exp. NiBu 11 doelklanken andere klanken IvTI, Rotterdam, 20-11-2008 21 Radboud University Nijmegen
  • 2 Stevin projecten: DISCO: NT2, spreekvaardigehid TST-AAP: NT2, alfabetiseringStevin stimuleringsprogramma voor TST voor het Nederlands gefinancierd door de Vlaamse en Nederlandse overheid gecoördineerd door de Nederlandse Taalunie (NTU) IvTI, Rotterdam, 20-11-2008 22 Radboud University Nijmegen
  • Stevin project DISCOTrainen van spreekvaardigheid uitspraak, morfologie, syntax Correct Voorbeeld Ik loop naar huis Fouten Uitspraak Ik lop nar guis Morfologie Ik lopen naar huis Syntax Ik naar huis lopenFouten automatisch detecteren m.b.v. spraaktechnologie IvTI, Rotterdam, 20-11-2008 23 Radboud University Nijmegen
  • Display Feedback Logic Generation Error Grading Detection Prompt Generator Segmentation Words ASRIvTI, Rotterdam, 20-11-2008 24 Radboud University Nijmegen
  • Stevin demonstratie-project TST-AAPAlfabetisering met een luisterende computerBestaand methode: Auteur: Ad Bakker Uitgeverij: BoomSpraaktechnologie toevoegen:Detecteren of woorden & klanken (correct) uitgesproken zijn IvTI, Rotterdam, 20-11-2008 25 Radboud University Nijmegen
  • ASH & lerenVoordelen van spraak (t.o.v. schrijven) ‘Self-explanation’ Extra informatie: Prosodie (klemtoon, accent, vraag, etc.) Emoties ‘Houding’Andere bruikbare technieken: VTH: virtual talking head [] IvTI, Rotterdam, 20-11-2008 26 Radboud University Nijmegen
  • ConclusiesASH is niet perfectLeren m.b.v. ASH is mogelijk (beperkt domein) Algemene onderwerpen: rekenen, fysica, etc. Taal i.h.a. SpreekvaardigheidNodig: Mix van expertise: techn., pedagogie, design, … Verbeterde ASH, spraak technologie Meer projecten: R&D IvTI, Rotterdam, 20-11-2008 27 Radboud University Nijmegen
  • Questions? IvTI, Rotterdam, 20-11-2008 28 Radboud University Nijmegen
  • IvTI, Rotterdam, 20-11-2008 29 Radboud University Nijmegen
  • Dutch CAPT: overzichtHet programma bevat 4 lessen die ieder bestaan uit:Video: soap-opera met Nederlandse acteurs (uit Nieuwe Buren, een communicatieve multimediale leermethode)3 verschillende soorten oefeningen: 22 dialogen: rol spelen 46 oefeningen: vragen beantwoorden 38 oefeningen: woorden uitspreken IvTI, Rotterdam, 20-11-2008 30 Radboud University Nijmegen
  • & $ ()*% ! " # ! $ % + $ % , !IvTI, Rotterdam, 20-11-2008 31 Radboud University Nijmegen