Choralplus20jan2011

audio indexering service
Catch+ deelproject
CHoralPlus

Jantje Steenhuis
Mies Langelaar
Franciska de Jong
Marijn Huijbregts
Roeland Ordelman

upload file

doel
ontwikkeling dienst voor laagdrempelig gebruik automatische spraakherkenning ten behoeve van automatische indexering A/V collecties
op basis van in CATCH-CHoral ontwikkelde spraakherkenningstoolkit SHoUT

Zoeken op fragment niveau in A/V
INDEXERING EN ZOEKEN
Tijdgecodeerde transcriptie
AUTOMATISCHE SPRAAKHERKENNING

componenten
gesproken woord
sprekersegmentatie
spraak/niet -spraak
spraak/niet-spraak detectie
sprekersegmentatie en clustering
spraakherkenning
oplijnen: synchroniseren van tekst met audiobestand/tijdlabels verbinden aan woorden
speaker changes

Gerealiseerd
projectplan
basisversie service
platform
systeemintegratie
input/output via internet
testen met kleine data set
procesmonitoring
2009

Gerealiseerd
Ontwikkeling service front-end:
webinterface
accountsysteem
terugmelding (via email)
Ontwikkeling back-end:
adaptatie op basis aangeleverde metadata
load balancing/resultaatafhandeling test met 6T Radio Rijnmond Corpus (optimalisatie, foutverwerking, monitoring)
2010

workflow
A/V
text
src
front-end
account beheer
resultaat terugmelding
text-verwerking
audio extractie
taalmodel
adaptatie
back-end
reken
cluster
(nu: 8 cores)
Monitoring +
Resultaat
management
oplijning
spraakherkenning

Service front-end: account
account(s) per erfgoedinstelling
accountname = instelling.domein
bv: gar.rr (GAR Radio Rijnmond Collectie)
domein voor specifieke domein instellingen (grote collectie, mate van adaptatie, etc)
elk acount heeft
een max. aantal uren om te verwerken
(optioneel) specifieke ASR configuratie

Service front-end: upload
handmatig via web individuele files uploaden
geintegreerd in lokale systemen:
via http (op basis vast ip-adres)
via low-level (ssh) connectie (voor grootverbruikers)
mogelijkheid om tekstbestanden mee te sturen voor oplijning of adaptatie

Service front-end: status
huidige implementatie:
status updates via email such as
job started on X-MI ASR SERVICE
we are sorry but you have exceeded your quota for your account
we received your file. Your job is being prepared to be processed
we have finished the ASR process. The transcription will be send to you in a separate mail

Planning
Upgrade web-interface
status, primitieve zoekfunctie
Online testen met erfgoedinstellingen:
Gemeenteraadsvergaderingen
Verteld Verleden
Draft business plan voor consolidatie service
Eindrapportage
2011

catalogue
Content management
ICT person
Selection
mechanism
archivist
check
workflow management
send
folder
results
folder
ASR
connection
ASR
service
ASR management
ASR specialist

Choralplus20jan2011

by Catchplus Project on Jan 27, 2011

Accessibility

Categories

Upload Details

Usage Rights

Statistics

Choralplus20jan2011 — Presentation Transcript