Standardy W3C Voice Browser Activity
Luděk Bártek
Fakulta informatiky Masarykova univerzita Brno
podzim 2014
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Obsah
Q W3C Voice Browser Activity
O VoiceXML
Luděk Bártek        Standardy W3C Voice Browser Activity
• 1876 - udělen patent na telefon A. G. Bellovi
• WWW
• 1989 - článek HyperText and CERN (Tim Burns Lee) koloval po CERNu k připomínkám
• Vánoce 1990 - demonstrován řádkový webový prohlížeč a editor
• 1991 - všeobecná dostupnost WWW na počítačích v CERNu
• 1994 - první setkání W3 konsorcia (www.w3.org)
• W3C Voice Browser Working Group
• založena 1999
• cíl - návrh standardů umožňujících přístup k WWW pomocí hlasu a telefonu
• zastoupeny firmy jako:
• HP
• Nuance Communications
• Lucent Technologies
• Motorola
• ScanSoft
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML				
Stand	lard	ly W3C Voice	Browser Activity	
• VoiceXML
• Speech Recognition Grammar Specification (SRGS)
• Speech Synthesis Markup Language (SSML)
• Semantic Interpretation for Speech Recognition (SISR)
• Pronunciation Lexicon Specification (PLS)
• slouží k popisu fonetických informací pro rozpoznávání a syntézu řeči
• výslovnost zkratek, místních jmen, ...
• Call Control XML (CCXML)
• State Chart XML (SCXML)
Luděk Bártek        Standardy W3C Voice Browser Activity
• Jazyk pro popis dialogových rozhraní
• Cíl - přinést výhody webového vývoje a doručování obsahu do interaktivních hlasových aplikací
• vývoj započat 1995 - AT&T Phone Markup Language
• 1998 - konference hostovaná W3C na téma hlasového procházení WWW - předvedeny jazyky PML, VoxML, SpeechML, TalkML, VoiceHTML, ...
• 1999 - založeno VoiceXML Fórum - spojení sil při vývoji jazyka pro značkování dialogů
• 2000 - VoiceXML 1.0, krátce na to přijato jako standard W3C
• Aktuální verze:
• doporučení 2.1 (červen 2007) o draft 3.0 (srpen 2010)
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Architektura VoiceXML aplikací
Document Server
Request
i
Document
VoiceXML Interpreter C ontext
VoiceXML Interpreter
Implementation Platform
Figure : Převzato ze specifikace VoiceXML 2.0
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Struktura VoiceXML aplikací
• VoiceXML dokument(y)
• formuláře - konečně stavové automaty.
• Uživatel se nachází v jednom z konverzačních stavů.
• Přechody definovány pomocí URI - odkazují na další krok dialogu.
• URI - Uniform Resource Identifier
• jednoznačná identifikace zdroje (souboru, obrázku, ...) na Internetu
• rozšíření URL (URL je odkaz na soubor, cíl URI nemusí existovat).
• Dialog končí, pokud tento přechod není definován.
• Dva druhy dialogů:
• formuláře - definuje proces pro získání hodnot sady položek
• menu - poskytuje uživateli sadu možností a odkazů na pokračování dialogu
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Struktura VoiceXML aplikací
• Subdialogy
• obdoba funkcí
• slouží k opětovnému provádění jisté části dialogu a vrácení získaných hodnot.
• Sezení - začíná v okamžiku, kdy uživatel zahájí interakci se VoiceXML interpretrem a končí, když je ukončena bud uživatelem, VoiceXML dokumentem nebo kontextem dialogu.
• Aplikace - sada dokumentů, které sdílejí kořenový dokument
Luděk Bártek        Standardy W3C Voice Browser Activity
• Základní komponenta VoiceXML dokumentů.
• Obsahuje:
• sadu položek
• deklarace proměnných nepatřících položkám
• ošetření událostí.
• Základní atribut - id
• název formuláře
• lze se pomocí něj na formulář odkazovat
• musí být unikátní.
• Zpracování formuláře - FIA
O Výběr a přebrání jedné nebo více výzev.
O Získání uživatelských odpovědí, které naplní jednu nebo více
položek a nebo vyvolání události (žádost o nápovědu). O Zpracování sekcí filled u všech zadaných položek.
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML					
	iceXML 1	fo	rn	nulár	
<vxml version="2.0" ...> <form id="hello">
<block name="hello"> <prompt>Welcome to the VoiceXML!.</prompt>
</block>
<field name="greating"> <prompt>Hello.</prompt>
<grammar root=11 greating11 src=11 greating. grxml11 /> <noinput>
<prompt>Tell mi something nice, like hello, hi, good day.</prompt> </noinput>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Ukázkový formulář
Pokračování
<nomatch>
<prompt>I didn't understand you, but thanks anyway. </prompt>
<exit/> </nomatch> <noinput count =11211 >
<prompt>You don't want to speek to me. Good bye.</prompt>
<exit/>
</noinput> </field> <filled>
<prompt> you said <value expr="greating"/></prompt> </filled> </form> </vxml>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML					
L	Pol	oz	ky formu	láře	
• Vstupní položky
• field
• record
• transfer
• object
• subdialog.
• Vstupním položkám odpovídají proměnné s názvem, který odpovídá hodnotě atributu name, příslušné vstupní položky.
• Řídící položky
• block
• initial.
• Provádění lze omezit pomocí atributu cond.
Luděk Bártek        Standardy W3C Voice Browser Activity
e
W3C Voice Browser Activity VoiceXML
Představuje vstup od uživatele.
Atributy:
• name - jméno pole
o přístup k výsledné hodnotě pomocí stínové proměnné s tímto jménem.
• expr - případná počáteční hodnota, lze použít výrazy jazyka ECMAScript
o cond - podmínka nutná pro zpracování vstupu
• vice viz specifikace.
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Element field
Dokončení
• Obsah:
• případná výzva s popisem vstupu (element prompt)
• gramatika - popisuje množinu akceptovatelných vstupů
• ošetření událostí
• noinput
• nomatch
• filled
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
<?xml version="1.0" encoding="UTF-8"?>
<vxml version="2.0" xmlns="http://www.w3.org/2001/vxml"> <form id="main">
<field name="name"> <prompt>Zadejte Vaše jméno</prompt> <grammar src="..." type="application/xml+srgs"/> <noinput>Zadejte prosím Vaše křestní jméno</noinput> <nomatch>Je mi líto, ale zadané jméno není v kalendáři. </nomatch>
</field>
<filled>
<submit next="URL aplikace" namelist=,,name"/> </filled> </form> </vxml>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Umožňuje systému nahrát zprávu.
Lze využít např. pro dialogový záznamník. Atributy:
• name
• expr
• cond
• beep - má-li se před začátkem nahrávání přehrát zvukový signál
• maxtime - maximální délka nahrávky
• type - mime-type výsledné nahrávky; musí být podporována VoiceXML platformou
• ...
Obsah:
• případná výzva s popisem vstupu
• ošetření událostí
• noinput
• connection.disconnect.hangup (použití elementu catch).
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML		
Ukázka použití elementu r	'ecord	
<?xml version="l.0" encoding="utf-8"?>
<vxml version="2.0" xmlns="http://www.w3.org/2001/vxml"> <form id="záznamník"> <record name=11 záznam11 beep="true" maxtime="30s" type=11 audio/x-wav11 > <prompt> Bohužel zde nikdo není. Po zaznění signálu
můžete zanechat vzkaz. </prompt> <noinput> Bohužel nic neslyším. Zkuste to znovu. </noinput>
<catch event="connection, disconnect .hangup11 >
<submit next="http://some.uri.cz/zaznamnik"/> </catch> </record> </form> </vxml>
Luděk Bártek        Standardy W3C Voice Browser Activity
• Slouží k vyvolání dialogu, řešícího dílčí problém.
• Element subdialog.
• Jeden a tentýž subdialog lze volat opakovaně.
• Elementy:
• subdialog - volání dílčího dialogu
• parám - definice hodnoty parametru
• filled - kód, který se má provést po návratu z dílčího dialogu.
• Atributy
• name - jméno volaného dílčího dialogu
• src - URI dokumentu, který obsahuje kód dialogu.
• Kód subdialogu - formulář, ukončený elementem return.
Luděk Bártek        Standardy W3C Voice Browser Activity
<?xml version="l.0" encoding="utf-8"?>
<vxml version="2.0" xmlns="http://www.w3.org/2001/vxml"> <form id="demo"> <subdialog name=" great ing" src="\#say_hello"> <param name="paraml" expr=" 'ahoj ; "/> <filled> <prompt> Hodnota subdialogu je
<value expr=11 great ing. great11 /></pr ompt > </filled> </subdialog> <filled>
<prompt>Řekl jste <value expr=11 greating.great"/> </prompt> </filled> </form>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
<form id="say_hello"> <var name=,,paraml,,/> <field name="great"> <prompt><value expr="paraml"/></prompt> <grammar root="pozdrav" src=,,pozdrav.grxml,,/> <noinput count=11211 > <prompt>
Na pozdrav jste mi neodpověděl. Nashledanou. </prompt> <return/> </noinput>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Ukázka subdialogu
Dokončení
<nomatch> <prompt>
Bohužel jsem Vám nerozuměl, ale stejně dekuj Nashledanou. </prompt> <return/> </nomatch> </field> <filled>
<return namelist="great"/> </filled> </form> </vxml>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
• Obsahuje proveditelný obsah.
• Provádí se pokud:
• má hodnotu 'undefineď (nebyl dosud navštíven)
• atribut cond se vyhodnotí jako true.
• Struktura - viz předchozí příklady.
• Atributy:
• name - jméno bloku
• expr - iniciální hodnota proměnné formuláře
• cond - podmínka omezující provádění bloku.
Luděk Bártek        Standardy W3C Voice Browser Activity
• Typické využití - dialogové strategie se smíšenou iniciativou.
• Umožňuje uživateli zadat více informací naráz.
• Na rozdíl od ostatních vstupních elementů nemůže obsahovat
o gramatiku - využívá se gramatika formuláře (viz ukázka na dalším slidu)
o pokud je uživatelova odpověď gramatikou formuláře rozpoznána, je nutno nastavit hodnotu elementu initial -většinou se používá true
• filled.
• Dceřiné elementy:
• výzvy (prompt)
• ošetření událostí (catch, nomatch, noinput).
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML		
Ukázka použití elementi	i initial	
<?xml version="l.0" encoding="utf-8"?>
<vxml version="2.0" xmlns="http://www.w3.org/2001/vxml"> <form id="main"> <grammar src="registrace.grxml" type="application/srgs+xml1 <block> <prompt>
Vítejte v registraci předmětů na FI </prompt> </block>
<initial name="mixed"> <prompt>
Zde můžete zadat, jaké předměty s jakým ukončením si chcete zaregistrovat </prompt>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Ukázka použití elementu initial
Pokračování
<noinput>
Řekněte něco jako Předmět PB095 na zkoušku </noinput> <noinput count=11211 >
Dobře zkusíme to postupně.
<assign name="mixed" expr="true"/>
<reprompt/> </noinput> <nomatch>
Můžete si zaregistrovat předměty PB095, PB125, PB162 s hodnocením zkouškou nebo zápočtem.
</nomatch>
<nomatch count="2"> Dobře zkusíme to postupně.
<assign name="mixed" expr="true"/>_
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML			
		1	
<nomatch count="2">
Dobře zkusíme to postupně.
<assign name="mixed" expr="true"/>
<reprompt/> </nomatch> </initial>
<field name="předmět11 > <grammar src="registrace.grxml\#predmet"/> <prompt>Zadejte kód předmětu</prompt> <nomatch>
Zatím si lze zaregistrovat předměty PB162, PB095, PB125. </nomatch>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Ukázka použití elementu initial
Pokračování
<nomatch count="3">
Bohužel se nám zadávání nedaří. Nashledanou.
<exit /> </nomatch> <no input count =11311 >
Jelikož jste nic nezadal, tak se s Vámi loučím.
<exit /> </noinput> </field>
<field name="ukončeni"> <grammar src="registrace.grxml\#ukonceni"/> <prompt>Zadejte požadované ukončení.</prompt> <nomatch>
Předměty lze ukončit zkouškou nebo zápočtem. </nomatch>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Ukázka použití elementu initial
Pokračování
<nomatch count="3">
Bohužel se Vám zadávání nedaří, zkuste to klasicky na
adrese is.muni.cz. Nashledanou. </nomatch> <noinput>
Zadejte, zda chcet předmět ukončit zkouškou nebo zápočtem </noinput>
<noinput count="3"> . . .    </noinput> </field>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Ukázka použití elementu initial
Dokončení
<filled> <prompt>
Provádím registraci předmětu s kódem <value expr =11 předmět11 /> a ukončením <value expr="ukonceni"/>. </prompt> </filled> </form> </vxml>
Luděk Bártek        Standardy W3C Voice Browser Activity
W3C Voice Browser Activity VoiceXML
Další informace o VoiceXML
• Popis na W3C VoiceBrowser Activity (http://www.w3.org/TR/voicexml20/ doplnění změn na http://www.w3.org/TR/voicexml2l)
• www.voicexml.org (http://www.voicexml.org)
• Šimek, Richard - Tutoriál jazyka VoiceXML (bakalářská práce Fl), 2005
Luděk Bártek        Standardy W3C Voice Browser Activity