| | SLO | ENG | Piškotki in zasebnost

Večja pisava | Manjša pisava

Izpis gradiva

Naslov:Accessible Web for Deaf and Hard of Hearing with Transparent Multimodal Sign Language Interpreter Module
Avtorji:Kosec, Primož (Avtor)
Debevc, Matjaž (Mentor) Več o mentorju... Novo okno
Datoteke:.pdf DR_Kosec_Primoz_2012.pdf (2,14 MB)
 
Jezik:Angleški jezik
Vrsta gradiva:Doktorska disertacija (m)
Organizacija:FERI - Fakulteta za elektrotehniko, računalništvo in informatiko
Opis:World Wide Web is becoming increasingly necessary for everybody regardless of age, gender, culture, health and individual disabilities. Unfortunately, the information on the Web is still not accessible to deaf and hard of hearing Web users since these people require translations of written forms into their first language: sign language, which is based on facial expressions, hands and body movements and has its own linguistic structure. This thesis introduces a possible solution (method) for providing accessible information to the deaf and hard of hearing on the Web. The Sign Language Interpreter Module (SLI Module) method combines three different types of modalities: visual, auditory and kinesthetic. The visual modality is represented by the video of a sign language interpreter with the addition of subtitles. The auditory modality is reflected as speech and the kinesthetic modality is defined as user interaction; activating sign language videos on demand. In comparison to previous technological Web solutions, the innovation of the proposed SLI Module method is that it envelops various modalities for delivering written information. The presentation of this information as sign language videos with subtitles can be easily integrated into original Web sites, while fully preserving the layout's structure. This is possible due to the use of Web specifications such as HTML for layout presentation and the ubiquitous use of JavaScript scripting language for interaction. In addition, the method uses external W3C Timed Text format for subtitling. The analysis of Web Content Accessibility Guidelines 2.0 recommendations showed that these recommendations are still too general and inadequate for deaf people who use sign language as their first language. For this reason, the thesis argues that the main problem of the Web accessibility guidelines is that they focus mainly on functionalities instead of user experience. In the thesis, the reasons for selecting sign language videos over synthetic signing, such as avatars, are addressed. The process of producing sign language videos is described in depth. The thesis analyses present Web dictionaries on the Web and introduces motivations factors and development of a Web glossary on demand (SLI Glossary) using the SLI Module method. Additionally, this approach can be used for monitoring Web users‟ activities and can also be used as an indicator for further sign language videos recordings. The SLI Glossary method does not represent a text-to-sign-language automatic translator, but a way to enable single word sign language translations to original Web sites. Based on the experience obtained from the evaluation studies, the SLI Module method is gaining wide acceptance within the Deaf community as it assists them to get the written form of information by using a multimodal information retrieval. Finally, the SLI Module follows worldwide declarations and legislations regarding human rights on equal access to information, since it facilitates sign language as a primary communication channel. The goal of the thesis is also to start an initiative for Slovenian sign language recognition and increase people's awareness about its usage.
Ključne besede:deaf and hard of hearing, sign language, video, subtitles, accessibility, evaluation
Leto izida:2011
Založnik:P. Kosec]
Izvor:[Maribor
UDK:004.774/.777:81'221.24
COBISS_ID:260256000 Povezava se odpre v novem oknu
NUK URN:URN:SI:UM:DK:XYHALQC5
Število ogledov:2307
Število prenosov:120
Metapodatki:XML RDF-CHPDL DC-XML DC-RDF
Področja:KTFMB - FERI
:
  
Skupna ocena:(0 glasov)
Vaša ocena:Ocenjevanje je dovoljeno samo prijavljenim uporabnikom.
Objavi na:AddThis
AddThis uporablja piškotke, za katere potrebujemo vaše privoljenje.
Uredi privoljenje...

Postavite miškin kazalec na naslov za izpis povzetka. Klik na naslov izpiše podrobnosti ali sproži prenos.

Sekundarni jezik

Jezik:Slovenski jezik
Naslov:DOSTOPNEJŠI SPLET ZA GLUHE IN NAGLUŠNE S POMOČJO TRANSPARENTNEGA VEČMODALNEGA PREDVAJALNIKA ZNAKOVNEGA JEZIKA S PODNAPISI
Opis:Svetovni splet je postal neizogiben za vsakokar ne glede na starost, spol, kulturo, zdravje ali individualne posebne potrebe. Žal pa so informacije na svetovnem spletu še vedno večinoma v pisni obliki in tako nedostopne gluhim in naglušnim uporabnikom, ki uporabljajo znakovni jezik kot orodje za komuniciranje. Pisne informacije na spletu bi morale biti posredovane gluhim in naglušnim osebam v znakovnem jeziku v obliki videoposnetkov tolmača znakovnega jezika. Znakovni jezik predstavlja tej populaciji naravni jezik in temelji na obrazni mimiki, gibanju rok in telesa ter ima svojo lingvistično strukturo. V doktorski disertaciji je zajeta statistika gluhe in naglušne populacije po svetu, ki se dnevno sooča z izzivi v komunikaciji in s težkimi življenjskimi pogoji. Gluhe in naglušne osebe, ki uporabljajo znakovni jezik kot prvi jezik za komunikacijo, imajo težave z branjem in pisanjem, saj pisne informacije predstavljajo večinoma njihov drugi jezik. Iz tega razloga je v nadaljevanju predstavljen splošen problem v pridobivanju informacij gluhih in naglušnih. Disertacija nato predstavi večmodalno metodo znakovnega jezika, ki omogoča dostopnost informacij gluhim in naglušnim na spletu. Metoda SLI Module združuje tri različne tipe modalnosti: vizualno, zvočno in kinestetsko. Vizualna modalnost predstavlja videoposnetek tolmača znakovnega jezika z vključitvijo podnapisov, zvočna se odraža kot govor, kinestetska pa je definirana kot interakcija med uporabnikom in sistemom ob aktiviranju videoposnetkov znakovnega jezika na zahtevo. V primerjavi s trenutnimi tehnološkimi spletnimi rešitvami je inovacija te metode združevanje različnih modalnosti za posredovanje pisnih informacij s pomočjo transparentnih videoposnetkov znakovnega jezika in podnapisov. Večmodalno metodo je možno vključiti v obstoječe spletne strani na enostaven način, saj ne vpliva drastično na strukturo spletnih strain, v primerjavi s trenutnimi načini vključitve videoposnetkov. Ta način integracije je moč doseči z uporabo spletnih specifikacij, kot je HTML za prikaz videoposnetkov, in skriptnega jezika JavaScript za omogočanje interakcije. Ob tem predlagana metoda uporablja za podnapise standardiziran format W3C Timed Text. Analiza spletnih priporočil Web Content Accessibility Guidelines (WCAG) je pokazala, da so ta še vedno presplošna in neprimerna za gluhe in naglušne spletne uporabnike, ki uporabljajo znakovni jezik kot prvi jezik. V disertaciji je tako argumentiran glavni problem WCAG priporočil, in sicer da se preveč osredotočajo na funkcionalnost in ne na uporabniško izkušnjo. Razlogi za izbiro videoposnetkov tolmača znakovnega jezika v primerjavi s sintetičnimi kretnjami so navedeni v nadaljevanju. Predstavljene so rešitve za gluhe in naglušne spetne uporabnike iz nekaterih evropskih projektov ter izpostavljen problem pri zagotavljanju dostopnosti na obstoječih spletnih straneh. Postopek za izdelavo kakovostnih videoposnetkov v skladu s standardi ITU je opisan podrobneje. Glede na to, da predlagana večmodalna metoda za podnapise uporablja format Timed Text, ki je bil predlagan s strani organizacije W3C v letu 2010, obstaja velika potreba po orodjih za generiranje podnapisov. Iz tega razloga je izpeljana primerjava med obstoječimi spletnimi rešitvami in namiznimi orodji, ki so na voljo brezplačna. Ker obstoječa orodja za generiranje podnapisov ne zmorejo generirati formata Timed Text z definiranimi stilnimi parametri, je v nadaljevanju predstavljeno spletno orodje SLI Parser, ki služi kot pretvornik podnapisov iz formata .SRT v Timed Text upoštevajoč parametre stilov za prikaz podnapisov. V nadaljevanju sledi zasnova in implementacija namenskega Flash video predvajalnika (SLI Flash Player) za posredovanje večmodalnih informacij na spletu. SLI Flash Player je osnovan na programskem jeziku ActionScript 3.0 in uporablja dve vgrajeni komponenti Adobe Flash. Namen prve komponente FLVPlayback je predvajanje pretočnih videoposnetkov, medtem ko druga komponenta FLVPlaybackCaptioning poskrbi za prikaz
Ključne besede:gluhi in naglušni, znakovni jezik, video, podnapisi, dostopnost, evalvacija


Komentarji

Dodaj komentar

Za komentiranje se morate prijaviti.

Komentarji (0)
0 - 0 / 0
 
Ni komentarjev!

Nazaj
Logotipi partnerjev Univerza v Mariboru Univerza v Ljubljani Univerza na Primorskem Univerza v Novi Gorici