Pełen tekst pracy (~3,8MB)

ROZDZIA̷L 1. WST ↩ EP 9
wyrazu, a sekwencja gestów z przedstawieniem zdania. Ograniczono sie↩ do manualnych
´srodków wyrazu, pomijajac ↩ informacje przekazywana↩ ruchami ust, g̷lowy,
torsu czy uk̷ladem cia̷la. Za̷lo˙zono tak˙ze, ˙ze rozpatrywane wypowiedzi nie bed ↩ a, ↩
wymaga̷ly u˙zycia znaków Polskiego Alfabetu Palcowego. Integralnym elementem
pracy by̷lo przygotowanie narzedzi ↩ programowych i bazy danych.
S̷lowa PJM sa↩ gestami dynamicznymi prawie zawsze wykonywanymi dwiema rekami.
Wystepuje ↩ wtedy ruch jednej d̷loni (tzw. dominujacej), ↩ podczas gdy druga pozostaje
nieruchoma, albo te˙z obie rece ↩ poruszaja↩ sie. ↩ Podczas wykonywania gestów
d̷lonie moga↩ sie↩ wzajemnie dotykać i przys̷laniać oraz pojawiać na tle twarzy. Ruch
mo˙ze być jednokrotny albo powtarzany.
Teze↩ pracy mo˙zna sformu̷lować nastepuj ↩ aco: ↩ Z u˙zyciem ukrytych modeli
Markowa mo˙zliwe jest rozpoznawanie pojedynczych s̷lów i zdań Polskiego
Jezyka ↩ Miganego na podstawie sekwencji wizyjnych. Je˙zeli spe̷lnione
sa↩ ograniczenia odno´snie do ubioru i otoczenia osoby przedstawiajacej, ↩
gesty ze zbioru wykorzystywanego w typowej sytuacji ˙zyciowej moga↩ być rozpoznawane z wysoka↩ skuteczno´scia↩ w uk̷ladzie pozwalajacym ↩ na
bezpo´srednia↩ interakcje↩ z komputerem.
Za̷lo˙zony cel pracy i uzasadnienie tezy wyznaczaja↩ nastepuj ↩ ace ↩ zadania badawcze:
• zaproponowanie schematu przetwarzania obrazów pozyskiwanych w stereowizyjnym
uk̷ladzie kamer kolorowych w celu wyznaczenia wektorów cech,
• opracowanie i eksperymentalna weryfikacja metody identyfikacji d̷loni i twarzy
w obrazach kolorowych pod katem ↩ jako´sci obrazów binarnych otrzymywanych
w zmiennych warunkach o´swietlenia oraz czasu przetwarzania umo˙zliwiajacego ↩
zastosowanie metody w trybie on-line,
• wybór metody wyznaczania mapy g̷l ebi ↩ na podstawie obrazów stereo z uwzgle↩ dnieniem jako´sci otrzymywanych map oraz czasu przetwarzania pozwalajacego ↩
na zastosowanie w trybie on-line,
• opracowanie algorytmu identyfikacji d̷loni prawej, lewej i twarzy w otrzymanych
obrazach binarnych,
• analiza wyników badań lingwistycznych dotyczacych ↩ cech dystynktywnych
znaków migowych, zaproponowanie wektora cech wykorzystywanego przez klasyfikator,
• opracowanie i eksperymentalna weryfikacja metody rozpoznawania wybranych
wyrazów PJM z wykorzystaniem ukrytych modeli Markowa,
• opracowanie i weryfikacja metody rozpoznawania zdań PJM z wykorzystaniem
ukrytych modeli Markowa.
Cz ↩ e´sć badawcza pracy dotyczy przetwarzania i rozpoznawania obrazów cyfrowych i
sekwencji wizyjnych, ze szczególnym uwzgl ↩ ednieniem zastosowania ukrytych modeli