Glównym celem projektu jest wdrożenie systemu dzialającego w czasie rzeczywistym, który przeksztalca gesty rąk z amerykańskiego języka migowego (ASL) na sygnaly glosowe. System ten móglby byc wykorzystywany przez osoby z zaburzeniami mowy do komunikowania się z innymi ludźmi. W tym celu wykorzystano elektromiogram powierzchniowy (EMG), który mierzy aktywnośc elektryczną mięśni przedramienia, oraz akcelerometr, który mierzy przyspieszenie ruchów dloni. Do rejestrowania tych sygnalów od użytkownika i przesylania zebranych danych do programu Matlab za pomocą Bluetooth wykorzystano urządzenie do noszenia slużące do gromadzenia danych o nazwie Shimmer. W programie Matlab zaimplementowano algorytm rozpoznawania wzorców, który przetwarzal sygnaly i wyświetlal decyzje wyjściowe na podstawie wykonanego gestu. Przeprowadzono kilka testów na jednej osobie w celu zidentyfikowania wielu gestów wykonywanych jedną ręką i dwiema rękami w celu rozpoznania różnych slów, a także podstawowych zdań w ASL. Wyniki eksperymentów zostaly zarejestrowane i omówione.
Glównym celem projektu jest wdrożenie systemu dzialającego w czasie rzeczywistym, który przeksztalca gesty rąk z amerykańskiego języka migowego (ASL) na sygnaly glosowe. System ten móglby byc wykorzystywany przez osoby z zaburzeniami mowy do komunikowania się z innymi ludźmi. W tym celu wykorzystano elektromiogram powierzchniowy (EMG), który mierzy aktywnośc elektryczną mięśni przedramienia, oraz akcelerometr, który mierzy przyspieszenie ruchów dloni. Do rejestrowania tych sygnalów od użytkownika i przesylania zebranych danych do programu Matlab za pomocą Bluetooth wykorzystano urządzenie do noszenia slużące do gromadzenia danych o nazwie Shimmer. W programie Matlab zaimplementowano algorytm rozpoznawania wzorców, który przetwarzal sygnaly i wyświetlal decyzje wyjściowe na podstawie wykonanego gestu. Przeprowadzono kilka testów na jednej osobie w celu zidentyfikowania wielu gestów wykonywanych jedną ręką i dwiema rękami w celu rozpoznania różnych slów, a także podstawowych zdań w ASL. Wyniki eksperymentów zostaly zarejestrowane i omówione.
Barnes & Noble is the world’s largest retail bookseller and a leading retailer of content, digital media and educational products. Our Nook Digital business offers a lineup of NOOK® tablets and e-Readers and an expansive collection of digital reading content through the NOOK Store®. Barnes & Noble’s mission is to operate the best omni-channel specialty retail business in America, helping both our customers and booksellers reach their aspirations, while being a credit to the communities we serve.
