Interaktywna tablica MendelejewaDyplomant Bartosz Nowakowski

Opiekun Dr Inż. Tomasz Dziubich

Cele pracy

opracowanie uogólnionej architektury systemu komputerowego dla przestrzeni publicznej

analiza metod wykrywania osób i rozpoznawania gestów człowieka przebywającego w takiej przestrzeni

projekt i implementacja aplikacji, która kontrolować będzie interaktywną tablicę, zgodną z nurtem nowoczesnych interfejsów.

Uogólniona architektura

Schemat budowy architektury systemów dla przestrzeni publicznych na podstawie analizy istniejących rozwiązań

Przebieg interakcji

Diagram procesu interakcji użytkownika z systemem dla przestrzeni publicznej na podstawie analizy istniejących rozwiązań

Realizacja logiki interakcji

Wizualizacja architektoniczna interaktywnej ściany wideo (Ekran B) umieszczonej na korytarzu Chemii Politechniki Gdańskiej

Projekt systemu

Projekt systemu

Projekt systemuZastosowanie Wybrane rozwiązanie

Porównywane rozwiązania

Przetwarzanie obrazu

Sensory wspomagające śledzenie

Oprogramowanie pośredniczące dla

sensorów

Klasyfikacja gestów

AForge.NET, OpenCV + Emgu CV

IVT, Torch3vision

Microsoft Kinect 3D3 HDI, David

OpenNI + NITE Microsoft Kinect SDK

Accord.NET -

Demonstracja działania

Problemy implementacyjne

Brak ogólnodostępnych publikacji dotyczących gestów dynamicznych w trójwymiarze

Dostępne publikacje:

Gesty dynamiczne w dwuwymiarze

Gesty statyczne w trójwymiarze

Gesty dynamiczne w trójwymiarze wkraczają w rozwiązania komercyjne

Stworzono nową metodę opartą o Hidden Markov Model i odległości kątowe

Podsumowanie

Podczas testów użytkownicy byli w stanie kontrolować aplikację na podstawie opisu słownego gestów bez potrzeby nauki jego obsługi

Stworzony system może stanowić framework dla aplikacji kontrolowanych przez gesty, a zastosowany algorytm użyty do wydajnego wykrywania gestów