Patient Eye Tracking Interface

Alexandru-Lucian Gînscă, Emanuela Boroș, Adriana Florea, Alexandru Metzak Universitatea “Al. I. Cuza”, Facultatea de Informatică, Iași, România

{lucian.ginsca, emanuela.boros, adriana.florea, alexandru.metzak}@infoiasi.ro

Problema

● numărul mare de pacienţi cu cu abilități motorii și verbale limitate

● necesitatea personalului medical de a avea o comunicare facilă cu astfel de pacienți

● dorința persoanelor apropiate de a purta o conversație cu pacienții

● nevoia unui om imobilizat de a comunica cu mediul exterior, dar și de a interacționa cu mediul online

Soluția

● un dispozitiv mobil şi o metodă de interacțiune care se bazează exclusiv pe mișcarea ochiului

● facilitarea comunicării între personalul medical şi pacient

● dezvoltarea unui limbaj specific

Limbaj

● două metode de scriere: ● frecvența caracterelor● alfabet

● metoda aleasă, implementarea limbajului și detecția poziției ochiului

● două poziții ale ochiului: ochi închis și ochi deschis

● un număr de 40 de simboluri grupate în rânduri de câte 8

● rândurile sunt selectate secvențial, iar după fiecare selectare se citește poziția ochiului utilizatorului -> dacă litera dorită se găsește pe rândul selectat, pacientul va închide ochiul, iar în caz contrar se va trece pe rândul următor

● procesul de selecție continuă până se ajunge la un singur simbol.

Metodă de scriere bazată pe frecvența caracterelor

Metodă de scriere bazată pe frecvența caracterelor

Metodă de scriere bazată pe alfabet

● șase poziții ale ochiului: ochi deschis, ochi închis, ochi privind spre stanga, ochi privind spre dreapta, ochi privind în sus, ochi privind în jos

● un simbol poate fi exprimat printr-o pereche de câte două poziții ale ochiului

● total de 36 de simboluri

Comparare metode de scriere

Metoda Nr. poziții ochi Nr. simboluri Timp mediu (s)

Frecvență 2 40 7.6

Alfabet 6 36 2

● platforma Android

● algoritm detecție● captură șablon a pozițiilor ochilor pentru o mai bună acuratețe a detecției● extragerea trăsăturilor și a punctelor cheie din imagini● metodă de comparare a imaginilor bazată pe o distanță euclidiană

ponderată

● interacțiune prin ecran tactil pentru secțiunea de setări

● folosirea exclusivă a ochiului pentru funcțonalitățile oferite pacientului

Implementare

Concluzii

● potențialul unei aplicații care se adresează unui anumit tip de public și care îmbunătățește viața cotidiană a unui utilizator cu diverse dizabilități

● continuarea dezvoltării unor noi funcționalități bazate pe acest tip de interacțiune

Mulțumim