Aminudin NRP 2209100050 Dosen Pembimbing Dr. Ronny Mardiyanto, ST., MT. Dr.Ir. Djoko Purwanto, M. Eng. Bidang Studi Elektronika JURUSAN TEKNIK ELEKTRO Fakultas Teknologi Industri Institut Teknologi Sepuluh Nopember Surabaya 2013
Menurut WHO, tujuan Rehabilitasi penderita stroke adalah: 1. Memperbaiki fungsi motorik, wicara, kognitif dan fungsi lain yang terganggu. 2. Readaptasi sosial dan mental untuk memulihkan hubungan interpesonal dan aktivitas sosial. 3. Dapat melaksanakan aktivitas kehidupan sehari-hari.
Lalu bagaimana dengan yang hanya bisa terbaring di tempat tidur?
Kondisi motorik dan kognitif yang buruk Readaptasi sosial dan mental-komunikasi Tapi bagaimana jika penderita juga tidak bisa bicara? Alat bantu komunikasi
Tugas Akhir ini...
menawarkan sebuah solusi alat bantu komunikasi memanfaatkan pandangan mata pasien
˃ Bagaimana konstruksi suatu alat yang mampu mendeteksi pergerakan bola mata? ˃ Bagaimana membuat sebuah sistem yang dapat menerjemahkan pergerakan mata menjadi katakata yang diakuisisikan ke dalam bahasa verbal?
» Menciptakan sebuah sistem yang dapat membantu pasien penderita stroke untuk dapat berkomunikasi secara verbal dengan orang lain dengan nyaman demi menunjang proses terapi yang diterapkan pada pasien penderita stroke untuk bisa berangsur-angsur menuju kondisi yang membaik hingga seperti sedia kala.
» Uji coba dilakukan pada mata manusia yang memiliki pergerakan mata yang normal. » Dipergunakan monitor dan kamera sebagai interface dengan mata subyek. » Tempat dilakukannya percobaan yaitu pada ruangan tertutup yang tenang dengan cukup pencahayaan. » Kepala pengguna pada posisi tegak, sejajar dengan sumbu vertikal.
Penelitian terkait: 1. Arai, Kohei and Mardiyanto, Ronny, "Eye-based HCI with full specification of mouse and keyboard using pupil knowledge in the gaze estimation. Saga University, 2011. » Penelitian ini tentang suatu bentuk HCI (Human Computer Interaction) berupa mouse dan keyboard menggunakan informasi dari pandangan mata. » Dengan HCI ini, dapat melakukan pengontrolan pointer mouse dan penekanan kombinasi tombol keyboard dengan sesuai arah pandangan mata
Eye-based HCI with full specification of mouse and keyboard using pupil knowledge in the gaze estimation.
Eye detection
Modified Screen Keyboard
Project terkait: 2. Eye-writer project oleh the Graffiti Research Lab, The Fat Lab dan The Ebeling Group » Suatu project yang memungkinkan seorang penderita stroke untuk menggambar grafiti-urban art » Project ini mengintegrasikan sebuah eye tracker dan program pada PC untuk menggambar
Eye-writer
Bentuk helm Bentuk kacamata
Kalibrasi Kamera
Monitor CPU Speaker
Eye tracker
Notebook PC
Eye tracker
Eye tracker
LED Infra Red
Hasil modifikasi:
Citra mata normal
Citra mata dengan penerangan Cahaya Infra Red
» pengenalan pola citra digital, ˃ Deteksi lokasi pupil mata ˃ Deteksi lokasi layar
» camera calibration, » software eye to speech.
Tampilan Software
Pengenalan pola citra digital:
Peningkatan kontras Pupil mata Find Contour
Penggunaan Marker pada layar monitor Polygon Approximation
Tampilan window kalibrasi
Dapatkan 4 parameter
Tampilan keyboard virtual pada eye to speech
Tampilan keyboard virtual pada eye to speech
Gambar tidak dipublikasikan
Tampilan pengujian pengenalan pola pada citra
Gambar tidak dipublikasikan
Hasil pengujian tahap kalibrasi kamera Gambar tidak dipublikasikan Koordinat titik-titik sudut layar monitor
Lokasi pupil pada 4 titik kalibrasi X tiap kolom dan y tiap baris
Koordinat titik pusat layar monitor Gambar tidak dipublikasikan
4 parameter normalisasi Panjang dan Lebar pixel layar monitor
Gambar tidak dipublikasikan
Tabel hasil Normalisasi
Tabel tidak dipublikasikan
Dari tabel tersebut didapatkan nilai absolut error posisi hasil pengontrolan 19,35 pixel untuk sumbu x dan 22,59 pixel untuk sumbu y. Hal ini menunjukkan bahwa posisi pointer pada layar monitor cukup representatif pada arah pandangan mata.
» Sistem yang dirancang mampu mendeteksi posisi dan mengekstrak fitur pupil mata dan mendapatkan titik pusat pupil dengan tingkat keberhasilan yang tinggi. » Proses normalisasi untuk pengontrolan pointer mouse dapat dilakukan dengan melakukan proses kalibrasi dahulu dan mengkalkulasi parameter-parameter yang dipergunakan dalam perhitungan posisi pointer. » Posisi kepala yang stabil sangat mempengaruhi perolehan parameter-parameter kalibrasi yang tepat.
» Penggunaan data posisi layar monitor dalam perhitungan parameter untuk pengontrolan pointer mouse dapat memaksimalkan normalisasi arah pandangan mata terhadap posisi pointer. » Dengan menggunakan sistem ini dapat melakukan pengetikan virtual keyboard pada layar hanya dengan pandangan mata saja, dan kemudian merubahnya menjadi ucapan/bahasa verbal yang dapat menjadi alat bantu komunikasi verbal pada penderita keterbatasan seperti stroke dan penyakit yang serupa.
