Gesture analysis and recognition based on MEMS sensors


Tezin Türü: Yüksek Lisans

Tezin Yürütüldüğü Kurum: Dokuz Eylül Üniversitesi, Fen Bilimleri Enstitüsü, Mekatronik Mühendisliği Ana Bilim Dalı, Türkiye

Tezin Onay Tarihi: 2020

Tezin Dili: İngilizce

Öğrenci: SEVDA AYDOĞAN

Danışman: YAVUZ ŞENOL

Açık Arşiv Koleksiyonu: AVESİS Açık Erişim Koleksiyonu

Özet:

Bu çalışma, havaya çizilen şekilleri anlamlandırmak üzere Mikro-Elektro-Mekanik Sistem (MEMS) sensörlerinin kullanımını ve sensör verilerini aktarmak için Bluetooth haberleşmeyi kapsamaktadır. Kişilerin, özellikle konuşma engelli çocukların el, kol hareketleriyle vereceği komut, şekil, harf veya rakam gibi karakterlerin anlamlandırılması önemlidir. Bu amaçla dinamik el hareketini yakalamak için MEMS sensörü olarak bir tür atalet ölçü birimi olan MPU6050 kullanılmıştır. Bu cihaz, içinde dahili olarak bulunan jiroskop ve ivme ölçer sensörlerinden alınan verileri Bluetooth üzerinden bilgisayar ortamına aktaran tümleşik küçük bir yapıda olması sebebiyle tercih edilmiştir. Onlar el ve kol üzerinde kolayca yerleştirilebilecektir. Bu çalışmada, el hareketleriyle oluşturulan bazı sayılar, harfler ve geometrik şekiller MATLAB'da gizli Markov model algoritması kullanılarak tanımlanmıştır. Elde edilen veriler kablosuz iletişim yoluyla bir bilgisayara aktarılır. Deneysel çalışmalar, sistemin oluşturulan hareketleri başarıyla tanıyabildiğini göstermiştir.