Göz Hareketlerinden Türkçe Sese Dönüşüm Sistemi

Projenin Genel Tanımı

Amyotrofik Lateral Skleroz (ALS), felç, travmatik beyin hasarı ve benzeri nörolojik rahatsızlıklar sonucunda bazı bireyler konuşma ve hareket yeteneklerini büyük ölçüde kaybedebilmektedir. Bu kişiler bilişsel yetilerini korumalarına rağmen düşüncelerini, duygularını ve günlük ihtiyaçlarını çevrelerindeki insanlara aktarmakta ciddi güçlük yaşayabilmektedir. İletişim yeteneğinin kaybı, yalnızca hastayı değil, hasta yakınlarını, bakım verenleri ve sağlık çalışanlarını da doğrudan etkileyen önemli bir sosyal ve psikolojik sorundur.

Bu proje önerisi kapsamında, konuşma ve hareket yeteneğini kaybetmiş bireylerin bilinçli göz kırpma hareketlerini kullanarak günlük ihtiyaçlarını Türkçe ve sesli biçimde ifade edebilecekleri, yerli, düşük maliyetli ve kişiselleştirilebilir bir yardımcı iletişim sisteminin geliştirilmesi amaçlanmaktadır.

Geliştirilecek sistem, kullanıcının göz kırpma hareketlerinden elde edilen biyopotansiyel sinyalleri analiz edecek, tek ve çift göz kırpma olaylarını ayırt edecek ve bu olaylardan oluşan kod dizisini önceden tanımlanmış günlük iletişim cümlelerinden biriyle eşleştirecektir. Belirlenen cümle, kullanıcıya ait ses özelliklerine yakın kişiselleştirilmiş bir sentetik sesle hoparlörden oynatılacaktır.

Projenin Çıkış Noktası

ALS ve ileri düzey felçli bireylerde göz kırpma hareketleri, zaman içerisinde korunabilen sınırlı istemli hareketlerden biri olabilmektedir. Bu nedenle göz kırpma temelli iletişim sistemleri, bireyin dış dünya ile bağlantısını sürdürebilmesi açısından önemli bir fırsat sunmaktadır.

Mevcut bazı yardımcı iletişim sistemleri kamera, göz takip cihazı, çok kanallı EEG donanımı veya pahalı yazılımlar gerektirebilmektedir. Ayrıca bu sistemlerin büyük bir kısmı yabancı dil odaklıdır ve kişiye özgü ses üretme özelliği sunmamaktadır.

Bu projede ise göz kırpma hareketlerinden iletişim kodu oluşturulması, kodun Türkçe bir günlük ihtiyaç cümlesiyle eşleştirilmesi ve seçilen cümlenin kullanıcının ses özelliklerine yakın biçimde seslendirilmesi tek bir sistem içerisinde birleştirilecektir.