İşitme Engelli Sürücüler için Yapay Zekâ Tabanlı Ses Sınıflandırma ve Görsel Uyarı Sistemi
RECEP TAYYİP ERDOĞAN ÜNİVERSİTESİ
Takım Üyeleri
EMRE KIRAN
EFİL SAYLAM
YILDIRAN YILMAZ
Takım Hakkında
Geliştirdiğimiz projemiz ile işitme engelli ve işitme kaybı yaşayan sürücülerin trafikte karşılaştıkları kritik sesli uyarıları algılayamama problemine çözüm sunmayı amaçlayan yapay zekâ tabanlı bir sürücü destek sistemidir. Trafik ortamı büyük ölçüde işitsel uyarılara dayandığından, siren, korna ve ani sesler gibi hayati bilgiler bu bireyler için erişilebilir değildir. Bu durum, sürüş güvenliği açısından önemli bir risk oluşturmaktadır. Geliştirilen sistem, ortam seslerini gerçek zamanlı olarak toplayan bir mikrofon, mesafe algılayan ultrasonik sensörler ve konum verisi sağlayan GPS modülünden oluşmaktadır. Toplanan veriler, TinyML tabanlı bir makine öğrenmesi modeli ile ESP32 tabanlı mikrodenetleyici üzerinde işlenerek sesler; acil durum sireni, insan sesi ve trafik gürültüsü olarak sınıflandırılmaktadır. Sistem, bulut bağlantısına ihtiyaç duymadan tamamen cihaz üzerinde çalışarak düşük gecikme süresi ve veri gizliliği sağlamaktadır. Elde edilen sınıflandırma sonuçları, sürücünün görüş alanında yer alan TFT ekran aracılığıyla anlık görsel uyarılara dönüştürülmektedir. Ayrıca ESP-NOW protokolü ile modüller arası hızlı veri iletimi sağlanmaktadır. Projemiz, gömülü yapay zekâ teknolojileri kullanılarak erişilebilir ve kapsayıcı bir ulaşım çözümü sunmayı hedeflemektedir. Bu proje işitme engelli bireylerin trafikteki farkındalığını artırarak sürüş güvenliğini geliştirmeyi ve akıllı ulaşım sistemlerine katkı sağlamayı amaçlamaktadır.