KARABÜK (TİHA) – Karabük Üniversitesi tarafından düzenlenen Türkiye’nin ilk Sağlık Bilimleri Festivali “Sağlıkfest” kapsamında, Ahi Evran Mesleki ve Teknik Anadolu Lisesi öğrencisi Kutluhan Yıldırım, işitme engelli bireylerle iletişim kurmayı kolaylaştıran “SingBrigde” adlı sistem tasarladı.
Ahi Evran Mesleki ve Teknik Anadolu Lisesi öğrencisi Kutluhan Yıldırım tarafından geliştirilen bu projede, işitme engelli bireylerin günlük yaşamda daha rahat iletişim kurabilmesi hedefleniyor. Sistem, bir kameranın karşısına geçen işaret dili kullanıcılarının yaptığı hareketleri tespit ederek, bu hareketleri Türkçe kelimelere dönüştürüyor ve ekranın üst kısmında görüntülenmesini sağlıyor. Böylece, işaret dili bilmeyen bir kişi, işitme engelli bir kişiyle iletişim kurarken kelimeleri ekran üzerinde görerek konuşmalarını sürdürebiliyor. Bu yenilikçi sistem, yapay zeka destekli yazılımlar kullanarak işaret dili hareketlerini tanıyor. Projede kullanılan “Mediapipe” kütüphanesi, özellikle vücut hareketlerini ve işaret dili pozisyonlarını algılayabilmek için oldukça önemli bir araç. Mediapipe, kameradan alınan görüntülerdeki el ve parmak hareketlerini analiz ederek, her bir hareketi bir kelimeyle eşleştiriyor. Proje kapsamında kullanılan bazı yazılıma ilişkin özellikler sayesinde işaret dilindeki hareketler doğru şekilde tanımlanıyor. Sistem, işaret dili hareketlerini analiz ederken, her bir hareketin dinamik ve statik olup olmadığını da belirliyor. Statik hareketler, elin durduğu pozisyonları, dinamik hareketler ise elin hareket ettiği durumları temsil ediyor.
SingBrigde, işaret dili bilmeyen kişilerin işitme engelli bireylerle kolayca iletişim kurmasına olanak tanıyor. Geliştirilen sistem, kamerayı kullanan kullanıcıların işaret dili hareketlerini Türkçe kelimelere dönüştürerek ekrana yazdırıyor ve böylece iletişimi daha anlaşılır hale getiriyor. Cihazın çalışabilmesi için kullanılan veri setleri, her bir işaret dili hareketinin fotoğraf ve video formatlarında kaydedilmesiyle oluşturulmuş durumda. Bu setler, bilgisayara girilen işaret dili hareketleriyle karşılaştırılarak, hangi hareketin hangi kelimeyle eşleştiği belirleniyor. Bu eşleşmeler, yazılımla analiz edilerek ekran üzerinde doğru kelimelerin görünmesini sağlıyor.
Yıldırım, hareketleri doğru şekilde tanıyabilmek için birçok farklı senaryo ve hareketi içeren veri setleri oluşturduğunu, bu veri setleri ve işaret dili hareketlerinin hem statik hem de dinamik formları kapsadığını, böylece daha geniş bir kelime yelpazesi ve doğru çeviri sağladığını belirtti. Bu proje, işitme engelli bireylerle iletişimdeki engelleri ortadan kaldırmak için önemli bir adım atıyor. Günümüzde işaret dilini bilmeyen kişilerin işitme engelli bireylerle iletişimde zorlandığı biliniyor. Ahi Evran Mesleki ve Teknik Anadolu Lisesi öğrencisinin geliştirdiği bu sistem ise işaret dili bilmeyen kişilerin iletişime geçebilmesini sağlayarak toplumda daha kapsayıcı bir ortam yaratılmasına katkı sunuyor.
Editör: Halil Tükenmez
