Dubai’deki bir üniversiteden iki Emirlik mezunu, felç veya felçten muzdarip sözel bozukluğu olan bireylerin daha etkili iletişim kurmasına yardımcı olmak için tasarlanmış çığır açan bir yapay zeka çözümü geliştirdi. Yenilikçi projeleri, kullanıcılar için dijital bir ses işlevi gören ve niyetlerini net ve etkileyici bir konuşmaya dönüştüren avatar tabanlı bir yapay zeka (AI) modeline sahiptir.
Bu AI avatarı, kullanıcıların daha doğal ve kapsayıcı bir şekilde etkileşime girmesini sağlayan iletişimde bir köprü görevi görür. Kişiselleştirilmiş, kullanıcı dostu bir deneyim sunarak, sağlık hizmetlerinde yardımcı teknolojiyi dönüştürme, kapsayıcılık ve erişilebilirlik için yeni olanaklar yaratma potansiyeline sahiptir.
Yaratıcılar, elektrik mühendisliği mezunları Abdallah Al-Serkal ve Ahmad Yousef, lisans çalışmaları sırasında bu teknolojiyi geliştirmeye ve geliştirmeye iki yıl ayırdılar.
Abdullah El-Serkal ve Ahmet Yusuf projelerini bir konferansta sundular
şu anda Rochester Institute of Technology’de (RIT) Dubai’de yüksek lisans öğrencisi olan Al-Serkal, Khaleej Times ile yaptığı röportajda teknolojinin elektro-ensefalografi (EEG) ve elektro-okülografi (EOG) teknolojisi ile beyin ve göz sinyallerini nasıl yakaladığını açıkladı. ”Bu yöntemleri beyin sinyallerini ve göz hareketlerini dile çevirmek için kullanıyoruz ve konuşma engelli kişilerin iletişim kurması için yeni bir yol sağlıyoruz” dedi.
Ayrıca, “EEG beyin biyosignallerini tespit edebilir. Eeg’yi yapay zeka ile bütünleştirerek, örneğin bir kişi sıfır veya bir sayıları düşünürken beynin nasıl farklı düşündüğünü belirledik. Belirli düşünce kalıplarının belirli sayılara veya fikirlere nasıl karşılık geldiğini belirledik. Bu kavram basit bir proje olarak başladı ve bir gelişme yazında gelişti.”
Abdullah El-Serkal ve Ahmet Yusuf
Nasıl çalışır
Kelimeler, kullanıcının düşüncelerini metinsel veya görsel ifade yoluyla dinamik olarak ileten etkileşimli bir avatar aracılığıyla ifade edilir.
Yeniliğin arka planını açıklayan El-Serkal, projenin ilk olarak profesörlerinin teşvikiyle genişlettikleri bir laboratuvar ödevi olarak başladığını paylaştı. Amaç, felçten kurtulanların ve felçten muzdarip hastaların yaşam kalitelerini artırmak için karşılaştıkları iletişim engellerini ele almaktı.
Prototip geliştirme, farklı yaş ve geçmişe sahip 50 katılımcıdan veri toplanmasını içeriyordu. “Katılımcılar farklı kelimeler hakkında düşündüklerinde ortaya çıkan mikro nöral (ışık, ses veya dokunma gibi belirli uyaranların tetiklediği nöron aktivitesindeki küçük, hızlı değişiklikler) ve göz hareketlerini yakaladık. Test kelime dağarcığı, yardım, ağrı, ilaç ve uyku gibi hasta ihtiyaçları ile ilgili kelimelere odaklandı. Makine öğrenimini kullanarak, bu biyosignalleri kelimelere çevirdik ve sonuçları doğruladık, bunlar daha sonra AI avatarımız aracılığıyla aktarıldı.”
Bununla birlikte, bir hasta onu verimli bir şekilde kullanabilmeden önce, bireyin hastanın belirli kelimeleri görmesi ve düşünmesi gereken bir eğitimden geçmesi gerekir.
% 90 doğruluk oranı
Şu anda, AI, bir hasta kısa bir eğitim aşamasından geçtikten sonra, EEG sırasında kafa derisine bağlı elektrot adı verilen küçük metal diskler takarken her kelimeyi düşündükleri 10 belirli kelimeyi doğru bir şekilde yorumlayabilir. “Bu verileri topladığımızda, onu AI modeline etiketleyip besliyoruz. Eğitimden sonra AI, kişinin hangi kelimeleri düşündüğünü tahmin edebilir. Prototiple elde edilen doğruluk oranı genel olarak ortalama yüzde 90’dı ve bu tahmin ettiğimizden daha yüksekti.” dedi.
Bu arada, halk sağlığını ve refahını destekleme dürtüsü, üniversiteyi yakında başlayacak olan sağlık bilişimi ve sağlık yönetimi alanında bir mikromaster programı geliştirmeye motive etti.
Rit’ten Elektrik Mühendisliği Doçenti Dr. Jinane Mounsef, “Üniversitede refahı artırma potansiyeline sahip projeler üzerinde çalışmak hayati önem taşıyor, bunun gibi beyin sinyallerini yorumlamak ve hastaların iletişim kurmasına yardımcı olmak için yapay zekayı kullanmaya odaklandı. açlık veya yardım gibi temel ihtiyaçlar.”
“Teknik inovasyonun akademik titizlikle buluştuğu bir ortamı teşvik ediyoruz, bu da öğrencilere bilgilerini gerçek dünyadaki etki için uygulamalarını sağlıyor. Bu proje, insan durumunu iyileştiren çözümler üretmek için teori ve pratiği nasıl birleştirmeye çalıştığımızı örneklemektedir.”
Sharjah, ChatGPT tarzı Arapça tarih sözlüğünü başlatacak
