Beyin sinyalleri dijital avatara dönüştü: Konuşma ve jestler tek sistemde birleşti
Bilim insanları, felç nedeniyle konuşma ve hareket yetisini kaybeden bireylerin beyin sinyallerini kullanarak hem kelimeleri hem de mimikleri dijital bir avatar aracılığıyla ifade etmelerini sağlayan yeni bir sistem geliştirdi. Nature Neuroscience dergisinde yayımlanan çalışmada kullanılan teknolojinin, tek bir beyin implantından gelen sinyallerle hem konuşmayı hem de iletişimsel vücut hareketlerini aynı anda çözümleyebilen ilk sistem olduğu belirtildi.
Makine öğrenmesi ile jest ve mimikler avatara taşınıyor
Makine öğrenmesi yöntemiyle desteklenen sistem, kullanıcının ifade etmek istediği sözcüklerin yanı sıra baş sallama, omuz silkme veya el hareketleri gibi bedensel mimikleri de algılayarak dijital avatara yansıtıyor. Araştırmanın başyazarı Samantha Brosler, sistemin yalnızca tek bir yetiyi geri kazandırmanın ötesine geçerek, farklı iletişim biçimlerini tek bir arayüzle birleştirmeyi hedeflediklerini vurguladı. Uzmanlar, jest ve mimiklerin iletişime duygu ve bağlam kattığını, bazen konuşmanın yerini bile tutabildiğini ifade ediyor.
Klinik kullanım için aşılması gereken engeller var
Kaliforniya Üniversitesi San Francisco (UCSF) araştırmacılarının iki kişi üzerinde yürüttüğü kavram kanıtlama çalışması, sistemin beyin sinyallerini yüksek doğrulukla çözümleyebildiğini gösterdi. Ancak uzmanlar, teknolojinin yaygın klinik kullanıma geçmesi için henüz erken olduğu konusunda hemfikir.
King’s College London’dan beyin dinamikleri uzmanı Richard Rosch, sistemin ciddi bir cerrahi müdahale gerektirdiğine dikkat çekerken, Bath Üniversitesi’nden araştırmacı Scott Wellington, sistemin her hasta için ayrı ayrı eğitilmesinin temel bir engel olduğunu belirtti. Araştırmacılar, gelecekte kelime dağarcığını genişletmeyi ve farklı bireylerde de aynı performansı gösterebilecek genellenebilir modeller geliştirmeyi amaçlıyor.
Gelecekte ALS veya serebral palsi gibi nörolojik rahatsızlıkları olan milyonlarca kişiye yardımcı olması hedeflenen bu teknoloji, beyin-bilgisayar arayüzleri (BCI) alanındaki ilerlemelerde yeni bir aşama olarak değerlendiriliyor.