Bu ilerleme, beyin-bilgisayar arayüzlerinin (BCI’ler), felç ve amyotrofik lateral skleroz (ALS) üzere durumlar nedeniyle konuşma yeteneğini kaybeden insanların hayatlarını dönüştürmenin eşiğinde olabileceği tarafındaki umutları artırıyor.
Şimdiye kadar hastalar, göz takibi yahut küçük yüz hareketleri kullanarak sözleri heceleyerek doğal konuşmayı imkansız hale getiren, son derece yavaş yavaş konuşma sentezleyicilerine güvenmek zorundaydı.
En son teknoloji, beynin konuşma ve yüz hareketlerini denetim eden kısmındaki elektriksel aktiviteyi tespit etmek için beynin yüzeyine yerleştirilen küçük elektrotları kullanıyor.
Bu sinyaller direkt dijital avatarın konuşmasına ve gülümseme, kaşlarını çatma yahut şaşkınlık üzere yüz sözlerine dönüştürülüyor.
San Francisco Kaliforniya Üniversitesi’nde (UCSF) çalışmayı yöneten Profesör Edward Chang, “Amacımız, diğerleriyle konuşmanın hakikaten en doğal yolu olan tam ve somut bir irtibat biçimini yine oluşturmak. Bu gelişmeler bizi bunu hastalar için gerçek bir tahlil haline getirmeye daha da yaklaştırıyor” dedi.
Ann isminde 47 yaşındaki bir bayan olan hasta, 18 yıldan fazla bir müddet evvel beyin sapı felci geçirdiğinden beri önemli biçimde felç oldu.
Konuşamıyor yahut yazamıyor ve olağanda dakikada 14 söze kadar harfleri yavaşça seçmesine imkan tanıyan hareket izleme teknolojisini kullanarak bağlantı kuruyor.
Avatar teknolojisinin gelecekte danışman olarak çalışmasına imkan sağlayacağını umuyor.
Ekip, Ann’in beyninin konuşma için kritik olan bölgesine 253 elektrottan oluşan kağıt inceliğinde bir dikdörtgen yerleştirdi.
İmplantasyondan sonra Ann, sistemin yapay zeka algoritmasını eğitmek üzere farklı cümleleri tekrar tekrar söyledi.
Bilgisayar 39 farklı sesi öğrendi ve sinyalleri anlaşılır cümlelere çevirmek için Chat GPT şekli bir lisan modeli kullanıldı.
Bu daha sonra, Ann’in düğününde yaptığı konuşmanın bir kaydına dayanarak, Ann’in yaralanmadan evvelki sesine benzeyecek halde şahsileştirilmiş bir sese sahip bir avatarı denetim etmek için kullanıldı.
