Bu ilerleme, beyin-bilgisayar arayüzlerinin (BCI’ler), felç ve amyotrofik lateral skleroz (ALS) üzere durumlar nedeniyle konuşma yeteneğini kaybeden insanların hayatlarını dönüştürmenin eşiğinde olabileceği tarafındaki umutları artırıyor.
Şimdiye kadar hastalar, göz takibi yahut küçük yüz hareketleri kullanarak sözleri heceleyerek doğal konuşmayı imkansız hale getiren, son derece yavaş yavaş konuşma sentezleyicilerine güvenmek zorundaydı.
En son teknoloji, beynin konuşma ve yüz hareketlerini denetim eden kısmındaki elektriksel aktiviteyi tespit etmek için beynin yüzeyine yerleştirilen küçük elektrotları kullanıyor.
Bu sinyaller direkt dijital avatarın konuşmasına ve gülümseme, kaşlarını çatma yahut şaşkınlık üzere yüz tabirlerine dönüştürülüyor.
San Francisco Kaliforniya Üniversitesi’nde (UCSF) çalışmayı yöneten Profesör Edward Chang, “Amacımız, diğerleriyle konuşmanın nitekim en doğal yolu olan tam ve somut bir bağlantı biçimini yine oluşturmak. Bu gelişmeler bizi bunu hastalar için gerçek bir tahlil haline getirmeye daha da yaklaştırıyor” dedi.
Ann isminde 47 yaşındaki bir bayan olan hasta, 18 yıldan fazla bir mühlet evvel beyin sapı felci geçirdiğinden beri önemli halde felç oldu.
Konuşamıyor yahut yazamıyor ve olağanda dakikada 14 söze kadar harfleri yavaşça seçmesine imkan tanıyan hareket izleme teknolojisini kullanarak bağlantı kuruyor.
Avatar teknolojisinin gelecekte danışman olarak çalışmasına imkan sağlayacağını umuyor.
Ekip, Ann’in beyninin konuşma için kritik olan bölgesine 253 elektrottan oluşan kağıt inceliğinde bir dikdörtgen yerleştirdi.
İmplantasyondan sonra Ann, sistemin yapay zeka algoritmasını eğitmek üzere farklı cümleleri tekrar tekrar söyledi.
Bilgisayar 39 farklı sesi öğrendi ve sinyalleri anlaşılır cümlelere çevirmek için Chat GPT üslubu bir lisan modeli kullanıldı.
Bu daha sonra, Ann’in düğününde yaptığı konuşmanın bir kaydına dayanarak, Ann’in yaralanmadan evvelki sesine benzeyecek formda şahsileştirilmiş bir sese sahip bir avatarı denetim etmek için kullanıldı.
