Beyin çipiyle ALS hastası yeniden konuştu ve şarkı söyledi.
UC Davis’te geliştirilen beyin-bilgisayar arayüzü, ilerleyen yanak felci (ALS) hastalığı olan bir kişiye gerçek zamanlı olarak kendi sesiyle konuşma ve şarkı söyleme yeteneğini geri kazandırdı.
Araştırmacılar, konuşma üretimini sağlayan beyin bölgesine cerrahi olarak yerleştirilen dört mikroelektrot dizisiyle, hastanın ham beyin sinyallerini gerçek zamanlı olarak yakaladı. Bu sinyaller, yapay zeka tabanlı bir model ile işlenerek hassas bir şekilde sentetik konuşmaya dönüştürüldü. Sistem, hastanın konuşma kaslarını harekete geçirmeye çalışırken ürettiği beyin aktivitesini analiz ederek konuşmayı yeniden yapılandırdı. Bu analiz, hastanın daha önceki ses kayıtlarına dayalı, özel bir ses klonlama algoritması ile, hastaya özgü sesle gerçekleştirildi. Sinyallerin işlenmesi ve konuşmanın sentezlenmesi sadece 10 milisaniye sürdü, bu da neredeyse anlık bir iletişimi mümkün kıldı.
Sistem, konuşmayı aşan bir performans sergileyerek, melodik tonlamayı da algılayabiliyordu. Hasta, farklı tonlardaki basit melodiler söyleyerek bu yeteneği gösterdi. Ayrıca, “aah”, “ooh” ve “hmm” gibi tepkileri de doğrulukla yeniden üretmeyi başardı. Sistem, söylenen ifadelerin sorusal veya beyan niteliğinde olup olmadığını, vurgulanan kelimeleri bile doğru bir şekilde tespit edebiliyordu. Araştırma ekibi, yapay zeka kod çözücüsünün, eğitim verilerinde bulunmayan sözcükleri de başarıyla sentezlediğini belirtti. Bu özellikler, önceki sistemlere göre daha zengin ve anlamlı bir sentetik konuşma ortaya koydu. Önemli olarak, bu çalışma tek bir hastayla gerçekleştirilmiş olup, gelecekte bu başarılı sonuçları daha fazla ALS hastasıyla tekrarlayacaklarını ifade ettiler.