Adrien Baranes ve Rob Marchant, yapay zeka ile etkileşimi daha doğal hale getirecek yeni yöntemler üzerinde çalışıyor. Bilgisayar ekranlarının vazgeçilmezi olan fare imleci, elli yılı aşkın süredir neredeyse hiç değişmedi. Ancak yeni geliştirilen yapay zeka yetenekleri sayesinde artık imleç, sadece işaret ettiği noktayı değil, o noktanın kullanıcı için ne anlam ifade ettiğini de kavrayabiliyor.
Temel hedef, kullanıcıların verilerini yapay zeka pencerelerine taşıma zorunluluğunu ortadan kaldırmak. Bunun yerine yapay zekanın, kullanıcının çalıştığı her alanda ona eşlik etmesi amaçlanıyor. Örneğin bir bina görseline işaret edip yol tarifi istendiğinde, sistem bağlamı anladığı için başka bir açıklamaya gerek duymuyor.
Bu yeni arayüz anlayışı dört ana prensip etrafında şekilleniyor. İlk olarak, çalışma akışının korunması esas alınıyor. Yapay zeka yetenekleri uygulamalar arasında geçiş yapmayı gerektirmeden her yerde kullanılabiliyor. Bir belgeden alınan özetin doğrudan elektronik postaya aktarılması veya bir tablonun saniyeler içinde grafiğe dönüştürülmesi bu sayede mümkün oluyor.
İkinci olarak, sistem göster ve anlat mantığıyla çalışıyor. Kullanıcıların uzun ve detaylı komutlar yazmasına gerek kalmıyor. Yapay zeka destekli imleç, çevresindeki görsel ve anlamsal verileri algılayarak bilgisayarın kullanıcının odağını anlamasını sağlıyor. Böylece sadece işaret ederek bir kod bloğu veya görsel üzerinde yardım almak kolaylaşıyor.
Üçüncü ilke, günlük konuşma dilindeki işaret ifadelerinin gücünden yararlanıyor. İnsanlar birbirleriyle iletişim kurarken bunu düzelt veya şunu şuraya taşı gibi kısa ifadeler kullanır. İşaretleme ile konuşmayı birleştiren bu sistem, karmaşık taleplerin doğal dil işleme yetenekleri sayesinde hızla yerine getirilmesine olanak tanıyor.
Son olarak, ekrandaki pikseller anlamlı verilere dönüştürülüyor. Bilgisayarlar artık sadece imlecin konumunu değil, neyin üzerinde olduğunu da biliyor. Bilgisayarlı görü teknolojisiyle pikseller yer, tarih ve nesne gibi etkileşimli ögelere dönüşüyor. Bir gezi videosundaki durağan kare, doğrudan bir rezervasyon bağlantısı haline gelebiliyor.
İnsan davranışlarına uyum sağlayan bu teknoloji, yapay zeka ile iş birliğini çok daha akıcı kılıyor. Bu prensipler şimdiden Chrome tarayıcısına ve yeni nesil Googlebook dizüstü bilgisayar deneyimlerine entegre edilmeye başlandı. Kullanıcılar artık karmaşık komutlar yerine imleçlerini kullanarak ürünleri karşılaştırabiliyor veya bir eşyanın yaşam alanlarındaki duruşunu canlandırabiliyor. Yapay zeka destekli bu yeni işaretleme deneyimi, teknolojiyi çok daha sezgisel bir boyuta taşıyor.