Buluş

Robotlar beden dilinizi algılayabilecek

Birçoğumuz günlük hayatta iletişim kurarken beden diline oldukça önem gösteriyoruz ve beden dilinden yola çıkarak çıkarımlarda bulunabiliyoruz. Fakat robot dünyasında bu durum tam tersi; robotlar söyleneni baz alırlar. Vücut dili duygu durumunuzla ilgili çok şey söyler ama gelişmiş yüz okuma teknolojisine rağmen robotlar vücut dilindeki bazı ince ayrıntıları fark etmekte zorluk yaşarlar ve sosyal ipuçlarını kaçırabilirler. Fakat bu soruna Carnegie Mellon Üniversitesi çözüm bulmuş olabilir.

Carnegie Mellon Üniversitesi’ndeki araştırmacılar, bu sorunun çözülmesine yardımcı olabilecek bir vücut takip sistemi geliştirdi. OpenPose adı verilen sistem, eller ve yüz dahil vücut hareketlerini gerçek zamanlı olarak izleyebiliyor. Bu sistem, bilgisayarların görüntü ve makine öğrenimini kullanarak aynı anda birden fazla kişiyi bile gözlemlemesini sağlayabiliyor. Bu yetenek, insan-robot etkileşimlerini kolaylaştırabilir ve daha etkileşimli sanal ve artırılmış gerçeklik ile sezgisel kullanıcı ara yüzlerinin önünü açabilir.

OpenPose sisteminin göze çarpan bir özelliği de, sadece bir kişinin başını, gövdesini ve uzuvlarını değil, aynı zamanda parmaklarını da izleyebilmesi. Bunu yapmak için, araştırmacılar, 500 kamerayla kaplı bir kubbe olan CMU’nun Panoptic stüdyosunu kullandılar. Burada beden fotoğraflarını çeşitli açılardan yakaladılar ve bir veri seti oluşturmak için bu görüntüleri kullandılar. Daha sonra bu görüntüleri belirli vücut parçalarını tanımlamak ve etiketlemek için “anahtar nokta” dedektörüne entegre ettiler. Yazılım, ayrıca vücut uzuvlarını bireylerle birleştirmeyi de öğreniyor; bu nedenle, belirli bir kişinin elinin her zaman dirseğine yakın olacağını biliyor. Bu da aynı anda birden fazla kişiyi izlemeyi mümkün kılıyor.

2 boyutlu olarak alınan görüntüler, araştırmacılar vücut pozlama algoritmalarının her bir pozun farklı bakış açılarından nasıl göründüğünü anlamalarına yardımcı olmak için 3D olarak yeniden düzenlendi. Tüm bu verilerin işlenmesiyle, sistem bazı parmaklar gizlenmiş olsa bile, elin belirli bir pozisyondayken nasıl göründüğünü belirleyebilen bir hale getirildi.

Artık sistem bu verileri almaya hazır hale getirildiği için, sadece bir kamera ve bir dizüstü bilgisayar ile çalışabiliyor. Ayrıca, teknolojiyi hareketli erişilebilir kılmak, aynı zamanda vücut pozlarını belirlemek için kamera kaplı kubbeye artık gerek kalmıyor. Bunun yanında araştırmacılar, denemeyi teşvik etmek için kodlarını halka açıkladılar.

Bu teknolojinin insanlar ve makineler arasındaki her türlü etkileşime uygulanabileceğini söylüyorlar. OpenPose VR deneylerinde büyük bir rol oynayabilir ve bu da takma sensörler veya eldivenler gibi herhangi bir ek donanım olmadan kullanıcının fiziksel hareketinin daha hassas şekilde algılanmasını sağlayabilir.

Aynı zamanda bir ev robotuyla daha doğal etkileşimleri de kolaylaştırabilir. Robotunuza “onu almasını” söyleyebilirsiniz ve neye işaret ettiğinizi hemen anlayabilir. Robot, fiziksel hareketlerinizi algılayarak ve yorumlayarak, beden dilini izleyerek duyguları okumayı bile öğrenebilir. Belki de canınız sıkılmış bir şekilde evde otururken, robotunuz size en sevdiğiniz şarkıyı söylemeye başlayabilir.

Paylaş
Etiketler
Close