به گزارش انگجت، این روبات می‌تواند جنس اشیای مختلف را با دیدن و یا شکل‌شان را با لمس کردن تشخیص دهد. برای آموزش چگونگی شناسایی اشیا با لمس، به هوش مصنوعی، محققان ۱۲ هزار فیلم از لمس ۲۰۰ شیء مختلف را ضبط کرده و این اطلاعات را به داده‌های قابل‌فهم برای هوش مصنوعی تبدیل کردند.
برای انسان‌ها آسان است که با نگاه کردن به یک شیء جنس آن را حدس بزنند یا اینکه با لمس کردن یک شیء بگویند که چه شکل و شمایلی دارد، اما این کار برای روبات‌ها یک چالش بزرگ است. حالا اما با طرح جدید دانشمندان چنین ایده‌ای تا حد زیادی به واقعیت تبدیل شده است.
برای حل این چالش‌ها، تیم از یک بازوی روباتیک موسوم به کوکا و یک حسگر لمسی به نام «ژل‌سایت» استفاده کرد. اطلاعات در نهایت به هوش مصنوعی ارسال می‌شود تا بتواند ارتباط بین اطلاعات تصویری و لمسی را شناسایی کند.
هم‌اکنون این روبات تنها می‌تواند اشیا را در یک محیط کنترل شده شناسایی کند. گام بعدی، ایجاد یک مجموعه داده بزرگ‌تر است تا روبات بتواند در تنظیمات و محیط‌های متنوع کار کند.