Ізраїльський стартап Mentee Robotics, співзасновником якого є Mobileye і засновник AI21 Labs Амнон Шашуа продемонстрував те, над чим він працював останні два роки – гуманоїда на ім’я Menteebot. На відміну від більшості інших роботів, Menteebot від самого початку проєктували з урахуванням штучного інтелекту, а не просто оснащували ним на пізніших етапах розробки.
Робот використовує великі мовні моделі для інтерпретації команд і планування дій. Menteebot поки перебуває на стадії розробки, але в демонстраційному відео він зміг перекласти фрукти з місця на місце, щоправда, для цього знадобилося кілька команд. Очікується, що в першому кварталі 2025 року буде випущено серійну версію робота, яка буде орієнтована на домашнє і складське застосування.
Компанія представила прототип Menteebot. Робот використовує технології штучного інтелекту, зокрема великі мовні моделі на основі трансформаторів, що стали популярними завдяки ChatGPT та іншим подібним сервісам. Ці технології застосовуються на всіх рівнях його роботи. Mentee випустила відео, що демонструє, як робот зі штучним інтелектом сприймає голосову команду, обробляє необхідну задачу, формує відповідь і виконує її, включно з пересуванням, розумінням навколишнього оточення, виявленням об’єкта, його локалізацією і захопленням.
Хоча людиноподібні роботи існують уже багато років, основна увага в цій галузі приділялася поліпшенню взаємодії машин із фізичним світом, включно з такими аспектами, як імітація людських рухів і спритності. Більшість роботів були або запрограмовані заздалегідь, або керувалися програмною платформою для виконання конкретного завдання, наприклад, переміщення коробок у контрольованому середовищі. Потім на сцену вийшли великі мовні моделі.
Багато виробників роботів незабаром впровадили цю технологію (здебільшого завдяки партнерським відносинам), щоб дати своїм гуманоїдам можливість розуміти, що просить користувач природною мовою, і виконувати це завдання, одночасно навчаючись із плином часу. Mentee теж займається чимось подібним, але замість того, щоб впроваджувати ШІ в існуючого розроблюваного робота-гуманоїда, вона працює над створенням андроїда, де ШІ присутній на всіх рівнях його функціонування.
Прототип робота Menteebot перетворює команди, дані людьми, на складні дії в реальному світі, використовуючи ШІ на трьох основних рівнях. По-перше, він використовує великі мовні моделі на основі трансформаторів для інтерпретації команд і “продумування” необхідних кроків. Потім, використовуючи алгоритми на основі NeRF, він будує в режимі реального часу когнітивну 3D-карту довкілля з повною семантичною інформацією про об’єкти і предмети, а також локалізує себе на карті, плануючи динамічний шлях для обходу перешкод. Зрештою, він виконує заплановані кроки за допомогою методу машинного навчання “симулятор-реальність” (Sim2Real), який визначає необхідні рухи в змодельованому середовищі та адаптує їх до реального світу, керуючи ходою і рухами рук.
Хоча робот, показаний у демонстраційному відео, виконує базове завдання з переміщення фруктів з одного місця на інше на кухні, важливо зазначити, що він не робить це за однією єдиною командою. Користувач попросив робота піти і почекати на кухні, а потім дав іншу команду, щоб він підняв і поклав фрукти в іншому місці.
Залишається відкритим питання, чи зможе робот виконати те саме завдання за один раз. Але, враховуючи, що це прототип, можна очікувати, що робот з часом навчиться виконувати складні команди без покрокових інструкцій. Це матиме вирішальне значення для практичного застосування робота в домашніх умовах і на складах.
Mentee заявляє, що остаточна, готова до виробництва версія гуманоїда буде оснащена датчиками, що працюють тільки з камерою; запатентованими електродвигунами, які забезпечують безпрецедентну спритність; і повністю інтегрованим штучним інтелектом. Він буде готовий до розгортання в першому кварталі 2025 року. Компанія не повідомила, на який сегмент вона орієнтуватиметься насамперед.