Ученые из Мадридского университета Карла III (UC3M) опубликовали статью с результатами исследования интеграции роботов и людей с ограниченными возможностями.
Помимо интересных данных, выделяется часть исследования, которая включала планирование TEO, робот-гуманоид, который «научился» общаться на языке жестов.
TEO (оператор рабочей среды) является результатом предыдущего исследования, проведенного Лабораторией робототехники, и послужил «школьником» для этого исследования.
Чтобы получить эту способность, робот должен уметь комбинировать различные области: ИИ, нейронные сети, искусственное зрение и выражать их через специально спроектированные руки робота.
«Одним из основных новых достижений в этом исследовании является объединение двух широких областей робототехники. Сложные системы (руки или роботизированные руки) и навыки общения/социального взаимодействия». Он объясняет это Хуан Виторесодин из исследователей лаборатории робототехники в отделе системного проектирования и автоматизации UC3M.
По сути, первое мероприятие, проведенное в рамках этого исследования, заключалось в инструктировании ТЭО. С помощью моделирования робот получил указания на конкретное положение каждой фаланги, чтобы выразить каждый элемент языка жестов.
Уже можно сказать, что попытка заставить робота воспроизводить положения и движения, очень похожие на те, которые выполняет человек, в значительной степени успешна.
«Цель состоит в том, чтобы выглядеть естественно. Для достижения этой адаптации использовались различные типы нейронных сетей. Сочетание жестов и широты, понятное людям, которые общаются на этом языке»., уточняет исследование.
На последнем этапе тестирования ученые проверили функционирование TEO, заставив его взаимодействовать с реальными пользователями. «Те, кто контактировал с роботом, дали 80% положительных отзывов, более чем удовлетворительный ответ».говорит другой из исследователей, Дженнифер Дж. Гаго.
Это правда, что разговор, разработанный ТЭО, не является основным. Робот посвятил себя воспроизведению одной за другой букв алфавита жестового языка и ограниченного словаря слов, связанных со знакомыми объектами. Он сделал это хорошо, но это, очевидно, следует считать отправной точкой. Задача этой системы теперь состоит в том, чтобы синтезировать более сложные жесты, целые предложения, критерии кодирования.
Что может сделать TEO
Когда процесс будет завершен, TEO будет играть очень важную роль в отношениях с более чем 13000 XNUMX человек в Испании, которые используют язык жестов, и с другими людьми в мире.
TEO и язык жестов смогут заменить Google Home или Alexa в качестве виртуального помощника, который общается напрямую с помощью жестов. Мало того: учитывая тот факт, что TEO умеет гладить (без шуток, это один из «выученных» навыков), складывать одежду, подавать еду и взаимодействовать с пользователями, говорящими на других языках.
TEO может стать переводчиком языка жестов, который будет нанят в каждом общественном здании, чтобы каждый мог получить доступ к услугам муниципалитета.
Действительно важная вещь в этих исследованиях - их предназначение в обществе, и, таким образом, технология становится инструментом истинного вовлечения.
Больше информации: Дженнифер Дж. Гаго и соавт. Представление языка жестов роботом-гуманоидом TEO
