3D-печатаемый робот-манипулятор интерпретирует язык жестов

Команда из Антверпенского университета разрабатывает роботизированный интерпретатор жестового языка. Первая версия руки робота, названная Project Aslan, создана при помощи трехмерной печати и может передавать текст пальцами, но конечной целью команды является создание двухрукого робота с выразительным лицом, чтобы передать всю сложность языка знаков.

Проект Aslan

Был предпринят ряд технологических попыток преодолеть разрыв между слышащими и неслышащими сообществами, в том числе умными перчатками и планшетными устройствами, которые переводят жесты в текст или аудио и даже был полноразмерный робот от Toshiba.

Проект Aslan (который обозначает «Actuating Node» для языка жестов Антверпена) предназначен для перевода текста или произнесенных слов в язык жестов. В его нынешнем виде рычаг Aslan подключен к компьютеру, который, в свою очередь, подключен к сети. Пользователи могут подключаться к локальной сети и отправлять текстовые сообщения в Aslan, и рука начнет отвечать. В настоящее время он использует систему алфавита под названием fingerpelling, где каждая отдельная буква сообщается через отдельный жест.

Строение руки

Рука робота состоит из 25 пластиковых деталей, трехмерных изображений с настольного принтера начального уровня, плюс 16 сервомоторов, трех контроллеров двигателей, микрокомпьютера Arduino Due и нескольких других электронных компонентов. По сообщениям, сборка пластиковых деталей занимает около 139 часов, а окончательная сборка робота занимает еще 10.

Производство обрабатывается через глобальную сеть 3D-печати под названием 3D-концентраторы, которая предназначена для обеспечения возможности создания робота в любом месте. Однако этот подход не заменяет человеческих интерпретаторов: вместо этого команда видит в нем возможность помочь людям с нарушениями слуха в ситуациях, когда человеческая помощь недоступна.

«Неслышащий человек, который должен появиться в суде, неслышащий человек после урока в классе где-то, - говорит Эрвин Смет, учитель робототехники в Антверпенском университете. - Это все обстоятельства, когда неслышащий человек нуждается в переводчике на языке жестов, но там, где часто такой переводчик недоступен, вот почему недорогой вариант, такой как Аслан, может предложить решение».

В то время как текущая версия может только перевести текст в указатели пальцев, команда работает над углублением системы для будущих версий, чтобы передавать более тонкие идеи. В языке жестов смысл передается с помощью комбинации жестов рук, позы тела и выражений лица, поэтому исследователи разрабатывают установку с двумя руками, и есть планы добавить выразительное лицо к системе.

Команда также экспериментирует с переводом устных слов на язык жестов и с помощью веб-камеры для обнаружения выражений лица и обучения роботам новых жестов, которые в настоящее время выполняются с помощью электронной перчатки. Проверьте проект Aslan в действии в видео по ссылке