Разработчики ТУСУРа создают аудиоассистент для немых людей
Группа студентов Томского государственного университета систем управления и радиоэлектроники разрабатывает устройство, которое сможет переводить язык жестов в слова и озвучивать их, сообщает пресс-служба вуза.
«Людям, которые не могут говорить, сложно общаться с теми, кто не понимает языка жестов. Мы хотим попробовать упростить им общение», — цитирует пресс-служба одного из разработчиков проекта студента второго курса факультета электронной техники Никиту Дерябина.
Для решения этой задачи молодые ученые планируют создать аудиоассистент, состоящий из двух основных компонентов — специальных перчаток и программного обеспечения, которое будет установлено на мобильном устройстве. В вузе отмечают, что значительная часть работы над проектом уйдет на создание самих перчаток. Планируется, что они будут оборудованы датчиками сгиба, Bluetooth-модулями, контроллерами и динамиком.
«Когда человек начнет говорить на языке жестов, датчики сгиба и акселерометры зафиксируют положение его пальцев и рук, эту информацию считает сначала контроллер на одной руке и передаст с помощью Bluetooth-модуля на более мощный контроллер на второй руке, где произойдет синхронизация информации с датчиков обеих рук. Далее полная информация о движении рук и пальцев человека через другой Bluetooth-модуль поступит, например, на смартфон, где специальная программа «прочитает» жесты и переведет в слова. Последним этапом станет озвучка полученных данных посредством динамиков, установленных на перчатках», — добавляют специалисты.
При этом студентам необходимо не просто создать рабочее устройство, но и сделать так, чтобы аудиоассистент был действительно удобен для немых людей — помимо основных вопросов найти решения, например, таких, как разместить все оборудование на двух руках и при этом не сделать перчатки слишком громоздкими.
«Для перчаток будем искать определенный материал, чтобы статики не было, чтобы и летом можно было ходить, и зимой тепло было. Мы хотим сделать так, чтобы устройство работало без перебоев и потерь и при температуре минус 40 градусов, и в жару», — пояснил Никита Дерябин.
В настоящий момент разработчики находятся на начальном этапе работы над проектом. Недавно в распоряжение студентов поступили первые части необходимого оборудования — Bluetooth-модули. Следующая партия — датчики сгиба. По словам ученых, это сложное оборудование размером от пяти до десяти сантиметров, которое используется в авиастроении, с его помощью определяется степень деформации крыльев самолетов.
Помимо технической части работы над аудиоассистентом, разработчики планируют провести подробный опрос среди целевой аудитории проекта, чтобы понять, насколько люди заинтересованы в таком устройстве, и как сделать его максимально полезным и удобным в использовании.
