Создана новая система, способная распознавать движения рук пользователя, находящегося рядом с клавиатурой, и выполнять его команды. Система называется Typealike. Она работает с помощью веб-камеры ноутбука.
Например, пользователь кладет правую руку рядом с клавиатурой и поднимает большой палец вверх, а программа распознает этот жест как запрос на увеличение громкости звука. Таким образом можно запрограммировать множество операций, создавая различные жесты и их комбинации.
Эта инновация в области взаимодействия человека и компьютера призвана улучшить пользовательский интерфейс и избавиться от необходимости использовать комбинации клавиш или работать с мышью и трекпадом.
Для удобства пользователя было изготовлено небольшое механическое устройство, которое фокусирует веб-камеру на руках. Затем было создано программное обеспечение, способное распознавать жесты рук в различных условиях. При разработке программного обеспечения использовались методы машинного обучения.
Кроме того, исследователи создали банк данных жестов, которые были предложены десятками добровольцев-исследователей. Были проведены опросы, чтобы понять запросы пользователей, и сделать программное обеспечение чрезвычайно функциональным и универсальным.
