Распознавание жестов ручной азбуки ASL

Предложен метод и разработана программная система автоматического распознавания жестов ручной азбуки глухонемых ASL (American Sign Language). В качестве устройства ввода информации о статических жестах, отображающих цифры и латинские буквы, выступает трёхмерный сенсор нового поколения Asus Xtion Pro Live. Распознавание жестов осуществляется посредством извлечения, предварительной обработки и последующего сравнения нормализованных геометрических скелетов руки на основе анализа дальностных изображений, формируемых сенсором. Сравнение скелетов осуществляется на основе алгоритма динамической трансформации шкалы времени (Dynamic Time Warping, DTW), имеющего полиномиальную сложность.

ASL Fingerspelling Recognition

A method is proposed and software is developed for automatic recognition of gestures usedin ASL fingerspelling. Static gestures are captured using the new generation 3D sensor AsusXtion Pro Live. Gesture recognition is achieved by extracting and further comparing thenormalized geometric skeletons of the hand. Hand skeletons are compared using DynamicTime Warping algorithm, which has polynomial complexity.