Kinect научили распознавать и переводить язык жестов

Несмотря на то, что последний игровой гаджет от Microsoft, Xbox One, был воспринят несколько скептически (в силу ряда причин, некоторые из которых уже устранены компанией), тот же Kinect остается одним из наиболее интересных технологических достижений последних лет. Причем не в смысле адаптации к игре, а в смысле возможности работы с человеком как бы «напрямую». На днях Kinect «научили» распознавать язык жестов, и переводить его в понятные нам всем фразы на экране.

Новая разработка является совместным проектом Microsoft Research Asia и Институтом компьютерных технологий китайской Академии наук, Пекин. Само собой, в проекте большую роль играет и программное обеспечение, сам Kinect, несмотря на всю свою мощь — лишь железка без ПО. Так вот, Kinect в данном случае распознает визуальную информацию, подаваемую человеком, а уж соответствующее ПО воспринимает данную информацию, анализирует ее и переводит в понятный нам всем язык. В проекте есть две составляющие — собственно, «перевод», и работа в два направления, когда система переводит в язык жестов и обычный текст, напечатанный человеком с нормальным слухом и языковыми навыками.

В последнем случае используется 3D аватар, который и общается на языке жестов. К слову, все это — не часть игрового мира Xbox, это — серьезное научное исследование (с соответствующими достижениями), результаты которого были опубликованы.

Скорее всего, данная разработка найдет свое место в системе коммуникационных технологий от Microsoft. Как уже говорилось выше, не только для игры.

Via Microsoft