Виртуальный мир, управляемый жестами и вещами

[lankastersky]

Наконец-то обещают выпустить в массовое производство устройство, поразившее всех в фильме "Особое мнение", а именно - компьютер, управляемый жестами. Подумалось, что проще всего с ней будет управляться глухонемым - они-то в совершенстве обучились передавать друг другу жестами информацию.

Comments

[stealing-beauty.livejournal.com]

У Вас есть веб-камера? Если есть, думаю, Вам будет любопытно поиграться с этой программкой: http://www.codeplex.com/touchless/Release/ProjectReleases.aspx?ReleaseId=17986

Она как раз позволяет совершать действия жестами.

[lankastersky.livejournal.com]

А Вы сами уже успели попробовать - как она в действии? послушная?

[stealing-beauty.livejournal.com]

Подробный ответ от моего мужа :-)))) :

Программа привязывается к цвету маркера. Что очень плохо делает - часто маркер пропадает (прога не определяет цвет маркера) или маркером принимается совсем другой объект (похожий по цвету). Т.е. физически трудно управлять жестами рук (пальцев) - цвет пальцев может сливаться с цветом кожи шеи, головы и тп.

Для эксперимента я покрасил пальцы (два указательных) красками для детей (нашел у жены) - красным и синим. Красный маркер определялся хорошо, синий - вообще терялся, хотя в зоне видимости не было других синих объектов. Загадка.

Камера. Нужна хорошая. Моя встроенная в ноут давала большой шум при плохой освещенности. Как следствие - потеря маркера.

Лучший результат был при использовании в качестве маркеров цветных фломастеров-выделителей. Они как раз были яркого желтого и розового цветов. Вот ими я и игрался. Демо программы там довольно неинтересные, понравилось только управление картинкой. Раздвигаю/свожу меркеры - картинка увеличивается/уменьшается, поворачиваю маркеры относительно их общего центра - картинка тоже вращается.

На самом деле этот проект имеет только один плюс - ОпенСурс. Т.е. хороший пример работы с веб-камерой - определение, захват изображения, вывод на экран. Остальное (а именно жесты) надо переписывать, применяя другие технологии, например инфракрасные камеры..

[lankastersky.livejournal.com]

Да, интересные эксперименты.
Судя по описанию, движок этой программы заимствован у киношников. У них маркеры используются для оцифровки положения снимаемых предметов, чтобы затем в 3д наложить на них цифровые спецэффекты.

И, действительно, синий и зеленый цвета часто используются в качестве фона, а желтый - в качестве наблюдаемых маркеров.

НЕмного странно, конечно, что прога так глючит, но опенсурсу это можно простить. Жалко у меня нормальной камеры нету.

[lankastersky.livejournal.com]

Тогда прячетесь под стол и чешетесь))

А что, по клавиатуре при обычном печатанье разве нельзя промахнуться?

[lankastersky.livejournal.com]

Думаю, что эта проблема решается гораздо проще - компьютер просто не будет понимать не заложенные в него жесты, и, соответвенно, просто никак не будет на них реагировать.
И тем более, бить током (по крайней мере, пока он не научится обижаться, что мы ему неприличные знаки показываем)))