30480

GESTURE-BASED INTERFACE: TECHNOLOGY AND APPLICATION

Научная статья

Информатика, кибернетика и программирование

Recently gesture-based interfaces are becoming more widely used. There are many advantages of gesture-based interfaces such as small learning time, wide availability (if they done properly), and, in some cases, the lack of manipulators, which is important for mobile devices

Английский

2015-01-19

35.5 KB

0 чел.

Alexander Zyryanov

GESTURE-BASED INTERFACE: TECHNOLOGY AND APPLICATION

Department of Informatics and Processes Management, Ural State University, Ekaterinburg, Russia

  1.  Introduction

Recently gesture-based interfaces are becoming more widely used. There are many advantages of gesture-based interfaces such as small learning time, wide availability (if they done properly), and, in some cases, the lack of manipulators, which is important for mobile devices. However, gesture-based interfaces perceived by many as the entertainment-only technology, which is not suitable for serious work. In this article we will talk about our gesture-based interface and its possible applications.

  1.   «Flashlight interface»

We have developed gesture-based interface which uses ordinary flashlight and standard webcam for three-dimensional input. In addition to low cost and ease of use this technology has one important advantage: camera sees a flashlight not as a point, but as a circle. This feature allows us to calculate 3D position and orientation of flashlight using only one camera. Therefore, we don’t need to calibrate the system before using. Researches have shown that our interface is convenient for users, it works effectively in all kind of ambient light, and it has sufficient accuracy and speed for successful gaming and working. It’s possible to add buttons to the flashlight (they can change its color) for mouse emulation.

To create a rich interface it is not enough to determine the three dimensional position of the hands of the user. We must also be able to recognize user gestures - a trajectory of user’s hands movement. To solve this problem we’ve developed an algorithm that allows finding gestures in a continuous user input and their recognition. Since we want to interact with virtual objects in the same way as if the object is real, and since user’s real hand hold an object (a flashlight), user’s virtual hand should also hold an object. In other words, all manipulations with the objects must be performed with virtual instruments. This approach has many important advantages. It is convenient for the user, because interaction with virtual world is based on the real life experience. This approach is also convenient for the developer, since the use of the virtual instrument sets the context of possible action and thus facilitates the gesture recognition process (and makes it more accurate because we have to choose from a smaller number of patterns). It should also be noted that such gestures are associated exclusively with the instrument and therefore does not depend on the national culture of the user.

When one camera is not enough, our system allows the simultaneous use of multiple cameras. In this case, camera calibration is performed automatically and in real time (by our special algorithm) that makes such systems as easy to install as systems with only one camera.

We performed a comparative test.  The task was to move object in three dimensional space using classic mouse interface and flashlight interface. Time required to solve the problem by using one or the other interface was roughly equal, and two-thirds of the subjects said that the our interface is more convenient to the traditional one.

  1.  Application

To be useful and convenient, the dimension of the interface must be equal to the dimension of display and the dimension of the application. Say, moving three-dimensional objects using three-dimensional interface and two-dimensional display is inconvenient, and creating three-dimensional input device for typing text is practically meaningless.

Thus, three-dimensional gesture-based interfaces are best used for interaction with the three-dimensional space using three-dimensional displays. These include, primarily, CAVE-system, where such interfaces are already used extensively, and virtual reality systems, where such interfaces are rare, but quite successfully. However, the development of three-dimensional displays for home computers and a large number of three-dimensional applications (such as entertainment and business software) allows us to hope that the three-dimensional interfaces will not only useful but also necessary for the widest range of users in a very near future.


 

А также другие работы, которые могут Вас заинтересовать

75908. Аграрная политика в дореволюционной России и в СССР: крепостное право и коллективизация без выдачи паспортов, община и колхоз 16.6 KB
  Крепостное право и кресьянская община. В России крестьянская община зародилась вместе с Древнерусским государством и видоизменяясь просуществовала вплоть до конца 1920х. В период Киевской Руси крестьянская община стала основной производящей единицей.
75909. В чем причины кризиса советской экономики в 1980-е гг.? Системный кризис, падение цен на нефть, нерентабельность производства, экстенсивный характер развития? Причины субъективные и объективные 15.55 KB
  Системный кризис падение цен на нефть нерентабельность производства экстенсивный характер развития Причины субъективные и объективные. Проблемы экономического развития были вызваны рядом причин: Системный кризис. В условиях догоняющего развития без демократических свобод при отсутствии гражданского общества в СССР произошла подмена цели средствами главной жертвой которой стала свобода как необходимое хотя и не единственное условие развития человека его инициативы и предприимчивости. Советская модель хозяйствования лишенная...
75910. Как характеризуют существовавшие в конце 80-х - начале 90-х программы реформ Г.Явлинский и А.Чубайс? Каковы отличия в подходах и восприятии 18.19 KB
  Российская приватизация по масштабам и объему стоящих перед ней задач принципиально отличалась от приватизации осуществленной в 1980е годы в странах Запада.Чубайс прохладно относился к приватизации однако понимал важность ее осущетсвления в рамках проведения рыночных реформ. списка литры: мы вели очень жесткую теоретическую дискуссию с Виталием Найшулем как автором концепции ваучерной приватизации приводили ему длинный список катастрофических тяжелейших последствий которые она неизбежно повлечет за собой. мне лично тема приватизации...
75911. Особенности шоковой терапии и приватизации в России 18.04 KB
  Особенности процесса приватизации происходившего в России: массовый характер приватизации вызванный высокой долей государственной собственности в стране а также стремлением ускорить процесс преобразования экономической структуры общества; значительный удельный вес неэквивалентных форм безвозмездная передача оплата не в полной мере и др. вызванный отсутствием денежных средств в частных руках; проведение особого ваучерного этапа приватизации. Целью приватизации провозглашалось создание эффективного собственника однако бесплатная...
75912. Российские экономические реформы 1990-х гг. в оценках западных исследователей: направления критики 19.84 KB
  В оценках западных исследователей: направления критики Негативная оценка результатов российских реформ общее в выступлениях экономистов Оправдывать или объяснять логику развития событий в России становится неприличным и социально опасным Российские реформы далеки от того чтобы считать их феноменально успешными Главные аргументы критиков Игнорирование китайского опыта...
75913. Понятие «модернизация». Что подразумевают под «европейской модернизацией» России? Какие исторические формы этот процесс приобретал? Можно ли считать сталинскую индустриализацию модернизацией 16.6 KB
  Что подразумевают под европейской модернизацией России Какие исторические формы этот процесс приобретал Можно ли считать сталинскую индустриализацию модернизацией Модернизация современный термин используемый для характеристики давно уже идущего в мире процесса процесса социальных изменений посредством которых менее развитые общества приобретают характеристики отличающие большинство развитых обществ. Несмотря на то что исторически многие страны в своем развитии шли бок о бок термин модернизация долгое время не использовался....
75914. Помешало ли строительство империи в России (XVIII-XIX вв.) созданию российской (русской) нации? Точки зрения Хоскинга и Миллера. Понятие нации и русского национализма в России до 1917 года 20 KB
  Усилия уходившие на сбор налогов и создание армии для нужд империи требовали подчинения практически всего населения особенно русских интересам государства и таким образом затрудняли создание общественных ассоциаций представляющих основу для национального самосознания в гражданском смысле. В России условия для национального самосознания были созданы в XVI веке изобретением традиции это дало толчок и послужило оправданием первых шагов по строительству империи но в середине XVII века само имперское государство внезапно отказалось от...
75915. Политика «коренизации» и межнациональные отношения в период создания СССР. Нациостроительство и проведение границ союзных республик 18.67 KB
  В резолюции XII съезда чётко записано: органы национальных республик и областей строились по преимуществу из людей местных знающих язык быт нравы и обычаи соответствующих народов; были изданы специальные законы обеспечивающие употребление родного языка во всех государственных органах и во всех учреждениях обеспечивающих местное национальное население и национальные меньшинства законы преследующие и карающие со всей революционной суровостью всех нарушителей национальных прав и в особенности прав национальных меньшинств. был...
75916. Трансформация представлений о морали в России 16-19 вв: общее и особенное 29 KB
  История развития морали в России начинается уже в устных и письменных произведениях Древней Руси. С принятием христианства Россия обогатилась учениями морали пришедшими к ней из Византии и объединившими в себе лучшие традиции греческой философской школы. Теория морали которую основали древнегреческие мыслители была дополнена русскими учеными разработавшими собственные оригинальные этические концепции и нравственные идеи.