30480

GESTURE-BASED INTERFACE: TECHNOLOGY AND APPLICATION

Научная статья

Информатика, кибернетика и программирование

Recently gesture-based interfaces are becoming more widely used. There are many advantages of gesture-based interfaces such as small learning time, wide availability (if they done properly), and, in some cases, the lack of manipulators, which is important for mobile devices

Английский

2015-01-19

35.5 KB

0 чел.

Alexander Zyryanov

GESTURE-BASED INTERFACE: TECHNOLOGY AND APPLICATION

Department of Informatics and Processes Management, Ural State University, Ekaterinburg, Russia

  1.  Introduction

Recently gesture-based interfaces are becoming more widely used. There are many advantages of gesture-based interfaces such as small learning time, wide availability (if they done properly), and, in some cases, the lack of manipulators, which is important for mobile devices. However, gesture-based interfaces perceived by many as the entertainment-only technology, which is not suitable for serious work. In this article we will talk about our gesture-based interface and its possible applications.

  1.   «Flashlight interface»

We have developed gesture-based interface which uses ordinary flashlight and standard webcam for three-dimensional input. In addition to low cost and ease of use this technology has one important advantage: camera sees a flashlight not as a point, but as a circle. This feature allows us to calculate 3D position and orientation of flashlight using only one camera. Therefore, we don’t need to calibrate the system before using. Researches have shown that our interface is convenient for users, it works effectively in all kind of ambient light, and it has sufficient accuracy and speed for successful gaming and working. It’s possible to add buttons to the flashlight (they can change its color) for mouse emulation.

To create a rich interface it is not enough to determine the three dimensional position of the hands of the user. We must also be able to recognize user gestures - a trajectory of user’s hands movement. To solve this problem we’ve developed an algorithm that allows finding gestures in a continuous user input and their recognition. Since we want to interact with virtual objects in the same way as if the object is real, and since user’s real hand hold an object (a flashlight), user’s virtual hand should also hold an object. In other words, all manipulations with the objects must be performed with virtual instruments. This approach has many important advantages. It is convenient for the user, because interaction with virtual world is based on the real life experience. This approach is also convenient for the developer, since the use of the virtual instrument sets the context of possible action and thus facilitates the gesture recognition process (and makes it more accurate because we have to choose from a smaller number of patterns). It should also be noted that such gestures are associated exclusively with the instrument and therefore does not depend on the national culture of the user.

When one camera is not enough, our system allows the simultaneous use of multiple cameras. In this case, camera calibration is performed automatically and in real time (by our special algorithm) that makes such systems as easy to install as systems with only one camera.

We performed a comparative test.  The task was to move object in three dimensional space using classic mouse interface and flashlight interface. Time required to solve the problem by using one or the other interface was roughly equal, and two-thirds of the subjects said that the our interface is more convenient to the traditional one.

  1.  Application

To be useful and convenient, the dimension of the interface must be equal to the dimension of display and the dimension of the application. Say, moving three-dimensional objects using three-dimensional interface and two-dimensional display is inconvenient, and creating three-dimensional input device for typing text is practically meaningless.

Thus, three-dimensional gesture-based interfaces are best used for interaction with the three-dimensional space using three-dimensional displays. These include, primarily, CAVE-system, where such interfaces are already used extensively, and virtual reality systems, where such interfaces are rare, but quite successfully. However, the development of three-dimensional displays for home computers and a large number of three-dimensional applications (such as entertainment and business software) allows us to hope that the three-dimensional interfaces will not only useful but also necessary for the widest range of users in a very near future.


 

А также другие работы, которые могут Вас заинтересовать

21037. Исследование электрической дуги постоянного тока 134.5 KB
  Целью работы является исследование неподвижной дуги постоянного тока определение вольтамперной характеристики дуги между электродами выполненными из различных материалов исследование влияния длины дуги и шунтирующего сопротивления на характеристики дуги. Одной из основных характеристик дуги является ее вольтамперная характеристика зависимость напряжения на дуге от тока дуги. С ростом тока дуги вследствие разогрева дугового столба ее сопротивление уменьшается быстрее нежели растет ток.
21038. Исследование герконовых реле 552 KB
  Общие положения Отечественной промышленностью выпускаются одно и многоконтактные реле на замыкание размыкание и переключение преимущественно расположением герконов внутри катушки управления и с внешним магнитопроводом [12]. Для реле с одним замыкающим герконом рис.2 описывается выражением 1 и 2 и их соотношением определяются процессы срабатывания и возврата геркона где С приведенная жесткость контактных сердечников КС геркона; δн и δ начальное и текущее значения немагнитного зазора между КС; F магнитодвижущая сила МДС...
21039. ИССЛЕДОВАНИЕ АВТОМАТОВ 76 KB
  Краткие сведения об автоматах Автоматы это аппараты предназначенные для нечастых включений и отключений электрических цепей по команде оператора и автоматического отключения цепей при ненормальных режимах в них. Автоматы изготовляются на номинальные токи до 6000 А а отдельные серии до 2030 кА на номинальные напряжения до 660 В переменного тока и до 440 В постоянного тока. В зависимости от требовании к времени срабатывания и от назначения автоматы подразделяются на: 1 Небыстродействующие постоянного и переменного тока время...
21040. Исследование электромагнитных контакторов 67 KB
  Электромагнитный контактор представляет собой электромагнит постоянного или переменного тока по обмотке которого протекает ток. В качестве приводных электромагнитов постоянного тока обычно применяются клапанные Побразные электромагниты с внешним качающимся якорем рис. Кроме того необходимо иметь гибкое соединение для подвода тока к подвижному контакту. Исполнение дугогасительных систем контакторов зависит от рода и уровня тока коммутируемой цепи.
21041. Исследование герконовых реле 178.5 KB
  Ульянова Электротехнический факультет Кафедра электрических и электронных аппаратов ЛАБОРАТОРНАЯ РАБОТА №64 Исследование герконовых реле Выполнили студенты группы ЭТ2103: Кузнецов А. Лабораторная работа №64 Исследование герконовых реле Цель работы: изучение конструкций герконов и реле на их основе исследование параметров реле и геркона. Отечественной промышленностью выпускаются одно и многоконтактные реле на замыкание размыкание и переключение преимущественно с расположением герконов внутри катушки управления и с внешним...
21042. Виртуальные машины 207.5 KB
  Опять же необходимо указать имя и место сохранения создаваемого диска. Поэтому сразу выберите место для сохранения с учетом достаточности свободного пространства на реальном разделе жесткого диска. Отмечу некоторые особенности: к системе можно подключить три жестких диска. Напоследок рассмотрим процедуру создания нового виртуального жесткого диска.
21043. УСТАНОВКА ВИРТУАЛЬНОЙ МАШИНЫ и ОС WINDOWS XP 763 KB
  Представьте как это удобно если вы хотите разрешить виртуальной машине полный доступ к вашим файлам на реальной машине. При выборе этого пункта создается лишь файл виртуальной машины без дефолтного железа после чего открывается окно настройки и на образ навешиваются и настраиваются дополнительные виртуальные комплектующие сетевые адаптеры образа дисков и прочее. Нажмите кнопку Next На третьем экране нам предлагают ввести имя нашей виртуальной машины и место где мы ее разместим на физическом диске компьютера.
21044. Работа с файлами и дисками в ОС Windows XP 161.46 KB
  В 32битной ОС Windows XP в виде командной оболочки методом эмуляции реализован режим MSDOS позволяющий выполнять все указанные выше действия по работе с файлами и дисками. Подготовка к выполнению лабораторной работы К числу основных команд и служебных утилит используемых при работе с файлами дисками и томами в ОС Windows XP посредством командной оболочки относятся: Assoc Attrib Cacls Cd Chdir Chkdsk Chkntfs Comp Compact Convert Copy Date Del Dir Diskcomp Diskcopy Erase Fc Find Findstr Format Label Md Mkdir Move...
21045. Патофизиология гемостаза 37.5 KB
  Этиология патогенез и патогенетическая терапия наследственной и приобретенной патологии сосудистотромбоцитарного гемостаза. Этиология патогенез и патогенетическая терапия вторичных нарушений коагуляционного гемостаза. Функции системы гемостаза: В норме поддержание жидкого состояния крови При патологии повышение свертываемости крови Патология гемостаза делится на 2 группы: гиперкоагуляция гипокоагуляция МЕХАНИЗМЫ ГЕМОСТАЗА а тромбоцитарнососудистый б коагуляционный Оба механизма включаются одновременно.