Научная статья на тему 'Акцентная визуализация в интерфейсах дополненной реальности'

Акцентная визуализация в интерфейсах дополненной реальности Текст научной статьи по специальности «Компьютерные и информационные науки»

CC BY
676
190
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
АКЦЕНТНАЯ ВИЗУАЛИЗАЦИЯ / ДОПОЛНЕННАЯ РЕАЛЬНОСТЬ / СИТУАЦИОННЫЙ ЦЕНТР / ПОЛЬЗОВАТЕЛЬСКИЙ ИНТЕРФЕЙС

Аннотация научной статьи по компьютерным и информационным наукам, автор научной работы — Иващенко А. В., Ситников П. В., Катиркин Г. В., Сурнин О. Л.

В статье предлагаются метод и технология акцентной визуализации для интерактивных пользовательских интерфейсов, реализующих современные технологии дополненной реальности. На основе анализа существующих разработок установлена необходимость выработки новых подходов и технологий проектирования приложений дополненной реальности. В частности, необходимо разрабатывать новые принципы размещения элементов пользовательского интерфейса в пространстве, для чего требуется изучать и понимать закономерности процессов деятельности пользователей. Для решения поставленной проблемы в статье предложена модель, включающая понятия сценария, фокуса, контекста и оверлейного контекста. Фокус используется для представления текущего интереса пользователя. Контекст формализует информационное пространство, в котором он выполняет свои действия. В случае необходимости обновления привлекают внимание пользователя с помощью оверлейного контекста. Эта модель позволяет реализовать метод акцентной визуализации, который заключается в формировании виртуальных объектов, отметок и пояснений для привлечения внимания пользователей с помощью интерфейсов дополненной реальности. В качестве примера реализации технологии акцентной визуализации приводится система управления компьютером с помощью взгляда (Eye Tracker). Проведенные эксперименты подтвердили гипотезу о том, что люди по-разному воспринимают предоставляемую им информацию и оценивают удобство пользовательского интерфейса в относительно непривычной среде дополненной реальности. Технология акцентной визуализации позволяет повысить удобство работы с интерактивными панелями и средствами дополненной реальности, обеспечивая адаптацию виртуальных и активных элементов пользовательского интерфейса под требования и предпочтения конкретных пользователей. Предложенная технология рекомендуется для использования в ситуационных центрах мониторинга сложных организационно-технических систем, в автоматизированных системах послепродажного технического обслуживания и интерактивных электронных технических руководствах дополненной реальности.

i Надоели баннеры? Вы всегда можете отключить рекламу.

Похожие темы научных работ по компьютерным и информационным наукам , автор научной работы — Иващенко А. В., Ситников П. В., Катиркин Г. В., Сурнин О. Л.

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

This paper presents a new technology of accented visualization for interactive user interfaces that implement modern technologies of Augmented Reality (AR). The analysis of existing approaches has identified a necessity to develop new approaches of AR applications design and development. In particular, it is necessary to develop new principles of UI elements allocation in space, which requires understanding of basic trends in usability. In order to solve the stated problem, the paper proposes a model that describes and combines the concepts of a scenario, focus, a context and an overlay context. Focus is used to represent the user’s current interest and attention. A context formalizes the infor-mation space, where the user functions. An overlay context attracts the user’s interest when required. Thу proposed model allows implementing a technology of accented visualization that consists of generating virtual objects, notifications and hints to attract the users’ attention using AR interfaces. As an example of the accented visualization approach implementation there is described utiliza-tion of the Eye Tracker to manage user’s attention. The provided experiments prove an idea that people acquire information differently and evaluate usability in a relatively new AR environment. The accented visualization technology makes it easier to use interactive panels and AR devices by adopting virtual and active elements of UI considering the requirements and preferences of particular users. The author recommend using the proposed technology in situational centres of monitoring of complex organizational and tech-nical systems, automated systems of post-production support and AR-based interactive electronic user manuals.

Текст научной работы на тему «Акцентная визуализация в интерфейсах дополненной реальности»

УДК 519.68 Дата подачи статьи: 02.07.18

DOI: 10.15827/0236-235X.031.4.740-744 2018. Т. 31. № 4. С. 740-744

Акцентная визуализация, в интерфейсах дополненной реальности.

А.В. Иващенко 1, д.т.н., профессор, [email protected] Г.В. Катиркин 2, ведущий разработчик, [email protected]

П.В. Ситников 2, к.т.н., директор по управлению проектами, [email protected] О.Л. Сурнин 2, управляющий, [email protected]

1 Самарский государственный технический университет, г. Самара, 443100, Россия

2 Компания <Открытый код», г. Самара, 443001, Россия

В статье предлагаются метод и технология акцентной визуализации для интерактивных пользовательских интерфейсов, реализующих современные технологии дополненной реальности. На основе анализа существующих разработок установлена необходимость выработки новых подходов и технологий проектирования приложений дополненной реальности. В частности, необходимо разрабатывать новые принципы размещения элементов пользовательского интерфейса в пространстве, для чего требуется изучать и понимать закономерности процессов деятельности пользователей.

Для решения поставленной проблемы в статье предложена модель, включающая понятия сценария, фокуса, контекста и оверлейного контекста. Фокус используется для представления текущего интереса пользователя. Контекст формализует информационное пространство, в котором он выполняет свои действия. В случае необходимости обновления привлекают внимание пользователя с помощью оверлейного контекста. Эта модель позволяет реализовать метод акцентной визуализации, который заключается в формировании виртуальных объектов, отметок и пояснений для привлечения внимания пользователей с помощью интерфейсов дополненной реальности. В качестве примера реализации технологии акцентной визуализации приводится система управления компьютером с помощью взгляда (Eye Tracker).

Проведенные эксперименты подтвердили гипотезу о том, что люди по-разному воспринимают предоставляемую им информацию и оценивают удобство пользовательского интерфейса в относительно непривычной среде дополненной реальности.

Технология акцентной визуализации позволяет повысить удобство работы с интерактивными панелями и средствами дополненной реальности, обеспечивая адаптацию виртуальных и активных элементов пользовательского интерфейса под требования и предпочтения конкретных пользователей.

Предложенная технология рекомендуется для использования в ситуационных центрах мониторинга сложных организационно-технических систем, в автоматизированных системах послепродажного технического обслуживания и интерактивных электронных технических руководствах дополненной реальности.

Ключевые слова: акцентная визуализация, дополненная реальность, ситуационный центр, пользовательский интерфейс.

Современные технологии дополненной реальности (augmented reality, AR) предоставляют разработчикам ПО принципиально новые возможности по построению пользовательских интерфейсов. Отображение виртуальных объектов в контексте наблюдаемой сцены позволяет привлечь внимание пользователей к определенным событиям в нужные моменты времени, подобрать необходимое и достаточное текстовое или графическое сопровождение и обеспечить адаптацию интерфейсных компонентов программного приложения в соответствии с текущей ситуацией и индивидуальными особенностями восприятия. Таким образом, практическое применение средств дополненной реальности обеспечивает требования по адаптивной подстройке ПО в соответствии с изменяющимися условиями использования.

В качестве технических средств дополненной реальности в настоящее время широко распространены очки, планшеты и смартфоны. Решения, основанные на реализации дополненной реальности, активно используются в технике при реализации интерактивных технических руководств, в меди-

цине для поддержки принятия решений по диагностике и хирургии, на транспорте для предоставления дополнительной информации водителю, а также в образовании и игровой индустрии. Таким образом, технологии дополненной реальности -важный и перспективный компонент ПО, реализующий разные отрасли цифровой экономики.

Большие перспективы имеет современное аппаратно-программное обеспечение ситуационных центров, реализующее возможности дополненной реальности для отображения картографической информации и сложных аналитических данных. В частности, при обработке больших объемов слабоструктурированной информации (Big Data) полезно расширение возможностей визуализации найденных зависимостей с помощью дополнительных слоев, содержащих виртуальные графические объекты.

Развитие средств дополненной реальности требует выработки новых подходов и технологий проектирования пользовательских интерфейсов, реализующих дополненную реальность. В виртуальной среде отсутствуют границы экрана, при этом

появляется глубина восприятия наблюдаемой сцены, а различные наблюдаемые объекты и элементы управления могут перекрываться, а иногда мешать друг другу. Для решения этой проблемы необходимо разрабатывать новые принципы размещения элементов пользовательского интерфейса в пространстве, для чего требуется изучать и понимать закономерности процессов деятельности пользователей такого ПО.

Современные технологии дополненной реальности [1, 2] широко используются при реализации адаптивных пользовательских интерфейсов [3]. С помощью специализированных программно-аппаратных средств (очков или планшетов) полезная информация об окружающей среде и ее объектах накладывается на реальный мир. Пользовательские интерфейсы обычно разрабатываются с учетом требований максимального удобства использования. Цель дизайна пользовательского интерфейса -сделать взаимодействие пользователя максимально простым и эффективным с точки зрения достижения целей пользователя. В этом контексте существующие возможности дополненной реальности широко обсуждаются в [4].

Дополненная реальность широко применяется в пользовательском интерфейсе мобильных приложений [5] и в образовании [6]. Это различные геоинформационные системы, туристические информационные системы, развлекательные сервисы. Повышенное внимание реализации дополненной реальности уделяют современные разработчики мобильных устройств (стоит упомянуть презентации новых технологий компании Apple 2018 года).

В качестве примера успешного практического применения технологий дополненной реальности можно привести современные разработки интерактивных электронных технических руководств. Применение AR-технологий при техническом обслуживании позволяет пользователям проходить эффективное обучение и реализовывать информационную поддержку проводимых работ [7, 8]. Дополненная реальность дает возможность отображать необходимую справочную информацию непосредственно в поле проведения операций, что сокращает время на поиск нужной документации и отвлечение на ее изучение. Пример реализации AR в разработке, производстве и обслуживании (ARVIK) представлен в [9]. Также стоит упомянуть о реализации AR для технического обслуживания и обучения в аэронавигационной области [10] и моделировании внимания с использованием видеокамеры в качестве основного интерфейса между пользователем и роботизированной инвалидной коляской [11].

На основании указанных работ можно сделать вывод, что разработчики ПО дополненной реальности сталкиваются с такими же основными проблемами удобства использования, что и дизайнеры традиционных интерфейсов. Это возможность пе-

регрузки пользователей большими объемами информации и затруднение в ориентировании и принятии решений.

Основные тенденции визуализации контекстуальных данных широко изучены в [12, 13]. Примеры приведены для медицинских данных, но могут быть легко распространены для описания сложной технической системы. Отмечается, что основной целью визуализации сложноструктурированной информации является объединение ряда наборов данных для одновременного анализа нескольких слоев биологической системы. Средства дополненной реальности должны связывать все эти наборы (например, изображения, текст, измеренные значения, результаты сканирования) и предлагать визуальную аналитику для поддержки принятия решений. Согласно этой концепции, лица, принимающие решения, не только участвуют в предварительной обработке, выбирая данные или используя реализованную функциональность, но и фактически занимаются настройкой алгоритмов. Сложность заключается в том, что большие массивы данных, необходимые для поддержки принятия решений, проблематично представить в одной картине. Поэтому предлагается вовлечь лицо, принимающее решения, в процесс обработки и визуализации посредством непрерывного интерактивного взаимодействия с системой.

На основе практического опыта реализации ряда решений дополненной реальности [14, 15] была предложена новая технология акцентной визуализации [16], суть которой состоит в отслеживании внимания пользователей ПО в контексте наблюдаемой сцены и адаптивной подстройке виртуальных и активных элементов пользовательского интерфейса.

Представим совокупность объектов сцены, видимых и не видимых (заслоненных) пользователю, как множество wI, I = 1, ..., В качестве объектов сцены могут выступать как реальные объекты, так и компоненты другого пользовательского интерфейса, например, в составе экрана ситуационного центра.

В ходе реализации бизнес-процесса или технологического процесса пользователь должен выполнять последовательность действий, объединенных сценарием:

sk = (РкМ^ы = qij,k,l &, д¿*уж/)>), (1) где Рк - время начала сценария; qij,k,l - событие начала действия; & - тип действия; - время ожидания начала действия согласно сценарию;

- максимальный интервал времени, в котором событие должно произойти.

Для выполнения указанных в сценарии действий внимание пользователя их должно быть привлечено к определенным объектам сцены в нужные моменты времени. Для представления текущего интереса пользователя введем понятие фокуса и обозначим события его изменения:

еп,т,х еп,т,х (их> wn, tn,m,x), (2)

где 1п,т,х - время обращения внимания пользователя их на объект

Сложность сценария, несовершенство пользовательского интерфейса или отсутствие навыков работы с ПО, а также влияние человеческого фактора приводят к задержкам и отклонениям от заданного сценария. Это значит, что события е„,т,х образуют неэквидистантный временной ряд с аддитивной дискретизацией и пропусками [17].

Обозначим событие попадания фокуса в заданный интервал в виде

Я (еп,т,х , ] ,к,1) = 1 если О* = ) и

П * П * * С1\

' (*п,т,х е (*°к + * ,, } к,1' * к + * ,, } к,1 + А* ,,1к,1)); (3) 0 иначе.

Обозначим количество обращений фокуса к объектам сценария в нужное время в виде ¥(их, Як, й1) = £, £/ £„ Ет у(е„,т,х, д^лЬ. Оценка соответствия фокуса сценарию может быть произведена с помощью индикатора, определяющего количество отклонений, характеризующих недостаточное внимание:

Ь(их, Як) = £1 (их, Як, й) < ^ 0, (4) где ^тт - минимально необходимое количество об-

[1, если х = *тие, ращений; 5(х) = \

[0 иначе.

Отметим, что в условиях оптимизации показателя (4) необходимо соблюдение условия минимизации усилий на поиск необходимых объектов: К(их, Як) = £1 ^ (их, Як, й) ^ т1и. (5)

Выражения (4, 5) означают, что при высоком качестве интерфейса ПО пользователь должен своевременно обращать внимание на нужные объекты. Для решения этой задачи предлагается влиять на фокус пользователя, для чего вводится понятие контекста. Контекст формализует информационное пространство (понятийный аппарат и описание текущей ситуации), в котором он выполняет свои действия.

Согласно этому определению, контекст пользователя их включает выборочно перечень объектов, к которым обращался пользователь, и действий сценария, о которых он знает:

С(их) = *„ • у(их, ^*„, Гх,п, Ах,п),

д,л,1 • ф(и А х,у,к,0 }, (6)

где булевы функции у (их, w*n, V х,„, А х,„) и ф(их, д^,к,1, V х,ч,к,и А( х,^,к,д принимают значение 1, если пользователь их помнит о соответствующих объектах и действиях сценария соответственно в момент времени т; моменты времени Vх,„ + АНх,„ и Vх,у,к,1 + А характеризуют забывание.

Функции у и ф являются онтологическими отношениями, поскольку определяют динамику изменения знаний пользователя и могут быть реализованы средствами динамических семантических сетей. Для выполнения условий (4, 5) необходимо,

чтобы соответствующие отношения существовали на момент выполнения этапов каждого сценария.

Для решения этой задачи управления вниманием пользователя необходимо идентифицировать отсутствие внимания пользователя с помощью отношения (4) и достраивать отношения у и ф, для чего предлагается формировать оверлейный контекст:

C(Ux) = {у ' (u x, W n, t'x,n), ф'(Ux, qtjXi, t X,ijxi)}- (7)

Описанная модель, включающая понятия сценария, фокуса, контекста и оверлейного контекста, позволяет реализовать метод акцентной визуализации, который заключается в формировании виртуальных объектов, отметок и пояснений для привлечения внимания пользователей с помощью интерфейсов дополненной реальности.

Для реализации метода акцентной визуализации была разработана технология разработки ПО. Для пользователя (лица, принимающего решения) описывается профиль, в котором выделяются фокус и контекст. Фокус используется для представления текущего интереса пользователя. Контекст формализует информационное пространство, в котором он выполняет свои действия. Фокус и контекст подвергаются влиянию поступающей информации и изменяются под влиянием поведения пользователя. В случае необходимости обновления привлекают внимание пользователя с помощью оверлейного контекста, содержащего необходимые отметки и уведомления. Данные действия производятся в навигаторе, учитывающем динамику показателей, а также комбинацию фокуса и контекста соответствующего пользователя.

Технология акцентной визуализации может быть реализована с использованием систем управления компьютером с помощью взгляда (Eye trackers, ай-трекеров), весьма популярных в современных компьютерных играх [18], а также в обучающих программных комплексах [19, 20]. Ай-тре-кер представляет собой контроллер для управления в играх и компьютерных приложениях с помощью взгляда и способен одновременно отслеживать положение головы и направление взгляда пользователя. Практическое использование ай-трекеров в качестве технического средства акцентной визуализации позволяет технически отследить события en,m,x и определить необходимость формирования оверлейного контекста.

Совместное использование ай-трекеров и планшетов (очков) дополненной реальности обеспечивает реализацию двойного контроля внимания пользователей и снижение объемов дополнительной информации виртуальной сцены, формируемой для решения поставленных задач. Такое решение позволяет повысить удобство постоянного использования средств дополненной реальности на практике.

Проведенные эксперименты по исследованию динамики внимания пользователей средств допол-

Рис. 1. Исходная картина для эксперимента

Fig. 1. The initial picture for the experiment

Рис. 2. Идентификация особого элемента при построчном сканировании (слева) и с помощью периферического зрения (справа)

Fig. 2. Specific element identification in line scan (on the left) and using peripheral vision (on the right)

ненной реальности подтвердили гипотезу о том, что люди по-разному воспринимают предоставляемую им информацию и оценивают удобство пользовательского интерфейса в относительно непривычной среде дополненной реальности. Для отслеживания фокуса взгляда пользователя использовалась приставка Tobii Eye Tracker 4C.

Для группы из 20 человек разного пола была предложена картина (см. рис. 1), на которой необходимо было найти особый элемент (букву N). В результате были выделены две группы людей, использующие разные траектории поиска. На рисунке 2 представлены обобщенная траектория построчного сканирования (сверху), которую использовали 70 % пользователей, и траектория комплексного восприятия (снизу), которую продемонстрировали 30 %. Эти пользователи обладают хорошим периферическим зрением и требуют особого подхода при организации интерфейса.

Технология акцентной визуализации была успешно использована при создании региональных ситуационных центров мониторинга показателей развития, транспортного логистического центра управления ресурсами, в медицинских информационных системах, системах анализа данных открытых источников и социальных сетей в Интернете, ситуационного центра послепродажного технического обслуживания, а также при создании интерактивных электронных технических руководств дополненной реальности.

В современных ситуационных центрах широко используются интерактивные информационные панели (dashboard), позволяющие обеспечить эффективное комбинирование картографических данных, графиков и схем, нацеленных на комплексное представление всей необходимой информации для поддержки принятия решений. Поскольку отображение всей необходимой информации с высоким уровнем подробностей средствами такой панели не представляется возможным, высокую практическую востребованность продемонстрировали настраиваемые пользовательские интерфейсы, ситуационно подстраивающиеся в соответствии с текущими обстоятельствами и адап-

тирующиеся под особенности пользователей. Такой подход позволяет регулировать требуемый уровень детализации данных и контролировать внимание к важным изменениям.

Таким образом, реализация акцентной визуализации позволяет повысить удобство работы с интерактивными панелями и средствами дополненной реальности, обеспечивая адаптацию виртуальных и активных элементов пользовательского интерфейса под требования и предпочтения конкретных пользователей.

Литература

1. van Krevelen D.W.F., Poelman R. A survey of augmented reality technologies, applications and limitations. Intern. J. of Virtual Reality, 2010, vol. 9, pp. 1-20.

2. Navab N., Blum T., Wang L., Okur A., Wendler T. First deployments of Augmented Reality in operating rooms. IEEE Computer, 2012, vol. 45, pp. 48-55. DOI: 10.1109/MC.2012.75.

3. Julier S., Livingston M.A., Swan II J.E., Baillot Y. and Brown D. Adaptive user interfaces in Augmented Reality. Proc. of ISMAR 03. Tokyo, Japan, 2003, 8 p.

4. Schmalstieg D., Langlotz T., Billinghurst M. Augmented Reality 2.0. Virtual realities, 2012, pp. 13-37.

5. Singh M.P. Augmented Reality interfaces. Natural Web Interfaces IEEE Internet Computing, 2013, pp. 66-70.

6. Lee K. Augmented Reality in education and training. TechTrends, 2012, vol. 56, pp. 13-21.

7. Schmalstieg D., Hollerer T. Augmented reality: principles and practice. Addison-Wesley Professional, 2016, 486 p.

8. Henderson S.J., Feiner S.K. Augmented Reality in the psychomotor phase of a procedural task. Proc. IEEE Intern. Sympos. on Mixed and Augmented Reality, Science and Technolgy, Basel, Switzerland, 2011, pp. 191-200.

9. Henderson S.J., Feiner S.K. Augmented Reality for maintenance and repair (ARMAR), Columbia Univ. Report, 2009, 68 p.

10. Hincapié M., Caponio A., Rios H., Mendívil E.G. An introduction to Augmented Reality with applications in aeronautical maintenance. Monterrey, Nuevo León, Mexico, 2011, pp. 1-4.

11. Li H., Mordohai P., Hua G. Attention-driven egocentric computer vision for robotic wheelchair navigation. Proc. 4th Workshop on Egocentric (First-Person), Vision, Las Vegas, NV, 2016, 2 p.

12. Holzinger A. Extravaganza tutorial on hot ideas for interactive knowledge discovery and data mining in biomedical informatics. LNCS, 2014, pp. 502-515. DOI: 10.1007/978-3-319-09891-3_46.

13. Holzinger A. Interactive machine learning for health informatics: when do we need the human-in-the-loop? Brain Informatics, 2016, vol. 3, pp. 119-131. DOI: 10.1007/s40708-016-0042-6.

14. Ivaschenko A., Sitnikov P., Krivosheev A. AR guide for a robot design kit. Proc. SCIFI-IT 2018 Conf., Bruges, Belgium, 2018, pp. 41-45.

15. Ivaschenko A., Gorbachenko N., Kolsanov A. Focused visualization in in-teractive applications for surgery training. Communications in Comp. and Inform. Sci. Springer Intern. Publ. AG, 2017, vol. 754, pp. 723-734. DOI: 10.1007/978-3-319-65551-2_52.

16. Ivaschenko A., Milutkin M., Sitnikov P. Accented visualization in maintenance AR guides. Proc. SCIFI-IT 2017 Conf., Bruges, Belgium, EUROSIS-ETI, 2017, pp. 42-45.

17. Прикладной анализ случайных процессов; [под ред. С.А. Прохорова]. Самара: Изд-во СНЦ РАН, 2007. 582 с.

18. Tobii Ай-трекинг - технология управления компьютером с помощью взгляда. URL: https://www.tobii.ru/ (дата обращения: 01.07.2018).

19. Lyamin A.V., Cherepovskaya E.N. An approach to biometric identification by using low-frequency eye tracker. Proc. IEEE, IET-2017, vol. 12, no. 4, pp. 881-891. DOI: 10.1109/TIFS.2016.2639342.

20. Cherepovskaya E.N., Lyamin A.V. An evaluation of bio-metric identification approach on low-frequency eye tracking data. Proc. IEEE SAMI 2017, IET-2017, pp. 123-128.

Software & Systems

DOI: 10.15827/0236-235X.031.4.740-744

Accented visualization in AR user interfaces

A. V. Ivaschenko 1, Dr.Sc. (Engineering), Professor, [email protected] G.V. Katirkin 2, Leading Developer, [email protected]

P. V. Sitnikov 2, Ph.D. (Engineering), Director of the Project Development, [email protected] O.L. Surnin 2, Manager, [email protected]

1 Samara State Technical University, Samara, 443100, Russian Federation

2 SEC "Open Code", 443001, Samara, Russian Federation

Abstract. This paper presents a new technology of accented visualization for interactive user interfaces that implement modern technologies of Augmented Reality (AR). The analysis of existing approaches has identified a necessity to develop new approaches of AR applications design and development. In particular, it is necessary to develop new principles of UI elements allocation in space, which requires understanding of basic trends in usability.

In order to solve the stated problem, the paper proposes a model that describes and combines the concepts of a scenario, focus, a context and an overlay context. Focus is used to represent the user's current interest and attention. A context formalizes the information space, where the user functions. An overlay context attracts the user's interest when required. Thy proposed model allows implementing a technology of accented visualization that consists of generating virtual objects, notifications and hints to attract the users' attention using AR interfaces. As an example of the accented visualization approach implementation there is described utilization of the Eye Tracker to manage user's attention.

The provided experiments prove an idea that people acquire information differently and evaluate usability in a relatively new AR environment. The accented visualization technology makes it easier to use interactive panels and AR devices by adopting virtual and active elements of UI considering the requirements and preferences of particular users.

The author recommend using the proposed technology in situational centres of monitoring of complex organizational and technical systems, automated systems of post-production support and AR-based interactive electronic user manuals. Keywords: accented visualization, augmented reality, situational centre, user interface.

References

1. van Krevelen D.W.F., Poelman R. A survey of augmented reality technologies, applications and limitations. Intern. J. of Virtual Reality. 2010, vol. 9, pp. 1-20.

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

2. Navab N., Blum T., Wang L., Okur A., Wendler T. First deployments of Augmented Reality in operating rooms. IEEE Computer. 2012, vol. 45, pp. 48-55. DOI: 10.1109/MC.2012.75.

3. Julier S., Livingston M.A., Swan II J.E., Baillot Y., Brown D. Adaptive user interfaces in Augmented Reality. Proc. of ISMAR 03. Tokyo, Japan, 2003, 8 p.

4. Schmalstieg D., Langlotz T., Billinghurst M. Augmented Reality 2.0. Virtual realities. 2012, pp. 13-37.

5. Singh M.P. Augmented Reality interfaces. Natural Web Interfaces IEEE Internet Computing. 2013, pp. 66-70.

6. Lee K. Augmented Reality in education and training. TechTrends. 2012, vol. 56, pp. 13-21.

7. Schmalstieg D., Hollerer T. Augmented Reality: Principles and Practice. Addison-Wesley Prof. Publ., 2016, 486 p.

8. Henderson S.J., Feiner S.K. Augmented Reality in the psychomotor phase of a procedural task. Proc. IEEE Intern. Symp. on Mixed and Augmented Reality, Science and Technolgy. Basel, Switzerland, 2011, pp. 191-200.

9. Henderson S.J., Feiner S.K. Augmented Reality for maintenance and repair (ARMAR). Columbia Univ. Report, 2009, 68 p.

10. Hincapié M., Caponio A., Rios H., Mendívil E.G. An Introduction to Augmented Reality with Applications in Aeronautical Maintenance. Monterrey, Nuevo León, Mexico, 2011, pp. 1-4.

11. Li H., Mordohai P., Hua G. Attention-driven egocentric computer vision for robotic wheelchair navigation. Proc. 4th Workshop on Egocentric (First-Person), Vision. Las Vegas, NV, 2016, 2 p.

12. Holzinger A. Extravaganza tutorial on hot ideas for interactive knowledge discovery and data mining in biomedical informatics. LNCS. 2014, vol. 8609, pp. 502-515. DOI: 10.1007/978-3-319-09891-3_46.

13. Holzinger A. Interactive machine learning for health informatics: when do we need the human-in-the-loop? Brain Informatics. 2016, vol. 3, pp. 119-131. DOI: 10.1007/s40708-016-0042-6.

14. Ivaschenko A., Sitnikov P., Krivosheev A. AR guide for a robot design kit. Proc. SCIFI-IT2018 Conf. Bruges, Belgium, 2018, pp. 41-45.

15. Ivaschenko A., Gorbachenko N., Kolsanov A. Focused visualization in in-teractive applications for surgery training. Communications in Comp. and Inform. Sci. Springer Intern. Publ. AG, 2017, vol. 754, pp. 723-734. DOI: 10.1007/978-3-319-65551-2_52.

16. Ivaschenko A., Milutkin M., Sitnikov P. Accented visualization in maintenance AR guides. Proc. SCIFI-IT 2017 Conf. Bruges, Belgium, EUROSIS-ETI, 2017, pp. 42-45.

17. Applied Analysis of Random Processes. Prokhorov S.A. (Ed.), Samara, SNTs RAN Publ., 2007, 582 p.

18. Tobii. Ai-tracking. A Computer Control Technology with a Glance. Available at: https://www.tobii.ru/ (accessed July 1, 2018).

19. Lyamin A.V., Cherepovskaya E.N. An approach to biometric identification by using low-frequency eye tracker. Proc. IEEE, IET-2017. 2017, vol. 12, no. 4, pp. 881-891.

20. Cherepovskaya E.N., Lyamin A.V. An evaluation of biometric identification approach on low-frequency eye tracking data. Proc. IEEE SAMI 2017, IET-2017. pp. 123-128.

Received G2.G7.18 2G18, vol. 31, no. 4, pp. 74G-744

i Надоели баннеры? Вы всегда можете отключить рекламу.