Методи та моделі масштабування мультимодальних інтерфейсів у віртуальній та доповненій реальності

Abstract

Метою роботи є розроблення та обґрунтування методів і моделей масштабування мультимодальних інтерфейсів у віртуальній та доповненій реальності шляхом створення методології реалізації XR-системи з підтримкою природної взаємодії. Об’єкт дослідження - процеси побудови, інтеграції та масштабування мультимодальних інтерфейсів у системах віртуальної та доповненої реальності. Предмет дослідження - методи, моделі, архітектурні підходи та технологічні інструменти, що забезпечують масштабованість та ефективність мультимодальної взаємодії в XR-середовищах. Результати дослідження В роботі описано механізми підтримання масштабованості агентної системи, що дозволяють розширювати її функціональність без повної зміни архітектурного ядра та забезпечують стабільність при різних рівнях навантаження. Висновок Було реалізовано архітектурні рішення для багатомодальної взаємодії, включно з моделлю діалогового потоку, розпізнаванням об’єктів поглядом та впровадженням інтелектуального віртуального агента.