Мобільний застосунок з використанням технологій доповненої реальності для візуалізації музейного контенту з урахуванням потреб осіб з порушеннями слуху

Abstract

Метою роботи є підвищення рівня доступності та інтерактивності музейного середовища для осіб з порушеннями слуху шляхом розробки мобільного застосунку на основі технологій доповненої реальності для візуалізації адаптованого музейного контенту. Методи дослідження: використано методи системного аналізу, об’єктноорієнтованого проєктування, технології мобільної розробки та доповненої реальності, методи комп’ютерного зору для розпізнавання музейних експонатів, клієнт-серверні технології обміну даними та методи тестування програмного забезпечення. Результати дослідження: розроблено кросплатформний мобільний застосунок, який забезпечує розпізнавання музейних експонатів та відображення пов’язаного інформаційного контенту в середовищі доповненої реальності. Реалізовано архітектуру програмної системи, що включає мобільний клієнт, ARмодуль, серверну підсистему обробки запитів та механізм потокового відображення текстових повідомлень. Проведене тестування підтвердило працездатність та ефективність розробленого рішення. Розроблений програмний продукт може бути використаний музеями та культурними установами для забезпечення безбар’єрного доступу до інформації, підвищення інтерактивності експозицій і покращення якості обслуговування відвідувачів з особливими потребами.

The aim of the qualification work is to improve the accessibility and interactivity of the museum environment for people with hearing impairments through the development of a mobile application based on augmented reality technologies for visualizing adapted museum content. Research methods: system analysis methods, object-oriented design methods, mobile development and augmented reality technologies, computer vision methods for museum exhibit recognition, client-server data exchange technologies, and software testing methods were used in the study. Research results: a cross-platform mobile application has been developed that provides museum exhibit recognition and visualization of related information content in an augmented reality environment. The architecture of the software system, including a mobile client, an AR module, a server-side subsystem, and a streaming text display mechanism, has been implemented. Testing confirmed the functionality and effectiveness of the developed solution. The developed software product can be used by museums and cultural institutions to provide barrier-free access to information, increase exhibition interactivity, and improve visitor experience for people with special needs.