The Journal of the Korea institute of electronic communication sciences (한국전자통신학회논문지)

Korea Institute of Electronic Communication Science (한국전자통신학회)
권호 표지
DOI QR코드

DOI QR Code

Development of Augmented Reality Character System based on Markerless Tracking

마커리스 트래킹 기반 증강현실 캐릭터 시스템 개발

  • Hyun, Sim (Dept. Smart Agriculture, Sunchon National University)
  • 심현 (순천대학교 스마트농업전공)
  • Received : 2022.10.27
  • Accepted : 2022.12.17
  • Published : 2022.12.31
Download PDF
⟨ Previous Next ⟩

Abstract

In this study, real-time character navigation using AR lens developed by Nreal is developed. Real-time character navigation is not possible with general marker-based AR because NPC characters must guide while moving in an unspecified space. To replace this, a markerless AR system was developed using Digital Twin technology. Existing markerless AR is operated based on hardware such as GPS, gyroscope, and magnetic sensor, so location accuracy is low and processing time in the system is long, resulting in low reliability in real-time AR environment. In order to solve this problem, using the SLAM technique to construct a space into a 3D object and to construct a markerless AR based on point location, AR can be implemented without any hardware intervention in a real-time AR environment. This real-time AR environment configuration made it possible to implement a navigation system using characters in tourist attractions such as Suncheon Bay Garden and Suncheon Drama Filming Site.

본 연구에서는 AR글래스를 활용한 실시간 캐릭터 트래킹을 개발한다. 실시간 캐릭터 네비게이션은 특정하지 않은 공간을 가상 캐릭터가 이동하면서 안내를 해야 해서 일반적인 마커 기반 AR로는 불가능하다. 이를 대체하기 위해서 디지털 트윈 기술을 기반으로 하는 마커리스 AR 시스템을 개발하였다. 기존 마커리스 AR은 GPS, 비컨 등의 하드웨어를 기반으로 운영되기 때문에 위치에 대한 정확도가 낮고 시스템에서 처리하는 시간이 길어져 실시간 AR 환경에서는 신뢰도가 낮은 문제가 발생한다. 이러한 문제점을 해결하기 위해 SLAM 기법을 활용하여 공간을 3D 개체로 구성하고, 디지털 트윈 기반의 마커리스 AR을 구성함으로써 실시간 AR 환경에서 별도의 하드웨어 개입 없이 AR 구현이 가능하게 된다. 이러한 실시간 AR 환경 구성은 여수박람회, 순천시 잡월드, 순천만 정원박람회 등 관광지에서 캐릭터를 이용한 트래킹 시스템을 구현을 가능하게 하였다.

Keywords

Acknowledgement

이 논문은 2022년 순천대학교 교연비 사업에 의하여 연구되었음.

References

  1. R.T. Azuma, "A Survey of Augmented Reality," Teleoperators and Virtual Environments, Vol.6, No. 5, pp. 355-385, 2006. https://doi.org/10.1162/pres.1997.6.4.355
  2. K.W. Chio, D.U. Jung, S.H. Lee, and J.S. Choi,"Interaction Augment Reality System using a Hand Motion," Journal of Korea Multimedia Society, Vol. 15, No. 4, pp. 425-438, 2012. https://doi.org/10.9717/KMMS.2012.15.4.425
  3. T. Nilsen, J. Looser, "Tankwar Tabletop War Gaming in Augmented Reality," Proceedings of 2nd International Workshop on Pervasive Gaming Applications, pp. 86-91, 2005.
  4. G.Y. Seo. "A Study on the Utilization Methods of Educational Content Based on the Analysis of Mobile Games," Journal of Digital Contents Society, Vol. 14, No. 2, pp. 125-134, 2013. https://doi.org/10.9728/DCS.2013.14.2.125
  5. M. Choe, "Consideration of the Expression Characteristics of Playing Concept in Children Museum Exhibition for Improving Education Effect", vol.- no.14, 2015.
  6. AR; https://ko.wikipedia.org/wiki/%EC%A6%9D%EA%B0%95%ED%98%84%EC%8B%A4
  7. WebXR Device API explainer, https: //immersive-web.github.io/webxr/explainer.html
  8. Openxr , https://kr.khronos.org/news/press/2020/07
  9. R. Martinez-Cantin and J. A. Castellanos, "Unscented SLAM for large-scale outdoor environments," Proc. of the IEEE/RSJ Int. Conf. on Intelligent Robots and Systems, pp 328-333, 2005.
  10. J. Kim, C. Park, I. Kweon, "Vision-based navigation with efficient scene recognition," Journal of Intelligent Service Robotics, Vol.4, 2011.
  11. A. Davison, "MonoSLAM: Real-Time Single Camera SLAM," IEEE Trans. Pattern Analysis and Machine Intelligence, Vol.29, 2007.
  12. S. Yang, L. Ma, S. Jia and D. Qin, "An Improved Vision-Based Indoor Positioning Method," in IEEE Access, vol. 8, pp. 26941-26949, 2020. https://doi.org/10.1109/access.2020.2968958