• Journal of Korea Multimedia Society
• /
• v.24 no.11
• /
• pp.1518-1525
• /
• 2021

Due to the growth of VR industry and rise of digital twin industry, the importance of implementing 3D data same as real space is increasing. However, the fact that it requires expertise personnel and huge amount of time is a problem. In this paper, we propose a system that generates point cloud data with same shape and color as a real space, just by scanning the space. The proposed system integrates 3D geometric information from lidar and color information from stereo camera into one point cloud. Since the number of 3D points generated by lidar is not enough to express a real space with good quality, some of the pixels of 2D image generated by camera are mapped to the correct 3D coordinate to increase the number of points. Additionally, to minimize the capacity, overlapping points are filtered out so that only one point exists in the same 3D coordinates. Finally, 6DoF pose information generated from lidar point cloud is replaced with the one generated from camera image to position the points to a more accurate place. Experimental results show that the proposed system easily and quickly generates point clouds very similar to the scanned space.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2022.06a
• /
• pp.253-256
• /
• 2022

실사 영상 기반의 메타버스 환경을 구축하기 위한 다수의 카메라를 통한 영상 취득 및 부호화, 전송 기술이 활발히 연구되고 있고, 이를 위해 영상 압축 표준화 단체인 moving picture experts group (MPEG) 에서는 MPEG immersive video (MIV) 표준을 개발하였다. 하지만, 현재 널리 사용되는 가상 현실 영상을 스트리밍 가능한 장비의 연산 능력으로는 MIV 기반 몰입형 영상을 스트리밍 시 복호기 동기화 문제가 발생할 수 있다. 따라서 본 논문은 저사양 및 고사양 장비에서 적응적으로 복호기 개수를 조절 가능한 geometry packing 기법을 MIV 의 참조 소프트웨어인 test model for immersive video (TMIV)에서 구현한다. 제안하는 패킹 기법은 지오메트리 영상을 패킹하여 텍스쳐 영상과 같은 높이를 가지도록 한 후 각각 단일 서브픽쳐 (subpicture) 로 부호화한다. 이후 부호화된 서브픽쳐들에 적응적으로 비트스트림 병합이 적용되어 장비의 복호기 사양에 대응한다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2011.11a
• /
• pp.330-333
• /
• 2011

TIP 기술은 2D 그림 또는 한 장의 사진으로부터 기하정보를 추출하여 3 차원 입체 효과를 만들어 영상 내부를 네비게이션할 수 있는 기술로써, 게임, 엔터테인먼트, 교육, 홍보 등 다양한 분야에서 요구되는 주요기술이다. 본 논문에서는 최근 대두되고 있는 스마트 device 의 platform 가운데 하나인 android platform 상에서의 OpenGL ES Library 를 이용한 TIP 기술 적용 및 구현 기술을 제안한다. 제안 방법은 전경객체의 추출이 어려운 상황을 감안하여 보다 사실적 장면 구성이 용이하도록 사용자의 선택에 의한 소실점을 이용하고, OpenGL ES Library 를 이용하여 3D 배경 모델을 획득하고, 이미지를 텍스쳐 매핑하여 3D 가상공간을 완성한 후 카메라의 시점 변환을 통해 이미지 내부를 네베게이션할 수 있도록 한다. 실험영상은 android platform 상의 device 에서 촬영한 이미지를 사용하고, android 2.1 및 OpenGL ES 1.0 기반으로 구축함으로써, 제안 기술을 다양한 android platform smart device 에서 적은 비용과 시간으로 응용 개발에 효과적으로 적용 가능하도록 구현하였다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2021.07a
• /
• pp.253-255
• /
• 2021

현재 코로나 사태로 비대면으로 진행이 되어 온라인 쇼핑 시장이 지속적으로 증가하고 있고, 4차 산업혁명으로 새로운 혁신 기술로 가상현실(VR)과 증강현실(AR)이 있으며, 좀 더 빠르게, 좀 더 편리하게 할 수 있어 생산성을 향상시키고 있다. 이에 본 논문은 쇼핑몰에 증강현실(AR)기술을 부합하여 사용자들에게 AR 카메라를 활용한 체형 측정 서비스, AR기술을 통해 자신 아바타에 입혀주는 피팅서비스를 통해 사용자들에게 빠르고 편리하게 맞춤형 쇼핑을 제공한다. 구현은 현재 사용 중인 운영체계 중 Android와 Ios 사용하고 있는 ARKit와 ARCore를 활용을 하여 구현한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2020.07a
• /
• pp.10-13
• /
• 2020

최근 초고화질 영상, 가상현실 등 프리미엄 콘텐츠에 대한 요구가 커지면서 360° VR과 8K TV 등의 시장이 확대되고 있다. 360° VR 영상을 만드는 데에 스티칭 기술이 사용되고 있고, 8K 영상을 촬영할 수 있는 장비는 매우 제한적이기 때문에 스티칭 기술을 통해 콘텐츠를 확보하려는 노력이 이어지고 있다. 스티칭 기술은 여러 영상을 합성하여 기존 카메라의 좁은 시야각 문제를 해결하고 보다 넓은 시야각의 영상을 만드는 기술이다. 최근에는 해당 분야에 관한 연구가 진행됨에 따라 이미지를 넘어 동영상 스티칭에 대한 연구가 주로 진행되고 있다, 기존 동영상 스티칭 방식은 이미지 스티칭 방식을 프레임마다 반복하기 때문에 시간이 오래 걸린다는 단점이 있다. 컴퓨터 비전 분야에서는 딥러닝을 활용하여 객체가 존재할 것으로 예측되는 부분에 사각형 모양의 경계 상자(Bounding box)를 생성하는 객체 탐지(Object detection) 분야에 관한 많은 연구가 이루어져 왔고 이를 기반으로 객체의 경계선을 검출하여 해당 영역만을 구분하는 객체 분할(Instance segmentation)에 대한 연구 또한 진행 중이다. 본 논문에서는 앞서 말한 스티칭 속도 문제를 해결하기 위하여 빠른 속도로 객체 분할이 가능한 YOLACT를 이용하여 스티칭 속도를 개선하는 방안을 제안한다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2022.07a
• /
• pp.465-466
• /
• 2022

본 논문에서는 딥러닝 영상인식 기술을 활용한 객체검출 모델인 YOLOv4를 활용하여 차량의 모델과 번호판인식 시스템을 제안한다. 본 논문에서 제안하는 시스템은 실시간 영상처리기술인 YOLOv4를 사용하여 차량모델 인식과 번호판 영역 검출을 하고, CNN(Convolutional Neural Network)알고리즘을 이용하여 번호판의 글자와 숫자를 인식한다. 이러한 방법을 이용한다면 카메라 1대로 차량의 모델 인식과 번호판 인식이 가능하다. 차량모델 인식과 번호판 영역 검출에는 실제 데이터를 사용하였으며, 차량 번호판 문자 인식의 경우 실제 데이터와 가상 데이터를 사용하였다. 차량 모델 인식 정확도는 92.3%, 번호판 검출 98.9%, 번호판 문자 인식 94.2%를 기록하였다.

• Smart Media Journal
• /
• v.13 no.2
• /
• pp.136-144
• /
• 2024

In recent years, with the rapid development of IT technology and the aging of the population, various solutions to the labor shortage have emerged. In the livestock industry, there are an increasing number of management systems that utilize artificial intelligence technology. The Metaverse Smart Farm is a system that combines the digital virtual world with advanced agricultural technology. With this system, farmers can monitor the health of their animals in real time without having to visit the barns, and analyze the data collected through sensors and cameras for more efficient agricultural management. In addition, the barn environment can be adjusted through a remote control function, which is expected to reduce labor and revitalize the livestock industry.

• Korean Journal of Construction Engineering and Management
• /
• v.18 no.2
• /
• pp.21-29
• /
• 2017

Recently, with having a great interest of the general public for the AR (Augmented Reality) technology, there have been lots of study to improve efficiency of a construction equipment with applying the AR technology to a construction equipment. The clear extrinsic calibration is essential to applying AR technology at the construction site without any error which came from superimposition between 'Real world' and 'Virtual world'. However, on the construction site, the clear extrinsic calibration is not possible, because of lack of time and budget for the specific survey, also, the huge error of the outdoor tracking system such as gyro, GPS system and so on. In this study, we do research about seamless superposition with unclear extrinsic calibration and the image process method for making AR navigator operating in the excavator. Based on this study, we figure that we can fully develop the AR navigator for the excavator. Furthermore, thereby operating AR navigator at many construction sites, we expect that the efficiency of the excavator will be improved. In addition, we can develop AR navigator for not only a excavator but all about construction equipment.

• Archives of design research
• /
• v.14 no.1
• /
• pp.63-70
• /
• 2001

Thanks to the inter-connection of information servers throughout the world based on the internet technology, the new sphere which actual transaction can be made like in the visible market has become conspicuous as the virtual space. The movement to realize the new business through the cyber space has been actively ongoing. In the domestic market, a lot of corporations knowing the needs of internet shopping malls have entered into this e-business but they have not made a big success comparing with internet's potentials. And, it can be attributed to the simple planes and the limitations of information provided by the cyber malls, which means that the needs of better information transfer we apparent Accordingly, in this thesis, the research on the 3-D based products and shopping malls has been made through the inter-complementary composition between the 2-D shopping malls and 3-B ones. This research consists of 3 parts. Firstly, through the research on references and existing data, it presents the analysis on consumer's characteristics and sales limits of the internet shopping mall's products. Secondly, the background of 3-D shopping mall's advent and the virtual reality technology data are put together. Finally, it presents how the development of 3-D based product modeling and shopping malls can increase the consumer's purchase power and furthermore the directions of shopping malls to go.

• KIPS Transactions on Software and Data Engineering
• /
• v.8 no.2
• /
• pp.61-66
• /
• 2019

Augmented reality is a technology that makes a virtual object appear as if it exists in reality by composing a virtual object in real time with the image captured by the camera. In order to augment the virtual object on the object existing in reality, the homography of images utilized to estimate the position and orientation of the object. The homography can be estimated by applying the RANSAC algorithm to the feature points of the images. But the homography estimation method using the RANSAC algorithm has a problem that accurate homography can not be estimated when there are many feature points in the background. In this paper, we propose a method to filter feature points of a background when the object is near and the background is relatively far away. First, we classified the depth image into relatively near region and a distant region using the Otsu's method and improve homography estimation performance by filtering feature points on the relatively distant area. As a result of experiment, processing time is shortened 71.7% compared to a conventional homography estimation method, and the number of iterations of the RANSAC algorithm was reduced 69.4%, and Inlier rate was increased 16.9%.