DOI QR코드

DOI QR Code

Design of Smart Platform based on Image Recognition for Lifelog

라이프로그용 영상인식 기반의 스마트 플랫폼 설계

  • Received : 2016.10.21
  • Accepted : 2016.10.31
  • Published : 2017.02.28

Abstract

In this paper, we designed a LBS-based smart platform for Lifelog service that can utilize the other's lifelog information. The conventional Lifelog service means that the system records the daily activities of the smart device user so the user can retrieve the early-recorded information later. The proposed Lifelog service platform uses the GPS/UFID location information and the various information extracted from the image as the lifelog data. Further, the proposed Lifelog platform using DB can provide the user with the Lifelog data recorded by the other service user. The system usually provide the other's Lifelog data within the 500m distance from the user and the range of distance can be adjustable. The proposed smart platform based on image recognition for Lifelog can acquire the image from the smart device directly and perform the various image recognition processing to produce the useful image attributes. And it can store the location information, image data, image attributes and the relevant web informations on the database that can be retrieved by the other use's request. The attributes stored and managed in the image information database consist of the followings: Object ID, the image type, the capture time and the image GPS coordinates. The image type attribute has the following values: the mountain, the sea, the street, the front of building, the inside of building and the portrait. The captured image can be classified into the above image type by the pattern matching image processing techniques and the user's direct selection as well. In case of the portrait-attribute, we can choose the multiple sub-attribute values from the shirt, pant, dress and accessory sub-attributes. Managing the Lifelog data in the database, the system can provide the user with the useful additional services like a path finding to the location of the other service user's Lifelog data and information.

본 논문에서는 LBS 연동형 스마트 플랫폼의 설계를 통해 타인의 라이프로그 정보를 참조할 수 있는 개인 블랙박스용 라이프 로그서비스를 제안한다. 일반적이 라이프로그 서비스는 스마트 장치 사용자의 일상적인 행위를 저장함으로써 추후에 이를 다시 확인해 볼 수 있게 해준다. 제안한 라이프로그 서비스 플랫폼은 GPS/UFID 위치 정보와 스마트기기로부터 획득한 영상에서 추출한 다양한 정보를 라이프로그 데이터로 사용한다. 또한, 데이터베이스를 구축하여 다른 사용자가 구축한 라이프로그 데이터를 참조할 수 있다. 제공하는 타인의 정보는 기본적으로 500m 이내로 제한하였으나 이러한 범위는 조절가능하다. 제안한 플랫폼은 영상인식기법을 활용하여 획득한 영상에 대한 속성을 결정한 후 위치 정보, 영상 데이터, 영상 속성 그리고 관련된 웹 정보를 데이터베이스에 저장한다. 데이터베이스에 저장되는 속성은 개체ID, 영상 형태, 획득시간, 획득 좌표이다. 사용하는 영상 형태 속성은 산, 바다, 거리, 건물 앞, 건물 내부 그리고 인물이다. 영상 속성이 인물인 경우 셔츠, 바지, 원피스, 액세서리와 같은 부속성을 부여할 수 있다. 본 연구의 결과로 스마트 디지털 기기로 부터 멀티미디어 파일 데이터를 수집하고 웹 서버로부터 웹 데이터를 수집하여, 파일 데이터와 웹 데이터를 라이프로그 데이터로 저장하고 사용자 요청에 따라 길찾기 등을 통해 라이프로그 데이터를 활용할 수 있다.

Keywords

References

  1. Changseok Bae et al, "Overview of Intelligent Gadget Technology," Electronics and Telecommunications Trends vol. 21, No. 5, pp.81-92, 2006. 10 https://ettrends.etri.re.kr/ettrends/mobile/paper.do
  2. H.S.Jeon, M.G,Kang, "Application Trend of Spatial Object IDentification based GeoSpatial Information," Review of Korean Society for Internet Information, Vol.16 No.1, 2015. 06, https://www.dbpia.co.kr/Journal/ArticleDetail/NODE06404472
  3. TTAS Committee, "Technical Report on Personalized Life Log Service," TTA, TTAS.KO-10.0234, 2007.11 https://committee.tta.or.kr/include/Download.jsp
  4. Chungyeon Lee et al, "Wearable Lifelog-based Context Awareness and its Application Scenario," 2014 KIISE Conference02, 781-785, 2014.12 www.dbpia.co.kr/Article/NODE06228638
  5. Chungyeon Lee et al, "Activity Recognition by Learning Auditory-Visual Lifelogs from Wearable Sensors," KIISE 2015 Korea computer Congress 2015, 921-923, 2015.06 http://www.dbpia.co.kr/Journal/ArticleDetail/NODE06228638
  6. http://www.wear61n.com/
  7. http://www.microsoft.com/
  8. http://lifelog.sony.com/

Cited by

  1. 마르코브 체인을 적용한 유동인구의 매출 및 이동 패턴 분석 vol.21, pp.1, 2017, https://doi.org/10.7472/jksii.2020.21.1.71