• 제목/요약/키워드: 데이터화

검색결과 11,193건 처리시간 0.041초

Graphgen: REST API를 이용한 시계열 데이터의 실시간 시각화 마이크로서비스 (Graphgen: Real-time Visualization Microservice for Time Series Data Using REST API)

  • 권동우;옥기수;지영민
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2018년도 추계학술발표대회
    • /
    • pp.581-584
    • /
    • 2018
  • 최근 다양한 분야에서 대량의 데이터를 수집하여 처리하고 분석하는 빅데이터 기술이 활용되고 있다. 빅데이터 분석을 위해서는 데이터 시각화 기술이 필수적이다. 본 논문에서는 REST API를 사용하여 시계열 데이터베이스에 데이터를 질의하고, 응답받은 시계열 데이터를 다양한 형태의 차트로 시각화하는 마이크로서비스(Graphgen)를 설계하고 구현한다. 이 서비스는 데이터의 변동에 따라 실시간으로 시각화 객체를 갱신하며, 대용량 데이터 처리의 성능저하를 최소화하도록 개발된다. Graphgen은 InfluxDB와 OpenTSDB 시계열 데이터베이스와 Bokeh 시각화 라이브러리를 지원하며, 추후 서비스 확장이 용이하도록 개발된다. 또한 부하 분산과 통합 배포 관리를 위하여 컨테이너를 기반으로 개발된다.

문화유산 데이터의 시공간상 시각화 연구 (Spatio-Temporal Visualization of Cultural Heritage Collections)

  • 박나래;전문구
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2020년도 제62차 하계학술대회논문집 28권2호
    • /
    • pp.55-57
    • /
    • 2020
  • 본 연구는 문화유산 데이터의 효과적 정보 시각화 방안을 탐색한다. 문화유산 데이터는 역사적 사회적 맥락 속에서 충실히 이해될 수 있기에, 지리적 평면과 시간 축으로 이루어지는 3차원 시공간 큐브상에 문화유산 데이터들을 배치하는 것은 문화유산의 특성을 반영하면서도 통시적·공시적 조망을 동시에 제공하는 유익한 시각화 방안이 될 수 있다. 이를 확인하기 위해 문화유산 컬렉션 데이터를 지도 평면과 시간 축으로 구성된 시공간 큐브 상에서 탐색·체험할 수 있는 웹 어플리케이션과 AR 어플리케이션을 구현하고, 이에 대한 사용자 평가를 실시했다. 평가 분석 결과 문화유산 데이터의 3차원 시각화는 데이터에 대한 총체적 시야를 제공하고 새로운 체험에 대한 관심과 호기심을 유발하는 한편, 낯선 형식으로 인한 인지적 피로가 뒤따를 수 있어 대상 데이터의 특성, 매체 형식의 특성, 사용자의 경험적 이해, 인간의 지각방식을 고려한 다각적 정보 체험 설계가 필요할 것으로 파악되었다.

  • PDF

데이터 시각화 기반의 UCI Sensor Data 분석 (UCI Sensor Data Analysis based on Data Visualization)

  • 장일식;최희조;박구만
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2020년도 추계학술대회
    • /
    • pp.21-24
    • /
    • 2020
  • 대용량의 데이터를 시각적 요소를 활용하여 눈으로 볼 수 있도록 하는 데이터 시각화에 대한 관심이 꾸준히 증가하고 있다. 데이터 시각화는 데이터의 전처리를 거쳐 차원 축소를 하여 데이터의 분포를 시각적으로 확인할 수 있다. 공개된 데이터 셋은 캐글(kaggle), 아마존 AWS 데이터셋(Amazon AWS datasets), UC 얼바인 머신러닝 저장소(UC irvine machine learning repository)등 다양하다. 본 논문에서는 UCI의 화학 가스의 데이터셋을 이용하여 딥러닝을 이용하여 다양한 환경 및 조건에서의 학습을 통한 데이터분석 및 학습 결과가 좋을 경우와 그렇지 않을 경우의 마지막 레이어의 특징 벡터를 시각화하여 직관적인 결과를 확인 가능 하도록 하였다. 또한 다차원 입력 데이터를 시각화 함으로써 시각화 된 결과가 딥러닝의 학습결과와 연관이 있는지를 확인 한다.

  • PDF

공간빅데이터 시각화 가이드라인 연구 (Development of the Guidelines for Expressing Big Data Visualization)

  • 김소연;안세윤;주한나
    • 한국콘텐츠학회논문지
    • /
    • 제21권2호
    • /
    • pp.100-112
    • /
    • 2021
  • 최근 빅데이터 기술시장의 성장과 함께 시각화 기술에 관한 관심은 지난 몇 년간 꾸준히 증가해왔다. 데이터 시각화는 현재 정보과학, 컴퓨터과학, 인간·컴퓨터 상호작용, 통계, 데이터마이닝, 지도학, 저널리즘 등의 광범위한 학문 분야에서 각기 조금씩 다른 의미로 사용되고 있다. 다학제적 연구가 필요한 스마트시티에서의 빅데이터 시각화는 사용자 중심의 스마트시티 서비스와 관련 정책을 전개하는데 있어 객관적이고 과학적인 접근을 가능하게 한다. 특히 공간 기반의 데이터 시각화는 도시정책 수립 과정에서 시각화 자료를 통해 다양한 이해관계자들의 효율적인 협업을 가능하게 한다. 본 논문은 선행연구를 통해 단순히 시각화 도구가 아닌 효과적인 정보전달 관점에서 공간기반의 빅데이터 시각화 표현 프로세스와 원리에 대해 고찰하였다. 데이터 시각화 모델 프로세스 및 시각화목적에 따른 시각화 표현기법, 디자인조형요소에 따른 특징과 시각화기법을 각각 도출하여 사용자 중심의 공간빅데이터 시각화 표현에 대한 방향성과 시사점을 제시하였다.

초등학교 3학년 학생들을 위한 데이터 시각화 교육 프로그램 개발 및 적용 (A Development and Application of Data Visualization EducationProgram for 3rd Grade Students in Elementary School)

  • 우지선;김갑수
    • 정보교육학회논문지
    • /
    • 제26권6호
    • /
    • pp.481-490
    • /
    • 2022
  • 컴퓨팅 기술의 발전으로 빅 데이터 시대가 도래하게 되어 우리는 주변의 수많은 데이터와 생활하고 있다. 초등학생들도 예외는 아니다. 따라서 초등학교부터 데이터 처리하는 것을 학습하는 것이 매우 중요하다. 초등학생들은직관적인 사고를 하기 때문에 데이터를 바로 그림으로 표현하는 데이터 시각화가 중요한 학습 요소이다. 본 연구에서는 초등학생들이 생활 속의 데이터를 시각화해 봄으로써 이것이 정보 처리 역량에 얼마나 효과적인지를 연구한다. 초등학교 3학년 학생들에게 데이터 시각화 도구를 이용하여 8차시의 데이터를 조직화하고, 시각화한 후에, 상호작용의 절차를 체험하는 것으로 데이터 시각화 프로그램을 개발하였다. 개발한 프로그램을 7개 학급에 186명의 학생들에게 적용하고 수업 전과 수업 후 지식정보처리 역량 요소를 평가하였다. 사전·사후 검사를 실시한 결과 지식정보처리 역량에 유의미한 차이가 있었다. 따라서 본 연구에서 개발한 데이터 시각화 프로그램은 효과가 있다.

인자 점수를 이용한 이상치 데이터의 군집화 (Outlier Data Clustering using Factor Score)

  • 전성해;임민택;오경환
    • 한국지능시스템학회:학술대회논문집
    • /
    • 한국퍼지및지능시스템학회 2002년도 춘계학술대회 및 임시총회
    • /
    • pp.77-80
    • /
    • 2002
  • 이상치를 포함한 학습 데이터의 군집화 전략은 일반적으로 이상치를 포함하여 학습하거나, 이상치를 제거하는 두 가지 선택이 가능하다. 이상치를 제거하지 않고 학습에 반영시켜야 할 경우 한 개 또는 소수의 이상치가 독자적인 군집을 형성하거나 객관적인 군집화를 방해하는 문제가 발생할 수 있다. 이 때 주어진 학습 데이터의 군집 결과가 이상치의 영향으로부터 벗어나기 위해 원래의 학습 데이터에 대한 변환 작업을 거친 후 군집화를 수행할 수 있다. 이러한 변환 방법으로서 본 논문에서는 차원 축소의 기법으로 알려진 인자 분석의 점수를 사용하였다. 인자 점수로 변환된 학습 데이터에 대해 계층적 군집화, K-means 그리고 자기조직화 지도 등과 같은 군집화 알고리즘을 적용하면 이상치가 자신만의 군집을 별도로 형성하지 않고 다른 학습 데이터의 군집에 소속되면서 이상회의 영향으로부터 벗어남을 실험을 통하여 확인하였다.

  • PDF

임베디드 DBMS 환경을 위한 DBMS 독립적인 데이터 동기화 기법 (A DBMS-Independent Approach for Data Synchronization in Embedded DBMS Environment)

  • 장우석;강영호;노형준;정병대;손성용;김상욱
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2002년도 가을 학술발표논문집 Vol.29 No.2 (1)
    • /
    • pp.43-45
    • /
    • 2002
  • 임베디드 DBMS는 일반적으로 고성능, 대용량의 서버 DBMS로부터 다운로드받은 데이터를 관리한다. 이와 같은 임베디드 환경에서는 대부분의 경우 클라이언트와 서버가 접속되지 않은 상태에서 데이터 변경이 이루어진다. 데이터 동기화란 서버와 클라이언트에서 비접속 기간동안 각각 발생한 변경 내용들을 서로 비교, 교환하여 데이터 불일치성을 해결하는 작업을 말한다. 다양한 이기종 DBMS가 사용되는 임베디드 DBMS 환경에서는 현재 DBMS 벤더들마다 내부적으로 자체 개발한 동기화 방식을 이용하기 때문에 이기종 DBMS간의 동기화에는 추가적인 부담이 필요하다. 본 논문에서는 사용되는 DBMS에 독립적인 데이터 동기화 방법을 제안한다. 이 방법을 이용하면 동기화가 DBMS의 응용 프로그램처럼 동작하도록 할 수 있기 때문에 DBMS의 내부 구조에 변화를 주지 않고 동기화 서버를 구현할 수 있다 이러한 DBMS에 독립적인 특징은 임베디드 DBMS와 동기화 서버를 이용한 응용 프로그램이 유연성과 상호 운용성을 가질 수 있도록 해 준다.

  • PDF

기만적 데이터 시각화 사례 연구 (Case Studies on Deceptive Data Visualization)

  • 김시현;박진완
    • 디지털콘텐츠학회 논문지
    • /
    • 제19권3호
    • /
    • pp.521-528
    • /
    • 2018
  • 데이터 시각화는 정보 전달의 유용한 도구로 자리 잡아, 전문가뿐만 아니라 일반적인 수준에서도 널리 쓰이고 있다. 하지만 효율적인 만큼 그릇된 정보를 전달하기도 쉽다는 위험을 안고 있다. 모든 데이터 시각화에는 편집자의 의도가 숨어있으며, 때로는 강력한 메시지가 담겨 있다. 이러한 의도를 파악하는 시스템을 구축하는 것은 집단이나 개인의 사상을 이해하는 데에 도움이 되고, 오용된 데이터에 대처할 수 있는 방안이 된다. 기존의 연구 방향은 효과적인 데이터 시각화 방법에 대한 고찰이나 표현 방식에 초점을 둔 연구가 대부분이다. 시각화 방식이 다양해질수록 데이터가 왜곡될 가능성이 커질 것이므로 충분한 대응책이 필요하다. 본 논문에서는 목적 지향적 환경에서 벌어지는 기만적 데이터 시각화에 대한 분석을 제시한다. 인간의 인지 프로세싱이 갖는 취약점을 바탕으로 공격 유형을 분류하여, 데이터 시각화의 맥락에서 어떠한 속임수가 발생하는지 확인한다. 이 연구는 공격적 시각화 사례를 연구하는 첫 번째 단계를 제시하여 추가 연구의 길을 열 것으로 기대한다.

한국형 데이터 시각화 리터러시 평가 개발 및 연구 동향 분석 (Development on Korean Visualization Literacy Assessment Test(K-VLAT) and Research Trend Analysis)

  • 김하늘;김성희
    • 한국정보통신학회논문지
    • /
    • 제25권11호
    • /
    • pp.1696-1707
    • /
    • 2021
  • 최근 정보 기술의 성장에 따라 디지털, 데이터, 인공지능 리터러시와 같은 다양한 리터러시에 대한 연구가 이루어지고 있다. 본 논문에서는, 빅데이터 분석에서 필수적이고, 일상생활 모바일 앱에서도 다양하게 쓰이는 데이터 시각화에 초점을 두고 있으며, 데이터 시각화 활용 능력을 측정하는 데이터 시각화 리터러시 평가 체계에 대해서 다룬다. 2016년에 개발된 영문형 데이터 시각화 활용 능력을 측정하는 평가 체계(VLAT, Visualization Literacy Assessment Test)에 대해서 설명하고, 한국형에 맞춰 개발한 K-VLAT 평가 체계를 소개한다. K-VLAT은 국내 사용자의 맥락에 맞춰 12개의 시각화와 53개의 문항을 웹서비스를 통해 제공한다. 또한, 데이터 시각화 리터러시의 연구 방향을 이해하기 위해서, 영문형 VLAT을 참조한 79건의 논문을 분석하였다. 연구 목적을 4개의 대분야 및 11개의 소분야로 분류하였으며, 데이터 시각화 리터러시와 관련한 인지, 체계에 대한 확장, 교육과의 연계, 사용자 중심형 대시보드 개발 및 효과 평가 등에 활용되고 있다. 이에 따른 K-VLAT의 향후 활용 방안에 대해서 논의한다.

영화 데이터를 위한 쌍별 규합 접근방식의 군집화 기법 (Pairwise fusion approach to cluster analysis with applications to movie data)

  • 김희진;박세영
    • 응용통계연구
    • /
    • 제35권2호
    • /
    • pp.265-283
    • /
    • 2022
  • 사용자들의 영화정보를 기록한 MovieLens 데이터는 추천 시스템 연구에서 아이디어를 탐색하고 검증하는데 상당한 가치가 있는 데이터로, 기존 데이터 분할 및 군집화 알고리즘을 사용하여 사용자 평점 데이터를 기반으로 항목 집합을 분할하는 연구 등에 사용되는 데이터이다. 본 논문에서는 기존 연구에서 대표적으로 사용되었던 영화 평점 데이터와 영화 장르 데이터를 통해 사용자의 장르 선호도를 예측하여 선호도 패턴을 기반으로 사용자를 군집화(clustering)하고, 유의미한 정보를 얻는 연구를 진행하였다. MovieLens 데이터는 영화의 전체 개수에 비해 사용자별 평균 영화 평점 수가 낮아 결측 비율이 높다. 이러한 이유로 기존의 군집화 방법을 적용하는 데 한계가 존재한다. 본 논문에서는 MovieLens 데이터 특성에 모티브를 얻어 쌍별 규합 벌점함수(pairwise fused penalty)를 활용한 볼록 군집화(convex clustering) 기반의 방법을 제안한다. 특히 결측치 대체(missing imputation)도 동시에 해결하는 최적화 문제를 통해 기존의 군집화 분석과 차별화하였다. 군집화는 반복 알고리즘인 ADMM을 통해 제안하는 최적화 문제를 풀어 진행한다. 또한 시뮬레이션과 MovieLens 데이터 적용을 통해 제안하는 군집화 방법이 기존의 방법보다 노이즈 및 이상치에 상대적으로 민감하지 않은 것으로 보인다.