• 제목/요약/키워드: 개방데이터

검색결과 727건 처리시간 0.035초

실시간 데이터 처리를 위한 개방형 데이터 프레임워크 적용 방안 (Application Of Open Data Framework For Real-Time Data Processing)

  • 박순호;김영길
    • 한국정보통신학회논문지
    • /
    • 제23권10호
    • /
    • pp.1179-1187
    • /
    • 2019
  • 오늘날의 기술 환경에서 대다수의 빅 데이터 기반 애플리케이션 및 솔루션은 스트리밍 데이터의 실시간 처리를 기반으로 한다. 빅 데이터 스트림의 실시간 처리 및 분석은 빅 데이터 기반 애플리케이션 및 솔루션 개발에서 중요한 역할을 한다. 특히 해사 분야 데이터 처리 환경에서도 데이터의 폭발적 증대에 따른 대용량 실시간 데이터를 빠르게 처리 및 분석할 수 있는 기술 개발의 필요성이 가속화되고 있다. 따라서 본 논문에서는 다양한 빅 데이터 처리를 위한 오픈소스 기술 중에 적합한 오픈소스로 NiFi, Kafka, Druid의 특징을 분석하여 한국형 e-Navigation 서비스에서 해사 분야 서비스 분석에 필요한 외부 연계 필요 정보들을 상시 최신 정보로 제공할 수 있도록 실시간 데이터 처리를 위한 개방형 데이터 프레임워크 기술 적용의 기초를 마련하고자 한다.

데이터 기반 경영을 위한 국가R&D API관리시스템의 운영 데이터 활용 가능성 탐색 (Exploring the Possibilities of Operation Data Use for Data-Driven Management in National R&D API Management System)

  • 나혜인;이준영;이병희;최광남
    • 한국콘텐츠학회논문지
    • /
    • 제20권4호
    • /
    • pp.14-24
    • /
    • 2020
  • 본 논문은 최근 세계적인 데이터 개방·공유 정책에 따라 국가R&D 데이터 기반 경영을 위한 효율적인 국가R&D API(Application Programming Interface) 관리시스템 구축과 운영 데이터 활용 가능성 탐색을 목적으로 한다. 국가R&D 데이터 개방·공유 추세에 따라 국가R&D API 서비스의 운영 데이터 분석을 통해 경영효율화 방안을 마련한다. 이를 위해 기존에 개별적으로 배포하던 국가R&D API에 대해 파라미터를 표준화하고 개별 API들을 통합하여 국가R&통합API 관리시스템을 구축한다. 국가R&D API의 서비스 호출 트래픽을 보면 측정을 시작한 2015년 대비 2019년까지 554.5%의 큰 성장세를 이루고 있다. 이에 따라 본 논문은 국가R&D통합API 관리시스템의 실제 운영에 있어서 서비스 운영관리 데이터 기반의 데이터 준비, 분석, 예측을 통해 운영 데이터 활용 가능성을 탐색한다.

두피 이미지 학습을 통한 두피 상태 진단 (Diagnosis of scalp condition through scalp image learning)

  • 이건;홍윤정;차민수;우지영
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2022년도 제65차 동계학술대회논문집 30권1호
    • /
    • pp.327-329
    • /
    • 2022
  • 본 논문에서는 AI Hub의 개방 데이터인 '유형별 두피 이미지'를 사용하여 두피 상태에 대한 신경망을 학습한다. 이 두피 상태에는 6가지 상태가 있는데, 각각의 상태들에 대한 평가를 양호(0)부터 심각(3)까지 분류하여 학습한 신경망 모델로 실제 어플리케이션으로 구현하여 사람들의 두피 사진을 찍어서 두피 상태를 진단한다. 이 과정에서 기존 개방 데이터에서 사용했던 값 비싼 두피 진단기를 사용하는 것이 아닌 값싸게 구할 수 있는 스마트폰용 현미경을 사용하여 좀 더 효율적으로 두피 상태를 진단 할 수 있는 어플리케이션을 만들었다. 몇백만 원 상당의 비싼 두피 진단기로 촬영한 사진과 비교하였을 시 평균적으로 65%의 정확도를 보여주고 있으며 데이터가 많은 유형은 77%의 정확도까지도 보여주었다.

  • PDF

데이터 스트림에서 개방 데이터 마이닝 기반의 빈발항목 탐색 (Finding Frequent Itemsets based on Open Data Mining in Data Streams)

  • 장중혁;이원석
    • 정보처리학회논문지D
    • /
    • 제10D권3호
    • /
    • pp.447-458
    • /
    • 2003
  • 기존의 데이터 마이닝 방법들은 기본적으로 지식 발견의 대상이 되는 데이터 집합이 마이닝 작업 시작 이전에 명확히 정의되는 것으로 가정하며 이러한 가정은 고정적으로 정의된 특정 데이터 집합에 내재된 정보 추출이 데이터 마이닝의 목적이 될 때 유효하다. 또한, 기존의 데이터 마이닝 방법들은 대용량의 데이터 집합에 대한 마이닝 결과를 얻는데 있어서 상당한 처리 시간을 요구한다. 따라서, 새로운 트랜잭션 데이터가 지속적으로 추가되는 데이터 스트림에서 추가된 트랜잭션의 정보들을 포함하는 최신의 마이닝 결과를 최대한 빠른 시간 안에 얻기를 기대하는 실시간 처리 환경에서는 기존의 데이터 마이닝 방법을 적용하는 것이 거의 불가능하다. 이러한 목적에 부합하기 위해서 본 논문에서는 새로운 데이터 마이닝 개념인 개방 데이터 마이닝을 제안한다. 개방 데이터 마이닝에서는 새로운 트랜잭션이 발생함에 따라 이전에 발생한 트랜잭션들에 대한 마이닝 결과가 새롭게 갱신되며 따라서 확장된 전체 트랜잭션 집합에 대한 마이닝 결과를 빠르게 얻을 수 있다. 이러한 방법을 효과적으로 구현하기 위해서는 새롭게 출현한 항목에 대한 지연추가와 이전 데이터 집합에 출현한 항목들 중에서 중요하지 않는 항목에 대한 전지작업이 병행되어야 한다. 논문에서 제안하는 알고리즘은 알고리즘의 특성을 파악하기 위한 일련의 다양한 실험을 통해서 검증된다.

의료정보서비스 접근성 향상을 위한 개방형 플랫폼 구축방안 (Open Platform for Improvement of e-Health Accessibility)

  • 이현직;김윤호
    • 디지털콘텐츠학회 논문지
    • /
    • 제18권7호
    • /
    • pp.1341-1346
    • /
    • 2017
  • 본 논문에서는 개개인의 복합적 속성과 요구를 반영한 통합된 개인 맞춤형 서비스와 지능정보기술을 기반으로 의료서비스 접근성을 향상시킬 수 있는 개방형 서비스플랫폼의 구축방안에 대하여 설계하였다. 먼저, 데이터 수집 및 저장단계는 데이터 추출, 변환, 로딩을 반복하며 신속하고 정확하게 처리한다. ETL 모듈로부터 생성된 데이터는 분산 파일 시스템에 저장한다. 데이터 분석단계는 스토리지에 저장된 과거 의료 데이터들을 기반으로 기계학습과 데이터 마이닝 분야에서 사용되고 있는 분석 알고리즘을 적용하여 다양한 패턴들을 생성한다. 데이터 처리단계에서는 데이터를 신속히 처리해야 하므로 보통 작업을 병렬 및 분산 처리하여 성능을 향상시킨다. 데이터 제공방식은 디바이스별 운영하는 플랫폼에 독립적으로 동작해야 하며, 데이터 전송 시 네트워크 부하가 적고, 다양한 형태의 서비스를 제공하기 위하여 Open API 형태로 제공한다.

공공데이터의 개방·활용 촉진을 위한 법제도 개선방안 연구 - 공공데이터 제공거부 사례를 중심으로 - (A Study on the Improvement of the Legal System for the Promotion of Opening and Utilization of Open Government Data - Focusing on cases of refusal to provide -)

  • 김은선
    • 정보화정책
    • /
    • 제30권2호
    • /
    • pp.46-67
    • /
    • 2023
  • 정부의 적극적인 공공데이터 정책에도 일부 수요가 많은 데이터가 법률을 근거로 여전히 개방되지 못한다는 지적이 있다. 본고에서는 국민의 공공데이터 제공신청이 제공거부된 사례를 중심으로 개별분야 법률이 공공데이터 개방·활용에 제약으로 작용하는 요인을 분석하고 공공데이터법과 상호 조화되는 방안을 모색해보고자 한다. 이를 위해 공공데이터 정책의 근간이 된 오픈데이터 헌장과 함께 공공데이터의 헌법적 가치를 살펴보고, 헌법적 가치를 토대로 제도적 사유로 제공거부된 사례들을 검토한다. 개인정보가 포함된 공공데이터가 대표적인데, 제도적 사유로 제공거부 된 사례의 절반 가까이 차지하고 있어 그 개선 가능성을 살펴볼 필요가 있다. 특히 개인정보 보호법이 개정되어 제한적 목적으로 정보주체의 동의 없이 가명정보 처리가 가능해졌으므로, 국민의 공공데이터에 대한 접근과 이용 확대를 위한 공공데이터법의 개정 필요성을 검토할 시점이다. 또한 선별한 개선 대상 법률들에 대하여 제약요인과 개선 필요성을 검토하여 공공데이터 개방·활용과 조화를 이루기 위한 제도적 개선방향을 제시한다.

개방형 웹 데이터 표준화 동향 (Standardization Trends of Open Web Data)

  • 김창수;김성한;이승윤;정회경
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2013년도 추계학술대회
    • /
    • pp.836-838
    • /
    • 2013
  • 최근 정보 기술의 발전 방향은 소셜 컴퓨팅(social computing), 모바일 컴퓨팅(mobile computing), 클라우드 컴퓨팅(cloud computing)으로 대표되고 있다. 최근 웹 기술은 IT 분야를 넘어 산업 간 융합을 위한 서비스 측면의 매개기술로 발전하고 있으며, 특히 웹 기반 데이터의 급속한 증가로 개방형 웹 데이터는 차세대 웹 기술의 중요성이 높아지고 있다. 이에 본 논문에서는 차세대 웹 기술의 중요성이 높아지고 있는 개방형 웹 데이터의 국내외 표준화 동향에 대해 연구하였다.

  • PDF

건설산업 공공데이터 개방의 현황과 과제 (The Current Status and Problems of Open Government Data on the Construction Sector and Its Improvement Plan)

  • 김성환;최석인;유위성
    • 한국건축시공학회:학술대회논문집
    • /
    • 한국건축시공학회 2022년도 가을 학술논문 발표대회
    • /
    • pp.219-220
    • /
    • 2022
  • In order to meet the trend, construction public data are already disclosing not only data generated at the construction site but also various data ranging from inspection reports and public construction contracts through multiple portals. However, unlike the excellence of the open performance evaluated by the number of data, it is difficult to evaluate the specific level of disclosure because there is no case of analyzing the quality, ease of use, and possibility of further opening of the public construction data set. On the other hand, performance measurement is already performed using an internationally agreed evaluation method in different fields such as real estate, population, and environment. So it is essential to analyze the current status of public data openings in the construction field and to derive improvement tasks. Therefore, this study conducted a survey of researchers with the highest system utilization targeting representative public data open systems in the construction field, such as E-AIS(세움터) and KISCON. To ensure fairness and increase comparability, the questionnaire was composed using evaluation items on implementing public data conducted annually by the World Wide Web Foundation, an international non-profit organization. With these responses, we investigated the status of public data disclosure and opinions on data quality and derived tasks to improve public data disclosure in construction through the analysis of the results.

  • PDF

지적정보 메타데이터 표준 설계 연구 (A study on design of the standard on the Cadastral Information)

  • 이보미;김택진
    • 한국GIS학회:학술대회논문집
    • /
    • 한국GIS학회 2010년도 추계학술대회
    • /
    • pp.35-41
    • /
    • 2010
  • 지적정보는 정보자체가 가지는 높은 보안과 고유의 특성으로 인해 유통 및 활용에 어려움이 있고, 타 기본공간정보와의 융복합을 위한 상호운영성이 미흡한 실정이다. 하지만, 정보의 개방과 통합은 당연한 시대적 흐름으로서 개방과 통합의 범위는 점차 확대되는 추세에 있다. 최근, 정보의 공개 및 유통을 효율적으로 지원하기 위해 공간정보에 대한 인프라 즉, 표준에 대한 논의가 활발히 진행되고 있다. 정보간 융복합과 서비스 측면에서 다양한 분야별로 많은 표준들이 개발, 운영되고 있는데, 특히, 메타데이터 표준이 관심의 대상이 되고 있다. 정보의 유통 및 서비스를 효율적으로 지원하기 위한 메타데이터 표준은 정보에 대한 정확한 설명을 제공하고, 사용자가 정보를 선택하고 활용하는데 도움을 줄 수 있는 부가정보를 제공하는 중요한 역할을 수행한다. 따라서, 본 연구에서는 지적정보가 다양한 분야에서 활용되고 수요가 창출될 수 있도록 한국의 환경에 맞는 지적정보 메타데이터 표준(안)을 설계하고자 한다. 지적정보의 특성을 감안한 메타데이터 표준의 구성을 통해 정보의 유통 및 서비스를 조기에 실현하고, 타 공간정보와의 융복합을 통한 시너지 창출 및 국가 기본공간정보로서의 역할을 충실히 수행할 수 있을 것으로 기대한다.

  • PDF