• 제목/요약/키워드: Big data Era

검색결과 361건 처리시간 0.027초

신재생에너지 국가참조표준 시스템 구축 및 개발 - 모델 기반 표준기상년 (System Construction and Data Development of National Standard Reference for Renewable Energy - Model-Based Standard Meteorological Year)

  • 김보영;김창기;윤창열;김현구;강용혁
    • 신재생에너지
    • /
    • 제20권1호
    • /
    • pp.95-101
    • /
    • 2024
  • Since 1990, the Renewable Big Data Research Lab at the Korea Institute of Energy Technology has been observing solar radiation at 16 sites across South Korea. Serving as the National Reference Standard Data Center for Renewable Energy since 2012, it produces essential data for the sector. By 2020, it standardized meteorological year data from 22 sites. Despite user demand for data from approximately 260 sites, equivalent to South Korea's municipalities, this need exceeds the capability of measurement-based data. In response, our team developed a method to derive solar radiation data from satellite images, covering South Korea in 400,000 grids of 500 m × 500 m each. Utilizing satellite-derived data and ERA5-Land reanalysis data from the European Centre for Medium-Range Weather Forecasts (ECMWF), we produced standard meteorological year data for 1,000 sites. Our research also focused on data measurement traceability and uncertainty estimation, ensuring the reliability of our model data and the traceability of existing measurement-based data.

A Study of Ginseng Culture within 'Joseonwangjosilok' through Textual Frequency Analysis

  • Mi-Hye Kim
    • 셀메드
    • /
    • 제14권2호
    • /
    • pp.2.1-2.10
    • /
    • 2024
  • Through big data analysis of the 'Joseonwangjosilok', this study examines the perception of ginseng among the ruling class and its utilization during the Joseon era. It aims to provide foundational data for the development of ginseng into a high-value cultural commodity. The focus of this research, the Joseonwangjosilok, comprises 1,968 volumes in 948 books, spanning a record of 518 years. Data was collected through web crawling on the website of the National Institute of Korean History, followed by frequency analysis of significant words. To assess the interest in ginseng across the reigns of 27 kings during the Joseon era, ginseng frequency records were adjusted based on years in power and the number of articles, creating an interest index for comparative rankings across reigns. Analysis revealed higher interest in ginseng during the reigns of King Jeongjo and King Yeongjo in the 18th century, King Sunjo in the 19th century, King Sejong in the 15th century, King Sukjong in the 17th century, and King Gojong in the 19th century. Examining the temporal emergence and changes in ginseng during the Joseon era, general ginseng types like insam and sansam had the highest frequency in the 15th century. It appears that Korea adeptly utilized ceremonial goods in diplomatic relations with China and Japan, meeting the demand for ginseng from their royal and aristocratic societies. Processed ginseng varieties such as hongsam and posam, along with traded and taxed ginseng, showed peak frequency in the 18th century. This coincided with increased cultivation, allowing a higher supply and fostering the development of ginseng processing technologies like hongsam.

혁신확산이론 기반 소비자 행위의도에 관한 메타분석 (A Meta Analysis of Innovation Diffusion Theory based on Behavioral Intention of Consumer)

  • 남수태;김도관;진찬용
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2017년도 추계학술대회
    • /
    • pp.140-141
    • /
    • 2017
  • 빅데이터 분석은 데이터 저장소에 저장된 대용량 데이터 속에서 의미 있는 새로운 상관관계, 패턴, 추세를 발견하여 새로운 가치를 창출하는 과정이다. 또한 빅데이터 분석은 소셜 빅데이터, 실시간 사물지능통신(M2M; Machine to Machine), 센서 데이터, 기업 고객관계 데이터 등 도처에 존재하는 다양한 성격의 빅데이터를 효과적으로 분석하는 것을 말한다. 빅데이터 시대에는 단순히 데이터 베이스에 잘 정리된 정형 데이터뿐만 아니라 인터넷, 소셜 네트워크 서비스, 모바일 환경에서 폭발적으로 생성되는 웹 문서, 이메일, 소셜 데이터 등 비정형 빅데이터를 효과적으로 분석하는 것이 무엇보다 중요해졌다. 그런데 메타분석은 여러 실증연구의 정량적인 결과를 통합과 분석을 통해 전체 결과를 조망할 기회를 제공하는 통계적 통합 방법이다. 따라서 본 연구는 우리나라에서 2000년-2017년 사이 혁신확산이론 모델을 기반으로 한 주제로 출판된 연구 50개 논문 750개 샘플을 대상으로 하였다.

  • PDF

원전 상태 감시 및 조기 경보용 빅데이터 시범 플랫폼의 설계를 위한 시스템 엔지니어링 방법론 적용 연구 (A Study on the Application of SE Approach to the Design of Health Monitoring Pilot Platform utilizing Big Data in the Nuclear Power Plant (NPP))

  • 차재민;손충연;황동식;신중욱;염충섭
    • 시스템엔지니어링학술지
    • /
    • 제11권2호
    • /
    • pp.13-29
    • /
    • 2015
  • With the era of big data, the big data has been expected to have a large impact in the NPP safety areas. Although high interests of the big data for the NPP safety, only a limited researches concerning this issue are revealed. Especially, researches on the logical/physical structure and systematic design methods for the big data platform for the NPP safety were not dealt with. In this research, we design a new big data pilot platform for the NPP safety especially focusing on health monitoring and early warning services. For this, we propose a tailored design process based on SE approaches to manage inherent high complexities of the platform design. The proposed design process is consist of several steps from elicitate stakeholders to integration test via define operational concept and scenarios, and system requirements, design a conceptual functional architecture, select alternative physical modules for the derived functions and assess the applicability of the alternative modules, design a conceptual physical architecture, implement and integrate the physical modules. From the design process, this paper covers until the conceptual physical architecture design. In the following paper, the rest of the design process and results of the field test will be shown.

빅데이터 환경 분석과 글로벌 경쟁력 확보 방안에 대한 연구 (A Study on Securing Global Big Data Competitiveness based on its Environment Analysis)

  • 문승혁
    • 문화기술의 융합
    • /
    • 제5권2호
    • /
    • pp.361-366
    • /
    • 2019
  • 현대 지능정보사회에서 매일 새롭게 만들어지고 유통되는 데이터의 양은 상상을 초월한다. SNS나 인터넷을 통한 데이터로부터 정부나 기업으로부터 창출되는 정보에 이르기까지 다양하다. 이러한 다양한 데이터들이 가공되지 않은 원유와 같이 무한한 가치를 지닌 채 우리 곁에 있다. 축적된 데이터에서 유용한 상관관계를 찾아내고 미래의 불확실성에 대한 예측력을 강화하기 위하여 데이터 마이닝 등을 통한 빅데이터 분석 및 활용은 현대 산업사회에서 모든 영역에 걸쳐 그 중요성이 증대되고 있다. 본 논문에서는 복잡한 현대사회가 생산해 내는 빅데이터의 효율적 관리 및 활용에 대하여 연구한다. 또한 4차 산업혁명시대에 빅데이터를 기반으로 전반적인 산업 경쟁력을 확보하기 위한 전략, 산업 간 시너지 창출 및 비용의 절감과 효과적인 적용방안에 대하여 고찰한다.

A Classification Algorithm Based on Data Clustering and Data Reduction for Intrusion Detection System over Big Data

  • Wang, Qiuhua;Ouyang, Xiaoqin;Zhan, Jiacheng
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제13권7호
    • /
    • pp.3714-3732
    • /
    • 2019
  • With the rapid development of network, Intrusion Detection System(IDS) plays a more and more important role in network applications. Many data mining algorithms are used to build IDS. However, due to the advent of big data era, massive data are generated. When dealing with large-scale data sets, most data mining algorithms suffer from a high computational burden which makes IDS much less efficient. To build an efficient IDS over big data, we propose a classification algorithm based on data clustering and data reduction. In the training stage, the training data are divided into clusters with similar size by Mini Batch K-Means algorithm, meanwhile, the center of each cluster is used as its index. Then, we select representative instances for each cluster to perform the task of data reduction and use the clusters that consist of representative instances to build a K-Nearest Neighbor(KNN) detection model. In the detection stage, we sort clusters according to the distances between the test sample and cluster indexes, and obtain k nearest clusters where we find k nearest neighbors. Experimental results show that searching neighbors by cluster indexes reduces the computational complexity significantly, and classification with reduced data of representative instances not only improves the efficiency, but also maintains high accuracy.

결합 연결구조 기반의 동적 개인 지식네트워크 설계 (Dynamic Personal Knowledge Network Design based on Correlated Connection Structure)

  • 심정연
    • 컴퓨터교육학회논문지
    • /
    • 제18권6호
    • /
    • pp.71-79
    • /
    • 2015
  • 클라우드와 빅네이터의 새로운 시대에서 필요한 데이터를 방대한 데이터 풀로부터 어떻게 찾아내고 활용하느냐는 매우 중요한 일이다. 이러한 빅데이터의 시대에는 무엇보다도 방대하고도 변화무쌍한 데이터를 잘 처리하고 유용한 정보를 신속하게 획득할 수 있는 진화된 형태의 효율적 지능적 지식시스템 설계를 필요로 한다. 따라서 본 연구에서는 진화된 지능 시스템 연구의 하나로서 구조적으로 재구성될 수 있는 동적 개인적 지식네트워크를 제안하고자 한다. 작은 공간에 큰 세계를 매핑하여 효율적으로 처리할 수 있는 인간 두뇌의 기능과 이 안에서 일어나는 뉴로다이나믹스 메커니즘에 착안하여 구조적 유연성을 갖는 지능 시스템을 설계하였다. 서로 다른 네트워크의 구조적-기능적 결합이 가능하도록 개인 지식네트워크를 구조화하고 핵심 영역에 속하는 공통 노드를 찾아 결합을 하며 재구성하는 기능을 부여하였다. 또한 시스템이 재구성된 지식네트워크로부터 최적 경로를 추출하며 추출된 경로를 가지고 추론 프로세스를 진행하는 기능 갖도록 구상하였다.

사물 인터넷 시대의 교회의 사회적 책임 - 5대 본질 요소 중심으로 (The Church's Social Responsibility in the IoT Era - Focus on the five essential elements)

  • 이면재
    • 사물인터넷융복합논문지
    • /
    • 제7권1호
    • /
    • pp.27-34
    • /
    • 2021
  • 현대 사회는 사물인터넷, 빅데이타 등으로 급속하게 발전하고 있으며 코로나 시대에도 발전하는 산업이 있다. 그러나, 교회는 코로나 시대에 발전하지 못하고 충분히 대응하지 못하고 있으며 교회의 존립 자체를 흔들고 있다. 교회의 본질은 예배, 전도, 교육, 봉사, 교제로 구성된다. 비대면의 안전을 중요시하는 코로나 시대에는 본질은 변화하지 않지만 사회적 책임감이 있게 교회의 본질을 구현하는 노력이 필요하다. 본 논문은 이러한 측면에서 교회의 5대 본질 요소를 중심으로 교회의 사회적 책임을 논한다. 이를 위해 교회의 본질적 요소를 살펴보고, 코로나 시대에 적합한 구현 방법을 연구한다.

고차원자료에서의 다중검정의 활용 (Multiple testing and its applications in high-dimension)

  • 장원철
    • Journal of the Korean Data and Information Science Society
    • /
    • 제24권5호
    • /
    • pp.1063-1076
    • /
    • 2013
  • 현대 과학기술의 발전으로 빅데이터의 시대가 도래하였다, 이러한 빅데이터는 여러가지 과학적 문제에 대한 해답을 제공하지만 반면에 이로 인해 새로운 도전에 직면하고 있다. 마이크로어레이 자료와 같은 고차원자료는 이러한 빅데이터에서 흔히 볼 수 있는 유형중의 하나이다. 본 논문에서는 고차원 자료분석에 많이 쓰이고 있는 대역검정과 동시검정, 그리고 이의 응용에 대한 소개를 한다.

맵리듀스를 사용한 디컴바인드 분산 VQ 코드북 생성 방법 (Decombined Distributed Parallel VQ Codebook Generation Based on MapReduce)

  • 이현진
    • 디지털콘텐츠학회 논문지
    • /
    • 제15권3호
    • /
    • pp.365-371
    • /
    • 2014
  • 빅 데이터(Big Data)시대로 접어들면서 기존의 IT 환경에서 만들어진 알고리즘들은 하둡과 같은 분산 아키텍처에 그대로 적용할 수 없거나 효율이 떨어진다. 따라서, 맵리듀스와 같은 분산 프레임워크를 적용한 새로운 알고리즘들이 필요하다. 벡터 양자화에 많이 사용되는 Lloyd의 알고리즘도 맵리듀스를 사용하여 개발이 이루어지고 있다. 본 논문에서는 기존의 맵리듀스를 사용한 분산 VQ 코드북 생성 알고리즘을 수정하여 좀 더 빠른 분석 결과를 보일 수 있는 디컴바인드 분산 VQ 코드북 생성 알고리즘을 제안하였다. 제안하는 알고리즘을 빅 데이터에 적용한 결과 기존 방법보다 높은 성능을 보인 것을 확인할 수 있었다.