• 제목/요약/키워드: Big data platform

검색결과 511건 처리시간 0.023초

빅데이터 기반의 실시간 네트워크 트래픽 분석 플랫폼 설계 (On the Design of a Big Data based Real-Time Network Traffic Analysis Platform)

  • 이동환;박정찬;유찬곤;윤호상
    • 정보보호학회논문지
    • /
    • 제23권4호
    • /
    • pp.721-728
    • /
    • 2013
  • 빅데이터는 오늘날 가장 각광받고 있는 데이터 수집 및 분석기술의 경향으로, 대량의 비정형 데이터 분석을 요구하는 다양한 분야에 접목되어 효용성을 인정받고 있다. 네트워크 트래픽 분석 역시 대량의 비정형 데이터를 다루는 분야로, 빅데이터 접목시 그 효과가 극대화될 수 있다. 따라서 본 논문에서는 고도의 보안이 요구되는 군 C4I망과 같은 내부망 환경의 침해사고 및 이상행위를 실시간으로 탐지하기 위한 빅데이터 기반의 네트워크 트래픽 분석 플랫폼(RENTAP)을 소개한다. 빅데이터 분석 지원을 위해 최근 각광받고 있는 오픈소스 솔루션들을 대상으로 비교 분석을 수행하였으며, 선정된 솔루션을 기반으로 고안된 최종 설계에 대해서 설명한다.

중소중견 제조기업을 위한 공정 및 품질데이터 통합형 분석 플랫폼 (Process and Quality Data Integrated Analysis Platform for Manufacturing SMEs)

  • 최혜민;안세환;이동형;조용주
    • 산업경영시스템학회지
    • /
    • 제41권3호
    • /
    • pp.176-185
    • /
    • 2018
  • With the recent development of manufacturing technology and the diversification of consumer needs, not only the process and quality control of production have become more complicated but also the kinds of information that manufacturing facilities provide the user about process have been diversified. Therefore the importance of big data analysis also has been raised. However, most small and medium enterprises (SMEs) lack the systematic infrastructure of big data management and analysis. In particular, due to the nature of domestic manufacturing companies that rely on foreign manufacturers for most of their manufacturing facilities, the need for their own data analysis and manufacturing support applications is increasing and research has been conducted in Korea. This study proposes integrated analysis platform for process and quality analysis, considering manufacturing big data database (DB) and data characteristics. The platform is implemented in two versions, Web and C/S, to enhance accessibility which perform template based quality analysis and real-time monitoring. The user can upload data from their local PC or DB and run analysis by combining single analysis module in template in a way they want since the platform is not optimized for a particular manufacturing process. Also Java and R are used as the development language for ease of system supplementation. It is expected that the platform will be available at a low price and evolve the ability of quality analysis in SMEs.

Cultural Big Data Platform and Digital Management: Focused on Cultural Contents Industry

  • Hong, Jong Youl
    • International Journal of Advanced Culture Technology
    • /
    • 제10권3호
    • /
    • pp.287-294
    • /
    • 2022
  • This paper examines the change and its meaning of marketing strategy in business administration, which is changing along with the development of digital technology. Unlike conventional marketing, digital marketing is creating new relationships and making changes through a two-way approach rather than a one-way approach between producers and consumers. And these changes are creating new approaches not only in the problems between businesses and consumers, but also in the relationship between public institutions and citizens. In particular, the potential of platforms, which are emerging as important in digital management, is applied to public policies, and efforts are being made to establish marketing strategies for public institutions. One case of this was applied to the cultural contents industry and policy to examine specific measures and visions. The cultural big data platform is in line with digital management and continuously utilizes digital marketing strategies in the public domain, and aims to promote creative work as well as publicize it to citizens and workers in the cultural content industry. The synergy effect that will emerge from the combination of the cultural big data platform and digital management is expected to continue.

수산업 빅데이터 플랫폼 구축 방안에 대한 연구 (Study on the Big Data Platform Construction of Fisheries)

  • 최주원;정재욱;김영애;신용태
    • 정보처리학회논문지:컴퓨터 및 통신 시스템
    • /
    • 제9권8호
    • /
    • pp.181-188
    • /
    • 2020
  • 수산업은 현재 전통어로어업에서 양식업으로 패러다임이 급속히 전환되고 있으며, 수산자원 고갈, 어촌 공동화에 따른 기반 약화 등 다양한 문제점에 직면하여 있다. 이를 타개하기 위한 수산업의 기반 강화, 어촌 6차산업화, 관련 기술표준 수립, 신산업 발굴 등을 위해서 수산업의 중심산업, 주변 산업의 데이터와 공공 및 민간의 유관 데이터를 모두 포함하는 수산업 빅데이터 플랫폼의 구축이 필요하다. 데이터 센터기관이 수집, 연계, 전처리를 수행하고, 플랫폼 주관 기관이 빅데이터 플랫폼 구축, 운영 및 데이터마켓을 통한 수산업 데이터 선순환 체계를 조성하여 당면 위기 극복 및 스마트 수산업 헤게모니 확보, 가치이동의 핵심열쇠로 활용하여야 한다. 본 연구를 통하여 이를 성공적으로 추진하기 위한 정책적·기술적 빅데이터 플랫폼 구축 방안에 대하여 제안하고자 한다.

갑질 사례와 플랫폼 횡포 사례의 비교 분석 (A Comparison analysis of Gapjil and Platform Tyranny Cases)

  • 강병영
    • 한국정보시스템학회지:정보시스템연구
    • /
    • 제29권1호
    • /
    • pp.225-240
    • /
    • 2020
  • Purpose The purpose of this study is to identify features of Gapjil and platform tyranny through South Korea's Gapjil and platform tyranny cases and to suggest countermeasures to both kinds of cases and follow-up study subjects. Methodology/approach We examined South Korea's Gapjil and platform tyranny cases by using Big Data analytics. Then we made a close examination of the two typical cases, through which we compared features and countermeasures of Gapjil and those of platform tyranny. Findings Gapjil mostly occurred at conventional companies and franchise companies, between major and minor companies, or due to lack of owner's qualifications. The features of platform tyranny were excessively monopolistic structure of platform business, inadequate legal sanctions, and features of ICT companies. Establishment of legal bases for sanctions and education for platform participants were suggested as countermeasures.

Business Intelligence를 지원하기 위한 Big Data 기반 Data Lake 플랫폼의 선행 연구 (A Leading Study of Data Lake Platform based on Big Data to support Business Intelligence)

  • 이상범
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2018년도 제57차 동계학술대회논문집 26권1호
    • /
    • pp.31-34
    • /
    • 2018
  • We live in the digital era, and the characteristics of our customers in the digital era are constantly changing. That's why understanding business requirements and converting them to technical requirements is essential, and you have to understand the data model behind the business layout. Moreover, BI(Business Intelligence) is at the crux of revolutionizing enterprise to minimize losses and maximize profits. In this paper, we have described a leading study about the situation of desk-top BI(software product & programming language) in aspect of front-end side and the Data Lake platform based on Big Data by data modeling in aspect of back-end side to support the business intelligence.

  • PDF

Performance Evaluation and Analysis of Multiple Scenarios of Big Data Stream Computing on Storm Platform

  • Sun, Dawei;Yan, Hongbin;Gao, Shang;Zhou, Zhangbing
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제12권7호
    • /
    • pp.2977-2997
    • /
    • 2018
  • In big data era, fresh data grows rapidly every day. More than 30,000 gigabytes of data are created every second and the rate is accelerating. Many organizations rely heavily on real time streaming, while big data stream computing helps them spot opportunities and risks from real time big data. Storm, one of the most common online stream computing platforms, has been used for big data stream computing, with response time ranging from milliseconds to sub-seconds. The performance of Storm plays a crucial role in different application scenarios, however, few studies were conducted to evaluate the performance of Storm. In this paper, we investigate the performance of Storm under different application scenarios. Our experimental results show that throughput and latency of Storm are greatly affected by the number of instances of each vertex in task topology, and the number of available resources in data center. The fault-tolerant mechanism of Storm works well in most big data stream computing environments. As a result, it is suggested that a dynamic topology, an elastic scheduling framework, and a memory based fault-tolerant mechanism are necessary for providing high throughput and low latency services on Storm platform.

KISTI-ML 플랫폼: 과학기술 데이터를 위한 커뮤니티 기반 AI 모델 개발 도구 (KISTI-ML Platform: A Community-based Rapid AI Model Development Tool for Scientific Data)

  • 이정철;안선일
    • 인터넷정보학회논문지
    • /
    • 제20권6호
    • /
    • pp.73-84
    • /
    • 2019
  • 최근 서비스로서의 머신러닝(MLaaS) 개념은 데이터 자체를 제외하고 네트워크 서버, 스토리지 또는 데이터 과학자 없이도 생산적인 서비스 모델을 구축할 수 있다는 점에서 기계학습을 다루는 대부분의 산업 분야와 연구 그룹들의 많은 관심을 받고 있다. 그러나 과학 분야에서는 양질의 빅데이터를 확보하는 가정 자체가 커다란 도전이 된다. 즉, 연구자 간 연구 결과물의 공유가 쉽지 않을 뿐 아니라 과학기술 데이터의 비정형성 문제를 해결해야하는 문제가 선행된다. 본 논문에서 제안된 KISTI-ML 플랫폼은 과학기술 데이터를 위한 AI 모델 고속 개발 도구로서, 머신러닝에 익숙하지 않은 연구자들을 위해 웹 기반 GUI 인터페이스를 제공하고 연구자는 자신의 데이터를 이용하여 머신러닝 코드를 손쉽게 생성하고 구동할 수 있다. 또한 승인된 커뮤니티 멤버들을 중심으로 데이터셋 및 특징 추출에 사용되는 데이터전처리, 학습 네트워크 설계 등이 포함되는 프로그래밍 코드를 공유할 수 있는 환경을 제공한다.

빅데이터 분석 플랫폼 평가를 위한 ISO/IEC 9126 품질 모델 기반 평가준거 개발 (ISO/IEC 9126 Quality Model-based Assessment Criteria for Measuring the Quality of Big Data Analysis Platform)

  • 이종연
    • 정보과학회 논문지
    • /
    • 제42권4호
    • /
    • pp.459-467
    • /
    • 2015
  • 원격탐사 빅데이터 분석 플랫폼은 NASA의 위성 데이터를 다운로드하여 이를 L3 형태로 변환하고, 이를 분석하여 최종적으로 분석 결과보고서를 산출하는 시스템이다. 본 논문의 목적은 최근에 개발된 빅데이터 분석 플랫폼의 품질을 평가하기 위한 평가지표 개발을 연구목표로 한다. 따라서 본 논문은 기존의 ISO/IEC 9126-1국제 소프트웨어 품질 모델을 기반으로 원격탐사 빅데이터 플랫폼의 품질 평가지표의 개발을 연구목표로 한다. 아울러 세부적인 연구개발내용은 다음과 같다. 첫째, ISO/IEC의 소프트웨어 품질 규정과 기존의 소프트웨어 평가모델을 검토한다. 둘째, 본 논문은 원격탐사 빅데이터 분석 플랫폼을 평가하기 위한 평가영역과, 세부적인 평가요소, 평가항목, 평가기준을 정의한다. 플랫폼 품질 평가요소에는 원격탐사 빅데이터 플랫폼의 개발자 측면, 사용자 측면, 유지보수 측면에서의 품질요소 등을 포함할 것이다. 셋째, 제안된 평가지표는 설문을 통해 내용타당도, 신뢰성 분석, 확인적 요인분석 및 경로분석을 통한 구인타당도의 통계분석을 통해 그 타당성과 적합성 검증을 입증하였으며, 통계도구로 SPSS 20.0 프로그램과 Amos 20.0을 이용하여 실험하였다. 마지막으로 본 연구결과는 빅데이터 분석 플랫폼에 대한 평가준거 개발의 첫 시도라는 점에서 중요하며, 앞으로 개발될 유사 빅데이터 플랫폼의 평가준거의 기초자료로서 활용이 기대되고 플랫폼의 평가기준의 토대가 될 것이라 기대된다.

스마트 시티의 발전을 위한 빅데이터 플랫폼 구축과 적용 (Big Data Platform Construction and Application for Smart City Development)

  • 문승혁
    • 문화기술의 융합
    • /
    • 제6권2호
    • /
    • pp.529-534
    • /
    • 2020
  • 인류 문명의 발전은 산업화에 따른 도시의 발전과 운송 기술의 진화와 맥을 같이한다. 지금까지의 도시 발전은 수송비 절감과 한정된 중심업무 지구로서의 토지 이용 요구에 따라 진행되어왔다. 도시 인구 밀집도의 지속적인 증가는 지가상승, 교통 혼잡, 빈부격차, 공해발생 등과 같이 사회·경제적으로 많은 문제를 일으켜 왔고 현재의 도시 생태 시스템으로는 전반적인 해결에 어려움이 있다. 그러나 문제의 해결을 위한 실마리는 바로 도시생태계 내에서 찾을 수 있다. 서울 심야버스 운행 노선의 설계는 바로 심야의 도시 내 이동 인구의 흐름을 정보통신 기술을 이용해 분석하여 얻은 결과이다. 이렇듯 도시 문제의 해결은 도시 생태계의 분석에서 출발하는 것이 타당하다. 문제의 원인을 알았다면 시민의 삶의 질을 높이기 위해 빅데이터 플랫폼 구축이 필요하고 이를 통한 해결이 가능하다. 이 플랫폼의 중심에는 정보통신 기술의 기반 하에 도시의 구성 요소와 연결되어 실시간 수집, 분석 및 적용되는 빅데이터가 자리 잡고 있어야한다. 본 연구를 통해 지속 가능한 스마트 시티를 위한 빅데이터 플랫폼 구축과 적용 방안에 대하여 고찰한다.