• 제목/요약/키워드: Big-Data Platform

검색결과 503건 처리시간 0.036초

Design and Implementation of a Big Data Analytics Framework based on Cargo DTG Data for Crackdown on Overloaded Trucks

  • Kim, Bum-Soo
    • 한국컴퓨터정보학회논문지
    • /
    • 제24권12호
    • /
    • pp.67-74
    • /
    • 2019
  • 본 논문에서는 과적 화물차량 단속을 위한 대용량 화물 DTG 데이터 분석 플랫폼을 설계 및 구현한다. DTG(digital tachograph)는 차량운행기록을 실시간으로 저장하는 장치로서, 차량의 GPS, 속도, RPM, 제동유무, 이동거리 등 차량운행 관련 데이터가 1초 단위로 기록된다. 차량 운행 패턴 및 분석을 하기 위해서는 DTG 데이터의 빠른 처리가 필수적이며, 특히 대용량 DTG 데이터를 가공 및 변환하기 위해서는 빅데이터 분석 플랫폼이 필요하다. 본 논문에서는 오픈소스 기반의 빅데이터 프레임워크인 스파크(Spark)를 이용하여 과적차량 단속을 위한 대용량 화물 DTG 데이터의 분석 플랫폼을 구현하였다. 구현 결과, 실제 대용량 화물 DTG 데이터를 GIS 데이터로 변환하여 지도상에 표현하고 단속 추천 지점을 보여준다.

플랫폼 서비스 운용환경에서 빅데이터 플로우 관리를 통한 장애 상황 관리 방법 (The Method of Failure Management through Big Data Flow Management in Platform Service Operation Environment)

  • 백송기;임재현
    • 융합정보논문지
    • /
    • 제11권5호
    • /
    • pp.23-29
    • /
    • 2021
  • 최근 글로벌 플랫폼 서비스사업자가 제공하는 플랫폼 서비스의 장애로 전 세계적으로 특정 콘텐츠 서비스가 불가한 상황이 발생하고, 글로벌 서비스 시장에 사회 경제적으로 상당히 큰 문제를 초래하고 있다. 플랫폼 서비스의 안정성 확보를 위해서는 지능화된 플랫폼 운용 관리가 요구된다. 또한, 플랫폼 장애를 사전에 예방하고 대응할 수 있는 지능형 관리 기술이 필요하다. 본 연구에서는 플랫폼 운용 환경에서 비정상적인 서비스 상태 및 장애를 신속하게 감지 대응하기 위한 플랫폼 빅데이터 플로우 관리 기법 및 관리 모듈 구현 방안을 제안하였다. 서비스 및 장애 상황 감시 특성 분석 결과 빅데이터 플로우 관리 기법이 장애 감시 측면에서 전통적인 네트워크 관리 방법에 비하여 비정상적인 장애 상황 감지 및 장애 대응 특성이 30%이상 개선됨을 확인하였다. 빅데이터 플로우 관리 방법의 경우 플랫폼 시스템 장애 및 비정상적인 서비스 상태를 신속하게 감지할 수 있는 장점이 있으며 AI 기반 기술과 연계시 플랫폼 관리를 지능적으로 수행하고 장애 예방보전 능력은 크게 향상될 수 있을 것으로 기대된다.

Semantic-based Mashup Platform for Contents Convergence

  • Yongju Lee;Hongzhou Duan;Yuxiang Sun
    • International journal of advanced smart convergence
    • /
    • 제12권2호
    • /
    • pp.34-46
    • /
    • 2023
  • A growing number of large scale knowledge graphs raises several issues how knowledge graph data can be organized, discovered, and integrated efficiently. We present a novel semantic-based mashup platform for contents convergence which consists of acquisition, RDF storage, ontology learning, and mashup subsystems. This platform servers a basis for developing other more sophisticated applications required in the area of knowledge big data. Moreover, this paper proposes an entity matching method using graph convolutional network techniques as a preliminary work for automatic classification and discovery on knowledge big data. Using real DBP15K and SRPRS datasets, the performance of our method is compared with some existing entity matching methods. The experimental results show that the proposed method outperforms existing methods due to its ability to increase accuracy and reduce training time.

Knowledge Extractions, Visualizations, and Inference from the big Data in Healthcare and Medical

  • Kim, Jin Sung
    • 한국지능시스템학회논문지
    • /
    • 제23권5호
    • /
    • pp.400-405
    • /
    • 2013
  • The purpose of this study is to develop a composite platform for knowledge extractions, visualizations, and inference. Generally, the big data sets were frequently used in the healthcare and medical area. To help the knowledge managers/users working in the field, this study is focused on knowledge management (KM) based on Data Mining (DM), Knowledge Distribution Map (KDM), Decision Tree (DT), RDBMS, and SQL-inference. The proposed mechanism is composed of five key processes. Firstly, in Knowledge Parsing, it extracts logical rules from a big data set by using DM technology. Then it transforms the rules into RDB tables. Secondly, through Knowledge Maintenance, it refines and manages the knowledge to be ready for the computing of knowledge distributions. Thirdly, in Knowledge Distribution process, we can see the knowledge distributions by using the DT mechanism.Fourthly, in Knowledge Hierarchy, the platform shows the hierarchy of the knowledge. Finally, in Inference, it deduce the conclusions by using the given facts and data.This approach presents the advantages of diversity in knowledge representations and inference to improve the quality of computer-based medical diagnosis.

클라우드 기반 인공지능 교육 플랫폼 구현 (Implementation of Cloud-Based Artificial Intelligence Education Platform)

  • 위우진;문형진;류갑상
    • 사물인터넷융복합논문지
    • /
    • 제8권6호
    • /
    • pp.85-92
    • /
    • 2022
  • 빅데이터 분석 및 AI 개발자에 대한 수요가 증가하지만 이를 공급할 교육 기반이 부족한 실정이다. 본 논문에서는 클라우드 기반 인공지능 교육 플랫폼을 개발하여 교육기관 및 IT기업에서 실무 중심의 실습 교육을 저비용, 고효율로 학습할 수 있는 환경 구축에 목표를 두었다. 교육 플랫폼의 개발은 사용자별 시나리오 기획, 아키텍처 설계, 화면 설계, 개발 기능 구현, 하드웨어 구축으로 진행하였다. 본 교육 플랫폼은 쿠버네티스 기반으로 컨테이너화된 워크 로드와 서비스관리 플랫폼, 강사·수강생을 위한 강의 및 개발 플랫폼으로 구성되어 있으며, 실시간 알람 시스템과 에이지 테스트로 클라우드 안정성을 확보하였고, CI/CD 개발 환경을 제공하며, 도커 이미지 배포를 통한 신뢰성을 확보하였다. 본 교육 플랫폼의 개발로 교육분야 신사업 진출의 기회를 확대하고 AI 및 빅데이터 분야의 실무 인력양성에 기여할 것으로 판단된다.

빅데이터 분석을 이용한 패션 플랫폼과 패션 스마트 팩토리에 대한 인식 연구 (A Study on the Perception of Fashion Platforms and Fashion Smart Factories using Big Data Analysis)

  • 송은영
    • 한국의류산업학회지
    • /
    • 제23권6호
    • /
    • pp.799-809
    • /
    • 2021
  • This study aimed to grasp the perceptions and trends in fashion platforms and fashion smart factories using big data analysis. As a research method, big data analysis, fashion platform, and smart factory were identified through literature and prior studies, and text mining analysis and network analysis were performed after collecting text from the web environment between April 2019 and April 2021. After data purification with Textom, the words of fashion platform (1,0591 pieces) and fashion smart factory (9750 pieces) were used for analysis. Key words were derived, the frequency of appearance was calculated, and the results were visualized in word cloud and N-gram. The top 70 words by frequency of appearance were used to generate a matrix, structural equivalence analysis was performed, and the results were displayed using network visualization and dendrograms. The collected data revealed that smart factory had high social issues, but consumer interest and academic research were insufficient, and the amount and frequency of related words on the fashion platform were both high. As a result of structural equalization analysis, it was found that fashion platforms with strong connectivity between clusters are creating new competitiveness with service platforms that add sharing, manufacturing, and curation functions, and fashion smart factories can expect future value to grow together, according to digital technology innovation and platforms. This study can serve as a foundation for future research topics related to fashion platforms and smart factories.

응급상황에서 자동인증지원을 위한 빅데이터 처리 및 에지컴퓨팅 기반의 의료정보플랫폼 연구 (A Study on Medical Information Platform Based on Big Data Processing and Edge Computing for Supporting Automatic Authentication in Emergency Situations)

  • 함규성;강민구;주수종
    • 인터넷정보학회논문지
    • /
    • 제23권3호
    • /
    • pp.87-95
    • /
    • 2022
  • 최근 스마트기술의 발달로 의료정보플랫폼에서 환자의 생체데이터가 실시간으로 측정 및 데이터베이스에 축적되며, 환자의 응급상황을 판단할 수 있다. 또한, 의료진은 이동단말기를 이용하여 간단한 인증 이후 환자정보에 쉽게 접근이 가능하다. 그러나 이동단말기를 이용한 의료정보 접근에 있어 환자상황과 이동단말기를 고려한 인증에 대한 연구가 필요하다. 본 논문에서는 응급상황에서 의료진의 이동단말기를 이용한 의료정보 접근허가를 위해 빅데이터 처리 및 에지컴퓨팅 기반의 자동인증지원 의료정보플랫폼에 대해 연구하였다. 기 연구된 자동인증 시스템은 응급상황에서 사용자인증과 이동단말기인증을 동시에 수행하며, 상위 의료정보 접근권한을 인증된 의료진과 이동단말기에 부여하는 인증 시스템이다. 환자의 고혈압, 당뇨와 같은 환자상태를 고려한 응급상황을 판단하기 위해 빅데이터 처리 및 분석기법을 제안한 플랫폼에 적용하였다. 또한 환자의 빠른 응급상황 판단을 위해 에지컴퓨팅을 의료정보 서버 앞단에 두어 의료정보 서버 대신 에지컴퓨팅에서 응급상황을 판단하도록 하였다. 의료정보 서버는 입력된 환자정보와 축적된 생체데이터를 이용하여 응급상황 판단수치를 도출하고, 에지컴퓨팅에 전달하여 환자 맞춤형 응급상황을 판단하도록 하였다. 결론적으로, 제안한 의료정보플랫폼은 빅데이터 처리와 에지컴퓨팅을 통해 환자상태를 고려하고 응급상황을 빠르게 판단하였으며, 자동인증을 통해 응급상황에서의 신속한 인증과, 환자상황과 의료진의 역할에 따른 접근권한 부여를 통해 환자정보를 보호하였다.

빅데이터 기반 공간정보 플랫폼 설계 (Design of Spatial Data Platform on Big Data)

  • 이상원;김정희
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2016년도 춘계학술대회
    • /
    • pp.800-802
    • /
    • 2016
  • 최근 국토 정보를 다루는 지적측량분야의 수익성은 악화되고 있다. 수익구조를 강화하기 위해서는 지적측량 외의 사업분야에 진출해야할 필요가 존재한다. 현재의 국토 정보를 효과적으로 다루기 위해서는 공간정보 플랫폼 설계가 필수적이다. 이러한 배경으로 본 연구에서는 빅데이터 기반 공간정보 플랫폼을 제안한다.

  • PDF

Developing a Big Data Analysis Platform for Small and Medium-Sized Enterprises

  • Kim, Hyeon Gyu
    • 한국컴퓨터정보학회논문지
    • /
    • 제25권8호
    • /
    • pp.65-72
    • /
    • 2020
  • 금융, 통신 등의 응용 분야에서 빅데이터는 광범위하게 활용되고 있으며, 빅데이터 분석 시장은 해마다 크게 성장하고 있다. 이에 반해 소상공인들의 빅데이터 활용 실적은 저조하며, 이는 기존 시스템이 소상공인들의 여건을 충분히 반영하지 못하는 동시에 서비스 이용 가격 역시 높다는 점에 기인한다. 이를 해결하기 위한 노력의 일환으로, 본 논문에서는 소상공인에 특화된 빅데이터 분석 서비스를 제공하는 새로운 플랫폼을 개발, 제안한다. 먼저 소셜 빅데이터 분석과 관련한 기존 연구들을 비교하고, 소상공인의 마케팅을 돕기 위해 필요한 서비스 지표들을 추출한다. 다음으로 도출된 지표들을 구현한 프로토타입 시스템을 소개하고, 구현을 통해 얻어진 시스템 완성에 필요한 기술적인 이슈들을 논의한다.

Cloud Computing Platforms for Big Data Adoption and Analytics

  • Hussain, Mohammad Jabed;Alsadie, Deafallah
    • International Journal of Computer Science & Network Security
    • /
    • 제22권2호
    • /
    • pp.290-296
    • /
    • 2022
  • Big Data is a data analysis technology empowered by late advances in innovations and engineering. In any case, big data involves a colossal responsibility of equipment and handling assets, making reception expenses of big data innovation restrictive to little and medium estimated organizations. Cloud computing offers the guarantee of big data execution to little and medium measured organizations. Big Data preparing is performed through a programming worldview known as MapReduce. Normally, execution of the MapReduce worldview requires organized joined stockpiling and equal preparing. The computing needs of MapReduce writing computer programs are frequently past what little and medium measured business can submit. Cloud computing is on-request network admittance to computing assets, given by an external element. Normal arrangement models for cloud computing incorporate platform as a service (PaaS), software as a service (SaaS), framework as a service (IaaS), and equipment as a service (HaaS).