• 제목/요약/키워드: 빅데이터 수집

검색결과 1,002건 처리시간 0.029초

제조기업 현장 데이터를 이용한 빅데이터 분석시스템 모델

  • 김재중;성백민;유재곤;강찬우;김종배
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2015년도 춘계학술대회
    • /
    • pp.741-743
    • /
    • 2015
  • 오늘날 BI(Business Intelligence)시스템 다차원 데이터를 다루는 많은 방법들이 제안되어 TB 이상의 데이터를 다룰 수 있다. 하지만 IT 전문가 및 IT에 대한 투자여력이 충분하지 않은 중소 제조 기업들은 발 맞춰가기 힘들다. 또한 생산관리시스템(MES)을 미 도입한 기업이 대다수이고, 존재하는 현장데이터의 대부분도 수기데이터 또는 Excel 데이터로 보관 되어 있어, 수작업에 의한 데이터 분석과 의사결정을 수행한다. 이로 인해, 불량 요인 파악이나 이상 현상 파악이 불분명하기 때문에 데이터 분석에 어려움을 겪는다. 이에 본 연구에서는 중소제조기업의 경쟁력 강화를 위하여 제조 기업현장에서 사용되는 데이터를 자동으로 수집하여 정제 및 처리하여 저장이 가능하도록 하는 빅 데이터 분석 시스템 모델을 개발하였다. 이 분석 시스템 모델은 ERP, MIS 등에 존재하는 데이터들이 각 시스템의 DB 기능을 활용하여 데이터를 추출하고 정제하여 수집하는 ETL(Extract Transform Loading)과정을 통한다. 현장에서 비정형으로 기록되고 있는 정보들(ex. Excel)은 ODE(Office Data Excavation)모듈을 통해 문서의 패턴을 자동으로 인식하고 정형화된 정보로서 추출, 정제되어 수집된다. 저장된 데이터는 오픈소스 데이터 시각화 라이브러리인 D3.js를 이용하여 다양한 chart들을 통한 강력한 시각효과를 제공함으로써, 정보간의 연관 관계 및 다차원 분석의 기반을 마련하여 의사결정체계를 효과적으로 지원한다. 또한, 높은 가격에 형성되어 있는 빅데이터 솔루션을 대신해 오픈소스 Spago BI를 이용하여 경제적인 빅 데이터 솔루션을 제공한다. 본 연구의 기대효과로는 첫째, 현장 데이터 중심의 효과적인 의사결정 기반을 마련할 수 있다. 둘째, 통합 데이터 기반의 연관/다차원 분석으로 경영 효율성이 향상된다. 마지막으로, 중소 제조기업 환경에 적합한 분석 시스템을 구축함으로써 경쟁력과 생산력을 강화한다.

  • PDF

키워드 네트워크 분석을 이용한 빅데이터 특허 분석 (Big Data Patent Analysis Using Social Network Analysis)

  • 최주철
    • 한국융합학회논문지
    • /
    • 제9권2호
    • /
    • pp.251-257
    • /
    • 2018
  • 빅데이터의 활용은 비즈니스 가치를 높이는데 필수요소가 됨에 따라 빅데이터 시장의 규모가 점점 더 커지고 있다. 이에 따라 빅데이터 시장을 선점하기 위해서는 경쟁력 있는 특허를 선점하는 것이 중요하다. 본 연구에서는 빅데이터 특허의 동향을 분석하기 위하여 영문 키워드 네트워크 기반 특허분석을 수행하였다. 분석 절차는 빅데이터 수집 및 전처리, 네트워크 구성, 네트워크 분석으로 구성되어 있다. 연구 결과는 다음과 같다. 빅데이터 특허 대다수는 예측 등을 위한 데이터 처리를 위한 특허이며, analysis, process, information, data, prediction, server, service, construction 키워드가 연결정도 중심성 및 매개 중심성이 높았다. 본 연구의 분석결과는 향후 빅데이터 특허 출원 시 참고할 수 있는 유용한 정보로 활용될 수 있다.

농업관련기업의 빅데이터 수용의도에 미치는 영향: 농업관련기업 종사자 중심으로

  • 류가현;허철무
    • 한국벤처창업학회:학술대회논문집
    • /
    • 한국벤처창업학회 2021년도 추계학술대회
    • /
    • pp.129-134
    • /
    • 2021
  • 농업은 잦은 자연재해, 코로나 같은 예측하기 힘든 불확실성이 높아지는 상황이며 이를 해결하기 위해 새로운 기술적 접근방안과 돌파구 마련이 필요하다. ICT의 급속한 발전과 4차 산업혁명 시대가 도래하면서 데이터의 중요성은 더욱 커지고 있다. 빅데이터는 농업이 직면한 다양한 기술적 난제를 해결함과 동시에 생산,소비,유통 분야의 밸류체인 혁신을 통해 높은 경쟁력을 확보할 수 있게 핵심 요소가 될 것이다. 실제 농업 분야의 해외 사례를 살펴보면 주로 빅데이터에 대한 수집 분석이 기업을 중심으로 이루어지고 있고 기업의 새로운 가치 창출에 중요한 역할을 담당하고 있어 상업적 측면에서 활용가치가 매우 높음을 알 수 있다. 우리나라도 기업의 빅데이터 활용을 위한 다양한 시도가 이루어지고 있으나 아직은 대기업, 소수의 혁신기술 기반 중소기업이 대부분이다. 기업의 빅데이터 활용에 영향을 미치는 연구는 계속 진행되고 있으나, 산업별 특성이 반영되어 결과는 상이하게 나타났다. 또한 대부분의 연구가 조직 차원에서 초기 도입 의도에 영향을 주는 요인 파악에 집중하였다. 반면 기업이 빅데이터를 활용하여 성과를 창출하기 위해서는 각 분야 현업 종사자들의 지속적인 활용 의도에 영향을 미치는 요인에 관한 연구가 필요하다. 따라서 본 연구는 혁신기술 수용 의도를 파악하는데 높은 설명력을 나타내는 통합기술수용이론(UTAUT)과 혁신성향 변수를 활용하여 농업 관련 기업 종사들의 빅데이터 수용 의도에 미치는 영향 요인들을 살펴보고 경제적 혜택과 실용적 혜택의 매개 효과를 분석하고자 한다. 실제 농업 관련 기업 종사자 대상 설문을 통한 실증 연구를 통해 현장 종사자들의 빅데이터 활용 수준을 높이고 우수의 고급 인력을 확보하여 육성하기 위한 방안을 제시하여 농업관련분야 기업의 빅데이터 활성화 정책 도출에 시사점을 제시하고자 한다.

  • PDF

조선해양산업과 ICT융합모델로서의 선박운항 빅데이터

  • 김웅규
    • 기계저널
    • /
    • 제54권12호
    • /
    • pp.49-52
    • /
    • 2014
  • 선박의 설계, 건조로부터 인도와 용선, 운항, 폐선에 이르기까지의 전 생명주기에 걸쳐, 선박에 탑재된 제반 항해, 통신, 엔진, 장비 및 기자재 등으로부터 데이터를 수집, 축적, 분류 및 분석, 가공하고 조선소, 선주, 용선회사나 국제기구 등이 필요한 형태로 제공하여 선대의 관리, 운항수지의 분석 및 개선, 경제선박의 설계 등에 활용할 수 있도록 선박운항 빅데이터를 구축할 필요성이 있다. 글로벌위치시스템, 선박과 해상에서의 통신시스템, 지리정보시스템 및 센서의 발달은 선박운항 빅데이터의 출현을 가능하게 하였다.

  • PDF

빅데이터 시대의 도래로 인한 지식재산권 침해 및 이에 대한 법적 구제수단의 고찰 (A Study on Legal Remedies for Intellectual Property Rights Infringements as Coming the Era of Big Data)

  • 김경환;박남제
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2013년도 추계학술발표대회
    • /
    • pp.1635-1638
    • /
    • 2013
  • 바야흐로 디지털 데이터의 빅뱅 시대로 진입하고 있다. 정보통신기술의 급속한 발전으로 인해 인터넷은 사회 전 분야를 변화시키고 있으며, 스마트 단말기, 사물인터넷, 소셜네트워크, 실시간 데이터 수집 장치, 지리정보시스템 등의 등장과 기타 여러 가지 새로운 형태의 데이터 소스가 출현하였다. 이에 따라 데이터 량이 폭발적으로 증가하고 있으며, 한 번에 처리해야 할 디지털 정보량이 수십 테라바이트에서 제타바이트에서 이르는 이른바 빅데이터 시대가 도래한 것이다. 그러나 빅데이터 기술의 빠른 성장에 비해 빅데이터 생태계의 근간이 되는 기술의 보호나 지식재산권의 침해로부터 관련 기술을 보호하기 위한 법적 구제수단은 미비한 형편이다. 이에 본 논문에서는 빅데이터 시대의 지식재산권 침해 유형을 분류하고, 현행법 하에서의 법적 구제수단에 대해 알아본다.

Google Analytics API를 연동한 R 프로그래밍 데이터 시각화 (Data Visualization of R Programming using Google Analytics API)

  • 안장근;장시웅
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2017년도 추계학술대회
    • /
    • pp.290-293
    • /
    • 2017
  • 최근 IoT 기술발달로 인한 스마트폰 및 대용량 미디어기기 사용증가로 인터넷 네트워크 사용량이 폭발적으로 증가되고 있고, 이러한 데이터 사용량 급증으로 대량의 데이터를 지칭하는 빅데이터 수집 및 분석에 많은 기업과 정부가 주목하고 있다. 빅데이터는 기존에 없던 새로운 데이터의 구축이 아니며, 그동안 축적된 다방면의 방대한 데이터의 집합이라 할 수 있다. 빅데이터의 이용 및 분석에 대한 기업 정부 학계의 수요는 증가하고 있지만, 고난도의 빅데이터 분석을 위한 인프라 구축이 선결과제이어서, 이러한 인프라구축 비용 때문에 빅데이터 분석이 일선 산업분야에 바로 적용하는데 많은 장애요인이 되어 데이터 분석가들의 빅데이터 분석에 애로사항으로 존재하고 있다. 이러한 어려움을 해소하기 위한 방안으로 새로운 인프라 구축 없이 Google Analytics API를 연동한 R 프로그래밍의 데이터 시각화를 활용한 데이터 분석 방안을 제시하고자 한다. 본 연구에서는 구글 애널리틱스 API를 연동하여 사용자 웹사이트의 사용자접속, 사이트운영, 이벤트 발생 등의 데이터를 R 프로그램을 활용하여 사이트 현황을 데이터 시각화로 분석하고 운영중인 웹사이트에 적용 가능한 콘텐츠 개발 방안에 대해 연구하였다.

  • PDF

동시출현 단어분석을 활용한 빅데이터 관련 연구동향 분석 (The Research Trends about the Big Data Using Co-word Analysis)

  • 김완종
    • 한국정보관리학회:학술대회논문집
    • /
    • 한국정보관리학회 2014년도 제21회 학술대회 논문집
    • /
    • pp.17-20
    • /
    • 2014
  • 본 연구는 동시출현 단어분석 기법을 이용하여 최근 전세계적으로 많은 주목을 받고 있는 빅데이터(Big Data) 관련 연구 동향과 연구 영역을 분석하는 것을 목적으로 한다. 이를 위하여 인용색인데이터베이스인 Web of Science SCIE(Science Citation Index Expanded)에서 분석 대상 논문을 수집하였다. 논문 수집을 위한 검색식은 은 Title(논문 제목), Abstract(초록), Author Keywords(저자 키워드), Keywords $Plus^{(R)}$의 네 가지 필드를 동시에 검색하는 주제어(topic)가 "big data"를 포함하고 있는 논문 563편을 대상으로 동시출현단어 분석을 수행하였다.

  • PDF

빅데이터 분석에 기반한 아동학대의 이해 -머신러닝 알고리즘 개발 기초연구- (Understanding Child Abuse Based on Big Data Analysis -A Basic Study on the Development of Machine Learning Algorithm-)

  • 배정호;범은애
    • 사물인터넷융복합논문지
    • /
    • 제8권4호
    • /
    • pp.57-63
    • /
    • 2022
  • 본 연구의 목적은 아동학대 예방을 위한 방안 마련의 일환으로 빅데이터 분석과 머신러닝 알고리즘을 활용한 정책개발의 기초자료를 제공하는데 있다. 아동학대 예방을 위한 머신러닝 알고리즘 개발을 위한 빅데이터 분석을 위해 학술데이터베이스와 사회관계망서비스 자료를 빅데이터로 정의하고 빈도, 연관어, 감성분석을 시행하였다. 연구결과 예방적 아동학대 알고리즘은 학술빅데이터 분석에 나타난 아동학대 관련 세 주체 피해아동, 가해양육자, 정부당국의 관점에서 아동학대 예방을 위한 데이터 수집 및 공유 네트워크 시스템 마련을 통해 개발이 가능할 것이다. 또한 아동학대 피해아동의 특성에서 자아개념 저하 등으로 우울 및 불안이 나타남을 단서로 영유아 자아존중감 및 우울, 불안 검사를 제도화함으로써 가능할 것이다. 아동학대 예방을 위한 빅데이터 수집 및 분석, 알고리즘 개발 연구의 지속적 진행을 제안하며 아동학대 예방을 위한 실효적 정책 마련이 실현되어 아동학대범죄가 근절되기를 기대한다.

빅데이터 기반의 전력 에너지 서비스의 개발

  • 이효섭;이선정;김진성;최재필
    • 지열에너지저널
    • /
    • 제11권2호
    • /
    • pp.20-31
    • /
    • 2015
  • 최신의 전력 계측 시스템은 IOT 기술을 비롯한 정보통신기술(ICT)을 에너지 영역에 접목함으로써 종래의 15분, 건물별 측정 단위를 뛰어넘는 실시간, 기기별 모니터링에 도전하고 있다. 실시간, 기기별이라는 측정 단위의 급격한 변화를 통한 데이터 전송량의 폭발적인 증가는 종래의 데이터 시스템이 처리할 수 있는 한계를 보여주고 있다. 본 글에서는, 매우 세밀한 단위로 측정된 전력 계측 센서의 많은 양의 데이터를 실시간으로 수집하고 처리하기 위한 새로운 데이터 관리 구조를 제시하고 있다. 특히, 오픈소스 기술에 기반한 빅데이터 분석 기술과 상용 클라우드 플랫폼을 활용함으로써 현실에서 손쉽게 적용할 수 있는 방안을 제시한다. 해당 시스템을 통하여 수집된 초고해상도 전력 데이터는 종래와는 다른 새로운 차원의 서비스를 발굴할 수 있는 근간이 된다. 본 글에서는 기존의 전력 서비스에서 한발 더 나아간 새로운 서비스를 제안하고, 동시에 이에 대한 기술적인 방안을 제시한다.

IIoT 미들웨어 플랫폼을 활용한 연속 제조공정의 환경센서 빅데이터 정제시스템 (Big Data Refining System for Environmental Sensor of Continuous Manufacturing Process using IIoT Middleware Platform)

  • 윤여진;김태형;이준희;김영곤
    • 한국인터넷방송통신학회논문지
    • /
    • 제18권4호
    • /
    • pp.219-226
    • /
    • 2018
  • 산업용 사물인터넷(IIoT:Industrial Internet of Thing)은 기존의 공정의 자동화란 범주를 넘어 모든 제조공정을 정보화 하는 것을 의미한다. 또한 각 공정에 설치된 센서로 부터 수집되는 데이터를 토대로 정보화 시스템을 구축하여 각 공정을 실시간으로 관리하고 자동화하여 최적의 생산성을 유지하는데 그 목적을 두고 있다. 각 공정의 센서로 부터 수집되는 데이터는 비정형성을 띄고 있으며 이러한 비정형데이터를 효과적으로 수집하고 처리하기 위해 많은 연구가 이루어지고 있다. 본 논문에서는 효과적인 빅데이터 수집 및 처리를 위하여 미들웨어로 Node-RED를 사용한 시스템을 제안하였다.