• 제목/요약/키워드: 통신 빅데이터

검색결과 898건 처리시간 0.029초

육상 양식장 빅데이터 분석 시스템 개발을 위한 데이터 시각화 도구 개발 (Development of Data Visualization Tools for Land-Based Fish Farm Big Data Analysis System)

  • 예성빈;박정선;정희택;한순희
    • 한국전자통신학회논문지
    • /
    • 제19권4호
    • /
    • pp.763-770
    • /
    • 2024
  • 현재 해수를 이용하는 육상 양식장에서는 실시간 수질 모니터링 및 시설 자동화 시스템, 용존산소 자동 공급장치 등 다양한 장비를 도입하여 사용하고 있다. 또한 양식장의 다양한 장비에서 수집되는 데이터는 수질 환경, 시설 운영, 작업장 영상정보 등 정형, 비정형 형태의 빅데이터를 생산한다. 양식장 운영 환경에서 생산되는 빅데이터는 운영 및 생산 효율 개선을 목표로 다양한 방법을 개발하고 적용을 시도하고 있다. 본 연구에서는 육상 양식장에서 생산되는 빅데이터를 효과적으로 분석하고 시각화하기 위한 시스템을 개발하는 것을 목표로, 양식장 빅데이터 분석 시스템에서 활용이 가능한 데이터 시각화 프로세스를 제시하고 빅데이터 시각화 도구를 개발하고 결과를 비교한다. 그리고 시계열 특성을 가지는 빅데이터의 비교 및 탐색이 직관적인 시각화 모델을 제시한다.

DW 어플라이언스를 통한 빅데이터 처리 기술 동향 분석 (Analysis of Trend for BigData Processing Technology by DW Appliance)

  • 최로환;박석천;심봉수
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2013년도 춘계학술발표대회
    • /
    • pp.904-907
    • /
    • 2013
  • 최근 정보통신기술이 하루가 다르게 발전함에 따라 하루에도 수많은 데이터가 흘러나오는 최근의 추세이다. 정형 데이터 뿐 아니라 비정형 데이터 분석까지 진행하는 최근의 추세에 맞춰 현 빅데이터 기술 동향을 분석한다. 빅데이터 시대를 맞아 기존의 데이터웨어하우스(DW)와 발전된 데이터웨어하우스(DW) 어플라이언스에 대해 분석하고 향후 발전 전망과 방향을 제시한다.

빅데이터의 정규화 전처리과정이 기계학습의 성능에 미치는 영향 (Effectiveness of Normalization Pre-Processing of Big Data to the Machine Learning Performance)

  • 조준모
    • 한국전자통신학회논문지
    • /
    • 제14권3호
    • /
    • pp.547-552
    • /
    • 2019
  • 최근, 빅데이터 분야에서는 빅 데이터의 양적 팽창이 주요 이슈로 떠오르고 있다. 더군다나 이러한 빅데이터는 기계학습의 입력값으로 사용되어지고 있으며 이들의 성능을 향상시키기 위해 정규화 전처리가 필요하다. 이러한 성능은 빅데이터 컬럼의 범위나 정규화 전처리 방식에 따라 크게 좌우된다. 본 논문에서는 다양한 종류의 정규화 전처리 방식과 빅데이터 컬럼의 범위를 조절하면서 서포트벡터머신(SVM)의 기계학습방식에 적용함으로써 더욱 효과적인 정규화 전처리 방식을 파악하고자 하였다. 이를 위하여 파이썬언어와 주피터 노트북 환경에서 기계학습을 수행하고 분석하였다.

빅 데이터 분석을 활용한 창조경제 키워드에 대한 패턴 (A Pattern on Keyword of the Creative Economy through Utilizing Big Data Analysis)

  • 진찬용;남수태
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2016년도 춘계학술대회
    • /
    • pp.143-144
    • /
    • 2016
  • 빅 데이터 분석은 기존 데이터베이스 관리 도구로부터 데이터를 수집, 저장, 관리, 분석할 수 있는 역량을 말한다. 또한, 대량의 정형 또는 비정형 데이터 집합으로부터 가치를 추출하고 결과를 분석하는 기술을 의미한다. 대부분의 빅 데이터 분석 기술 방법들은 기존 통계학과 전산학에서 사용되던 데이터 마이닝, 기계 학습, 자연 언어 처리, 패턴 인식 등이 해당된다. 글로벌 리서치 기관들은 빅 데이터를 2011년 이래로 최근 가장 주목받는 신기술로 지목해오고 있다. 따라서 대부분의 산업에서 기업들은 빅 데이터의 적용을 통해 가치 창출을 위한 노력을 기하고 있다. 본 연구에서는 다음 커뮤니케이션의 빅 데이터 분석도구인 소셜 매트릭스를 활용하여 키워드 분석을 통해 창조경제 키워드 의미를 분석하고자 한다. 또한, 분석결과를 바탕으로 이론적 실무적 시사점을 제시하고자 한다.

  • PDF

병렬 분산 처리 시스템에서 공간 연산을 위한 데이터 접근 방안 (A Method to Access Data for Spatial Operation in Parallel Distributed Processing System)

  • 김진덕
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2016년도 추계학술대회
    • /
    • pp.442-444
    • /
    • 2016
  • 과거에 비해 비약적으로 생산되는 공간 데이터에 대한 처리를 위한 공간 연산은 빠른 처리 응답성을 요구하는 경우가 많다. 그래서 최근 하둡(Hadoop)과 같은 빅데이터 처리 시스템을 이용하여 처리하고자 하는 시도가 많다. 한편, 공간 조인은 데이터 분할(Partitioning)과 공간 색인의 이용 여부, 여과 단계와 정제 단계를 거치는 등 그 복잡도가 강한 공간 연산이다. 그래서 빅데이터 처리 시스템을 이용한 공간 조인의 처리 방식은 매우 다양하다. 그러나 지금까지 이러한 공간 조인의 처리 방식에 다른 리소스 활용에 대한 비교는 거의 없다. 이 논문에서는 다양한 공간 연산의 수행 방법에 따른 빅데이터 시스템 클러스터에서 데이터 전송 방식을 고찰하고 데이터 전송에 따른 네트워크 리소스의 효율적인 사용 방안을 제안하고자 한다. 구체적으로 단일할당과 다중할당 색인 기법의 비교, 파티셔닝 방법의 비교, 맵리듀스 시스템의 태스크 할당 방법에 따른 비교를 통해 다양한 연산 유형에 따른 공간 조인의 처리 방안 선정에 고려 요소를 제시하고자 한다.

  • PDF

정형화 수준에 따른 의료 데이터 분류 및 분석

  • 이미연;박예슬;김명희;이정원
    • 정보와 통신
    • /
    • 제31권12호
    • /
    • pp.57-63
    • /
    • 2014
  • 최근 빅 데이터가 중요한 이슈로 부상하면서, 의료 분야에서의 빅 데이터 관리 및 활용에 대한 요구도 급증하고 있다. 하지만 의료 분야의 데이터는 데이터 자체의 특성과 의료 분야의 특수성으로 인해 다른 분야의 일반적인 빅 데이터와는 차별점이 많다. 따라서 의료 분야에서는 데이터 분석에 앞서 다양한 종류와 형태의 의료 데이터를 의미적으로 융합할 수 있는 방법이 전제되어야 한다. 본 고에서는 우선 의료 관련 데이터에 대한 기술(description) 표준 동향을 소개한다. 더불어 다각도의 기준에 따라 의료 데이터를 분류해봄으로써 그 다양성을 확인하고, 의료 데이터 융합의 필요성을 강조함으로써 의료 데이터 관리기술의 나아갈 방향을 제시하고자 한다.

빅데이터 분석 도구 R 언어를 이용한 비정형 데이터 시각화 (Visualizing Unstructured Data using a Big Data Analytical Tool R Language)

  • 남수태;진금회;신성윤;진찬용
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2021년도 춘계학술대회
    • /
    • pp.151-154
    • /
    • 2021
  • 빅데이터 분석은 데이터 저장소에 저장된 대용량 데이터 속에서 의미 있는 새로운 상관관계, 패턴, 추세를 발견하여 새로운 가치를 창출하는 과정이다. 또한 대부분의 빅데이터 분석 기술 방법들은 기존 통계학과 전산학에서 사용되던 데이터 마이닝, 기계 학습, 자연 언어 처리, 패턴 인식 등이 이에 해당된다. 그리고 빅데이터 분석 도구인 R언어를 이용하여 전-처리된 텍스트 데이터를 이용하여 다양한 시각화 함수를 통해 분석결과를 표현할 수 있다. 본 연구에서 사용된 데이터는 한국정보통신학회 학회지 논문 중에서 2021년 3월호 논문 21편을 대상으로 분석을 하였다. 최종 분석결과는 가장 많이 언급된 키워드는 "데이터"가 305회로 1위를 차지하였다. 따라서 이러한 분석결과를 바탕으로 연구의 한계와 이론적 실무적 시사점을 제시하고자 한다.

  • PDF

모바일 통신 빅데이터 기반 항공교통이용자 O/D 추출 알고리즘 연구 (Algorithm Development for Extract O/D of Air Passenger via Mobile Telecommunication Bigdata)

  • 조범철;권기훈
    • 한국빅데이터학회지
    • /
    • 제8권2호
    • /
    • pp.1-13
    • /
    • 2023
  • 현행 항공교통이용자 분석은 주로 통계적인 분석이 주류를 이루고 있으나, 이동경로, 지역별 이용자 수, 공항접근 소요시간 등 세부적인 사항에 대한 분석이 어렵다는 한계가 있다. 한편 빅데이터 기술 발전과 데이터3법 개정에 따라 빅데이터 기반 교통분석이 활성화되고 있으며, 모바일 통신 데이터는 휴대전화 단말기의 위치를 상세하게 파악할 수 있어 교통분석을 위한 좋은 분석자료가 될 수 있다. 이에 본 연구에서는 기존 항공교통이용자 분석방법의 한계를 극복하기 위해 이동경로 전체를 분석할 수 있는 모바일 통신 데이터를 기반의 교통이용자 O/D(Origin/Destination) 추출 알고리즘을 제시한다. 본 연구에서 제시하는 알고리즘은 각 공항에 공항신호탐지 구역을 설정하고, 해당 구역의 기지국 접속이력을 토대로 항공교통이용자를 추출하고 해당 이용자의 출발지-도착지 경로상의 기지국 접속 데이터를 토대로 이동경로를 추정하는 것이다. 본 연구에서는 2019년 1~12월의 기간을 대상으로 모든 국내 공항에 대하여 국내/국제선 이용자에 대해 O/D를 추출하였다. 또한 추출된 데이터의 검증을 위해 모바일 통신데이터 기반 항공교통 이용자 O/D 데이터와 항공통계데이터에 대해 상관성 분석을 수행하였다. 이를 통해 총량에는 차이가 있으나(국내선 4.1, 국제선 4.6) 상관성 0.99로 상관성이 높아 활용 가능할 것으로 판단되었다. 본 연구에서 제시한 알고리즘은 기존과 다르게 항공교통이용자의 이동행태, 지역별/연령별 비율 등 폭넓고 상세한 분석을 가능하게 하며, 향후 공항관련 정책 마련이나 지역별 시장분석 등 다양한 분야에서 활용할 수 있다.

Science Technology - 빅데이터가 불러올 건강관리 혁명

  • 이동훈
    • TTA 저널
    • /
    • 통권176호
    • /
    • pp.64-65
    • /
    • 2018
  • 옛말에도 "박학이상설지, 장이반설약야(博學而詳說之, 將以反說約也)."라고 했다. "넓게 배우고 깊이 공부하는 것은 반대로 간략히 설명하기 위해서다."라는 뜻이다. "넓게 배우고 깊이 공부하는 것"은 제14차 산업혁명의 이기 중 하나인 빅데이터와 바로 통한다. 빅데이터는 모든 분야에서 '정답'을 매우 효율적으로 얻게 해 줄 수 있다. 거기에는 개인과 사회의 건강관리도 포함된다.

  • PDF

빅데이터 시대의 지능형 보안시스템에 관한 연구 (The survey on Intelligent Security System in the age of Big Data)

  • 김지현;이동훈
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2012년도 추계학술대회
    • /
    • pp.776-779
    • /
    • 2012
  • 최근 IT분야의 화두 중 하나가 빅데이터이다. 과거의 보안이 경계지역에서의 방어였다면 현재에는 그 경계가 확장되어 점점 파트너사, 고객사, 원격지 직원까지 위협에 노출되었다. 따라서 전통적으로 경계지역을 방어하기 위해 사용했던 보안툴들이 이제는 유효성이 없어졌다. 갈수록 지능화, 고도화되고 있는 보안이슈와 클라우드 시대에는 이에 걸맞는 지능형 보안시스템의 구축이 필요하고 이를 위해서 빅데이터가 최상의 역할을 할 것이다. 본 논문은 빅데이터 관련 기술을 고찰한 후 빅데이터를 활용한 지능형 보안시스템에 대하여 논의해 보겠다.

  • PDF