• 제목/요약/키워드: 데이터 필터링

검색결과 981건 처리시간 0.028초

모바일 벡터 맵 서비스를 위한 필터링 기법 연구 (Study on the Filtering Methods for Mobile Vector Map Service)

  • 최진오;이상욱
    • 한국정보통신학회논문지
    • /
    • 제10권9호
    • /
    • pp.1612-1616
    • /
    • 2006
  • 모바일 환경에서 지도 서비스를 위해서는 휴대 단말기의 제한된 자원을 고려한 접근방법 이 요구된다. 모바일 서비스 전용 지도 데이터 베이스를 별도로 개발하여 사용하지 않는다면 지도 데이터를 축소하여 휴대 단말기로 전송할 필요가 있다. 본 논문은 기존의 유선 지도 데이터 베이스로부터 검색한 지도를 휴대 단말기에 출력이 가능하도록 하는 필터링(filtering) 기법을 제안하고 성능을 평가한다. 이 필터링 기법은 지도 일반화(generalization) 기법의 'selection' 연산에 기반하여 휴대폰 환경에 적합하도록 변형 한 것이다.

사용자와 아이템의 혼합 협력적 필터링에서 Naive Bayesian 알고리즘을 이용한 추천 방법 (Recommendation Method using Naive Bayesian algorithm in Hybrid User and Item based Collaborative Filtering)

  • 김용집;정경용;한승진;고종철;이정현
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2003년도 가을 학술발표논문집 Vol.30 No.2 (1)
    • /
    • pp.184-186
    • /
    • 2003
  • 기존의 사용자 기반 협력적 필터링이 가지는 단점으로 지적되었던 희박성과 확장성의 문제를 아이템 기반 협력적 필터링 기법을 통하여 개선하려는 연구가 진행되어 왔다. 실제로 많은 성과가 있었지만. 여전히 명시적 데이터를 기반으로 하기 때문에 희박성이 존재하며, 아이템의 속성이 반영되지 않는 문제점이 있다. 본 논문에서는 기존의 아이템 기반 협력적 필터링의 문제점을 보완하기 위하여 사용자와 아이템의 혼합 협력적 필터링에서 Naive Bayesian 알고리즘을 이용한 추천 방법을 제안한다. 제안된 방법에서는 각 사용자와 아이템에 대한 유사도 검색 테이블을 생성한 후, Naive Bayesian 알고리즘으로 아이템을 예측 및 추천함으로써, 성능을 개선하였다. 성능 평가를 위해 기존의 아이템 기반 협력적 필터링 기술과 비교 평가하였다.

  • PDF

협동적 필터링 기반 추천 시스템을 위한 향상된 이웃 선정 방법 (An Improved Neighbor Selection Method for Recommender Systems based on Collaborative Filtering)

  • 김택헌;양성봉
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2004년도 춘계학술발표대회
    • /
    • pp.453-456
    • /
    • 2004
  • 전자상거래에서 추천 시스템은 일반적으로 협동적 필터링이라는 정보 필터링 기술을 사용한다. 협동적 필터링 기술은 유사한 성향을 갖는 다른 고객들이 상품에 대해서 매긴 평가에 기반한다. 협동적 필터링이 유사 선호도를 갖는 이웃 고객들의 평가에 근거하기 때문에 고객에게 가장 적합한 유사 이웃들을 적절히 선정해 내는 것은 추천 시스템에서 예측의 질 향상을 위해 필요하다. 본 논문에서 우리는 ordered clustering을 이용하여 협동적 필터링을 위한 향상된 이웃선정 방법을 제안한다. 이 방법은 탐색 공간을 줄이기 위해 k-means 클러스터링 방법을 사용한다. 그리고 클러스터링에 의해 구성된 고객들에 대해서 threshold 값에 의해 보다 정제된 고객들을 최종 선정함으로써 고객에게 보다 의미 있는 적합한 고객이 최종적인 이웃으로 선정될 수 있도록 한다. 실험은 Compaq Computer Corporation에 의해 제공된 EachMovie 데이터 셋을 사용하였다. 실험 결과로 우리는 제안한 방법이 다른 방법보다 좋은 예측 정확도를 갖는 것을 확인할 수 있었다.

  • PDF

취업정보 필터링 기반 취업전략에 관한 연구 (A Study on Employment Strategy Based on Employment Information Filtering)

  • 윤선희
    • 문화기술의 융합
    • /
    • 제5권4호
    • /
    • pp.251-258
    • /
    • 2019
  • 본 본 연구는 취업을 희망하는 학생들을 대상으로 빅데이터를 분석하는 과정에서 취업과 관련이 있는 정보 등을 필터링하여 취업률 및 유지취업률을 향상할 수 있는 시스템을 제안하였다. 실험대상은 2년제 여자대학교의 취업대상자로써 기존의 취업 전략은 학교성적 외모 성격 등 단순한 정보로 구직에 참여했다. 그 결과, 취업하려는 학생들의 만족도가 감소하고 취업 후 적성에 맞지 않는다는 등의 이유로 도중 퇴사하여 유지취업률이 상대적으로 낮았다. 이러한 문제점들을 해결하기 위해 취업정보를 분석하는 과정에서 분석하는 과정에서 입력되는 데이터가 취업관련정보인지를 판별하여 활용할 수 있도록 필터링하는 시스템을 제안하여 취업률 및 유지취업률을 향상 시킬 수 있는 취업 전략을 구축하고자 한다.

주파수 영역 필터링을 통한 콘크리트 시편 내부 레이더 탐사 (Radar Probing of Concrete Specimens Using Frequency Domain Filtering)

  • 임홍철;이윤식
    • 한국지진공학회논문집
    • /
    • 제6권4호
    • /
    • pp.23-29
    • /
    • 2002
  • 지진 발생시 건축물의 내부상태를 탐사하는데 있어 콘크리트 구조물의 두께, 철근의 피복깊이, 공동의 유무를 탐사하게 되고, 이것을 통해 건축물의 손상을 추정할 수 있다. 이때 콘크리트 내부를 탐사하는 방법으로 지중 탐사 레이더(ground penetrating radar)가 효과적으로 이용될 수 있다. 기존의 레이더 측정 방법에서는 콘크리트 내부를 탐사하기 위해 시간영역에 있는 데이터로 콘크리트의 유전상수를 구하고 시간을 거리로 환산하여 육안 식별에 의해서 결과를 분석하였다. 본 연구에서는 콘크리트 시편을 측정한 후 측정된 데이터를 주파수 영역으로 변환하여 스펙트럼 분석과 필터링을 통한 방법으로 신호 처리하여 시간영역에서의 데이터 분석능력을 향상 시켰다. 데이터 획득을 위해 주로 사용되는 900MHz, 1GHz, 그리고 1.5㎓ 중심 주파수를 갖는 세 개의 안테나를 사용하여 철근시편을 탐사하였다. 주파수 영역에서 차단 주파수(cutoff frequency)를 1/3 옥타브에 의하여 변화시키면서 저역 통과, 고역 통과, 그리고, 대역 통과 등의 필터링을 하였고, 각각의 중심 주파수에 대한 가장 효과적인 차단 주파수를 찾으려고 했다. 차단 주파수의 범위는 최대 하위 2옥타브에서 상위 1옥타브와 최소 하위 2옥타브에서 하위 1옥타브가 적합하였고, 주파수 영역에서 필터링을 통해 콘크리트 내부 정보 분석력 향상을 위한 토대를 마련하였다.

이미지 기반 필터링을 이용한 개인화 아이템 추천 (Personalized Item Recommendation using Image-based Filtering)

  • 정경용
    • 한국콘텐츠학회논문지
    • /
    • 제8권3호
    • /
    • pp.1-7
    • /
    • 2008
  • 유비쿼터스 컴퓨팅의 발달로 인하여 다양하고 폭넓은 정보가 디지털 형태로 빠르게 생산 및 배포되고 있다. 사용자가 이러한 정보과잉 속에서 자신이 원하는 정보를 단시간 내에 검색하는 것은 그리 쉬운 일이 아니다. 본 논문에서는 이미지 기반 필터링을 이용한 개인화 아이템 추천 기법을 제안한다. 피상적인 내용분석이라는 단점을 개선하기 위하여 사용자가 관심을 가지는 이미지 데이터로부터 특징을 추출하는 이미지 기반 필터링을 사용하였다. 제안한 방법에 대해 MovieLens 데이터에서 내용 기반 필터링과 협력적 필터링과의 비교 실험을 통해 성능을 평가하였다. 실험 결과, 제안한 방법이 기존의 다른 방법보다 우수함을 확인하였다.

개인성향과 협업 필터링을 이용한 개선된 영화 추천 시스템 (Improved Movie Recommendation System based-on Personal Propensity and Collaborative Filtering)

  • 박두순
    • 정보처리학회논문지:컴퓨터 및 통신 시스템
    • /
    • 제2권11호
    • /
    • pp.475-482
    • /
    • 2013
  • 추천 시스템들에 대한 여러 방법들이 연구되고 있다. 개인화와 추천 시스템 중에서 가장 성공적인 방법은 협업 필터링이다. 협업 필터링은 고객들의 프로파일 정보를 기반으로 추천을 하므로 데이터가 충분하지 않다면 항목을 추천하는데 있어서 희박성의 문제가 제기된다. 본 연구에서는 희박성의 문제를 해결하는 방법으로 가중치를 가진 개인 성향을 협업 필터링에 활용하는 방법을 제안한다. 본 연구에서 가중치를 가진 최적의 개인 성향을 찾기 위해 공개 데이터인 MovieLens Data를 이용하여 성능 평가하였다. 실험 결과 본 연구에서 제안한 가중치를 가진 개인 성향들로 구축된 시스템이 기존의 개인 성향들을 이용한 시스템보다 향상된 성능을 보였다.

LiDAR 데이터를 이용한 차량정보 추출에 관한 연구 (A Study on the extraction of vehicle information using LiDAR data)

  • 권승준
    • 대한원격탐사학회:학술대회논문집
    • /
    • 대한원격탐사학회 2009년도 춘계학술대회 논문집
    • /
    • pp.350-353
    • /
    • 2009
  • 본 논문에서는 국토모니터링 기술의 한 부분으로서 도로 지역에 대한 효율적인 실시간 교통모니터링을 위해 도로상의 차량 정보를 LiDAR 데이터로부터 취득하는 과정을 실험하였다. 도로영역의 데이터를 추출하기 위해서 좌표 변환된 수치지도와 LiDAR 데이터를 이용하였고, 국지적 임계치 필터링을 사용하여 추출된 도로영역의 데이터를 차량과 도로의 자료로 분리시키는 작업을 수행하였으며, 추출된 차량의 포인트들을 이용하여 차량을 표현할 수 있는 기본 속성값을 추출하였다. 마지막으로, 분리된 차량의 포인트에 대해서 MDC(Minimum Distance Classification) 클러스터링를 이용하여 차량의 종류를 분류하였다. 결과적으로 본 연구를 통하여 차량인식과 차량의 종류에 대한 분류를 수행할 수 있음을 확인하였다.

  • PDF

정보 융합 칼만-Consensus 필터를 이용한 분산 센서 네트워크 구현 (Implementation of a Wireless Distributed Sensor Network Using Data Fusion Kalman-Consensus Filer)

  • 송재민;하찬성;황지홍;김태효
    • 융합신호처리학회논문지
    • /
    • 제14권4호
    • /
    • pp.243-248
    • /
    • 2013
  • 무선 센서 네트워크에서 동적 시스템에 대한 consensus 알고리듬은 센서 네트워크의 데이터 융합을 위해 신축적인 알고리듬을 적용할 수 있다. 본 논문은 분산 센서 데이터 기반의 평균적인 consensus 특성을 이용하여 n개의 센서 계측치들의 평균을 추적하기 위해 센서 네트워크의 노드들로 구성되는 하나의 분산 데이터 융합 필터를 구현하였다. 본 consensus 필터는 센서 네트워크에서 분산 칼만 필터링에 의한 구조로 데이터 융합의 문제를 해결한다. consensus 필터의 최적 수렴특성, 잡음 전파의 감소 및 빠른 입력신호들의 추적 능력을 보여준다. 필터링 처리 결과를 확인하기 위해 지그비 통신을 이용하여 각 센서의 출력신호와 필터링 처리 결과 및 각 센서의 개별적 신호들을 통합하고 consensus 필터링 처리 결과를 보였다.

병렬 말뭉치 필터링을 적용한 Filter-mBART기반 기계번역 연구 (Filter-mBART Based Neural Machine Translation Using Parallel Corpus Filtering)

  • 문현석;박찬준;어수경;박정배;임희석
    • 한국융합학회논문지
    • /
    • 제12권5호
    • /
    • pp.1-7
    • /
    • 2021
  • 최신 기계번역 연구 동향을 살펴보면 대용량의 단일말뭉치를 통해 모델의 사전학습을 거친 후 병렬 말뭉치로 미세조정을 진행한다. 많은 연구에서 사전학습 단계에 이용되는 데이터의 양을 늘리는 추세이나, 기계번역 성능 향상을 위해 반드시 데이터의 양을 늘려야 한다고는 보기 어렵다. 본 연구에서는 병렬 말뭉치 필터링을 활용한 mBART 모델 기반의 실험을 통해, 더 적은 양의 데이터라도 고품질의 데이터라면 더 좋은 기계번역 성능을 낼 수 있음을 보인다. 실험결과 병렬 말뭉치 필터링을 거친 사전학습모델이 그렇지 않은 모델보다 더 좋은 성능을 보였다. 본 실험결과를 통해 데이터의 양보다 데이터의 질을 고려하는 것이 중요함을 보이고, 해당 프로세스를 통해 추후 말뭉치 구축에 있어 하나의 가이드라인으로 활용될 수 있음을 보였다.