• 제목/요약/키워드: 단위신경망

검색결과 218건 처리시간 0.028초

신경망 기반 텍스트 모델링에 있어 순차적 결합 방법의 한계점과 이를 극복하기 위한 담화 기반의 결합 방법 (A Discourse-based Compositional Approach to Overcome Drawbacks of Sequence-based Composition in Text Modeling via Neural Networks)

  • 이강욱;한상규;맹성현
    • 정보과학회 컴퓨팅의 실제 논문지
    • /
    • 제23권12호
    • /
    • pp.698-702
    • /
    • 2017
  • 자연 언어 처리(Natural Language Processing) 분야에 심층 신경망(Deep Neural Network)이 소개된 이후, 단어, 문장 등의 의미를 나타내기 위한 분산 표상인 임베딩(Embedding)을 학습하기 위한 연구가 활발히 진행되고 있다. 임베딩 학습을 위한 방법으로는 크게 문맥 기반의 텍스트 모델링 방법과, 기학습된 임베딩을 결합하여 더 긴 텍스트의 분산 표상을 계산하고자 하는 결합 기반의 텍스트 모델링 방법이 있다. 하지만, 기존 결합 기반의 텍스트 모델링 방법은 최적 결합 단위에 대한 고찰 없이 단어를 이용하여 연구되어 왔다. 본 연구에서는 비교 실험을 통해 문서 임베딩 생성에 적합한 결합 기법과 최적 결합 단위에 대해 알아본다. 또한, 새로운 결합 방법인 담화 분석 기반의 결합 방식을 제안하고 실험을 통해 기존의 순차적 결합 기반 신경망 모델 대비 우수성을 보인다.

인공신경망 모형을 이용한 제주 지하수위의 장기예측 (Long-term Prediction of Groundwater Level in Jeju Island Using Artificial Neural Network Model)

  • 정일문;이정우;장선우
    • 대한토목학회논문집
    • /
    • 제37권6호
    • /
    • pp.981-987
    • /
    • 2017
  • 투수성이 큰 화산섬인 제주도에서는 땅속으로 함양된 지하수자원이 가장 중요한 수원이므로 지하수의 적정관리가 매우 중요하다. 특히 가뭄시 지하수의 이용은 염수침투를 유발할 수 있으므로 지하수위 강하에 따른 단계별 제한 조치가 마련되어 있다. 농업용 지하수위에 대한 적정 지하수 이용을 위해서는 보다 장기적인 예측을 통해 사전에 대비하는 것이 필요하다. 이에 본 연구에서는 인공신경망 모형을 이용한 지하수위의 월단위예측기법을 개발하였고, 대표적인 관측공에 대해 적용하였다. 월단위 지하수위를 예측한 결과 학습 및 검증기간 모두 예측 성능이 우수한 것으로 분석되었다. 또한 장기예측을 위해서 입력인자로 월단위 지하수위 예측치를 순차적으로 이용하는 연속지하수위예측 모형을 구축하고 수개월 동안 무강수의 극한조건에 대한 지하수위 저하 양상을 분석하였다.

단위 신경망과 특징벡터 차원 축소 기반의 음악 분위기 자동판별 (Music Mood Classification based on a New Feature Reduction Method and Modular Neural Network)

  • 송민균;김현수;문창배;김병만;오득환
    • 한국산업정보학회논문지
    • /
    • 제18권4호
    • /
    • pp.25-35
    • /
    • 2013
  • 본 논문에서는 개인화된 분위기 분류 모델 대신에 대중의 분위기 분류 모델을 제안한다. 분위기 판별 성능을 개선하기 위해 두 가지 접근 방법을 선택하였는데, 그 첫 번째가 표준편차에 기초한 특징축소이다. 이는 음악의 특징을 추출하기 위해 사용하는 MIRtoolbox에서 추출되는 391개의 특징들을 모두 사용할 경우의 성능 저하 문제를 해결하기 위한 방법이다. 실험결과, 본 논문에서 제안한 특징축소 방법이 기존의 차원 축소 방법인 R-Square와 PCA보다 성능이 좋음을 확인할 수 있었다. 그리고 특징축소 방법만으로는 성능 개선에 한계가 있어 두 번째 개선방법으로 단위 신경망을 사용하여 추가의 성능 개선을 시도하였다. 실험결과 이 역시 유효한 성능 개선이 이루어짐을 확인할 수 있었다.

인지 무선 통신을 위한 순환 신경망 기반 스펙트럼 센싱 기법 (Recurrent Neural Network Based Spectrum Sensing Technique for Cognitive Radio Communications)

  • 정태윤;정의림
    • 한국정보통신학회논문지
    • /
    • 제24권6호
    • /
    • pp.759-767
    • /
    • 2020
  • 본 논문에서는 인지 무선 통신을 위한 새로운 순환 신경망 기반 스펙트럼 센싱 기법을 제안한다. 제안하는 기법은 주사용자에 대한 정보가 전혀 없는 상황에서 에너지 검출을 통해 신호 존재 유무를 판단한다. 제안 기법은 센싱하고자 하는 전체 대역을 고려하여 수신신호를 고속으로 샘플링 후 이 신호의 FFT (fast Fourier transform)를 통해 주파수 스펙트럼으로 변환한다. 이 스펙트럼 신호는 채널 대역폭 단위로 자른 후 순환 신경망에 입력하여 해당 채널이 사용중인지 비어있는지 판정한다. 제안하는 기법의 성능은 컴퓨터 모의실험을 통해 확인하는데 그 결과에 따르면 기존 문턱값 기반 기법보다 2 [dB] 이상 우수하며 합성곱 신경망 기법과 유사한 성능을 보인다. 또한, 실제 실내환경에서 실험도 수행하는데 이 결과에 따르면 제안하는 기법이 기존 문턱값 기반 방식 및 합성곱 신경망 방식보다 4 [dB] 이상 우수한 성능을 보인다.

통계적 축소기법을 이용한 유역단위 기후변화 시나리오 생성 (Generation of Basin Scale Climate Change Scenario Using Statistical Down Scaling Techniques)

  • 이용원;경민수;김형수;김병식
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2009년도 학술발표회 초록집
    • /
    • pp.1250-1253
    • /
    • 2009
  • 기후변화가 수자원에 미치는 영향을 평가하는데 있어서 주로 기후모형인 Global Climate Model (GCM)이 사용되고 있다. 그러나 이러한 기후모형의 공간적 해상도는 $3^{\circ}{\sim}4^{\circ}$ 정도로 한반도의 경우 바다로 묘사되기도 한다. 따라서 GCM을 이용해서 기후변화가 유역단위 수자원에 미치는 영향을 평가하기 위해서는 일반적으로 축소기법이 사용되고 있다. 현재까지 다양한 축소기법이 개발되었으며, 대표적인 모형으로는 SDSM(Statistical Down-Scaling Model)과 LARS-WG(The Long Ashton Research Station Weather Generator)이 있다. 이에 본 연구에서는 SDSM, LARS-WG와 함께 최근에 축소기법으로 사용되고 있는 인공신경망 기법을 이용해서 CCCMA(Canadian Centre for Climate Modeling and Analysis)에서 일 단위로 모의한 CGCM3 A2 시나리오를 기반으로 우포늪의 강우 및 온도시나리오를 구축하였다. 대상 지점인 우포늪은 경상남도 창녕군 우포늪(위도 $35^{\circ}$33', 경도 $128^{\circ}$25')에 위치하고 있으며, 모의 기간은 CASE1의 경우 현재, CASE2는 2050$^{\sim}$ 2080년, CASE3는 2080년$^{\sim}$2100년으로 각각 구분하여 축소기법을 적용하였다. 축소결과 축소기법에 따라 일정정도 차이를 보이기는 하였으나 강우와 온도 모두 증가하게 됨을 확인하였다.

  • PDF

합성곱 신경망에 의한 발화 임베딩을 사용한 유사도 측정 기반의 채팅 말뭉치 반자동 확장 방법 (Semi-automatic Expansion for a Chatting Corpus Based on Similarity Measure Using Utterance Embedding by CNN)

  • 안재현;고영중
    • 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
    • /
    • 한국정보과학회언어공학연구회 2018년도 제30회 한글 및 한국어 정보처리 학술대회
    • /
    • pp.95-100
    • /
    • 2018
  • 채팅 시스템을 잘 만들기 위해서는 양질, 대량의 채팅 말뭉치가 굉장히 중요하지만 구축 시 많은 비용이 발생한다는 어려움이 있었다. 따라서 본 논문에서는 영화 자막, 극대본과 같이 대량의 발화 데이터를 이용하여 채팅 말뭉치를 반자동으로 확장하는 방법을 제안한다. 채팅 말뭉치 확장을 위해 미리 구축된 채팅 말뭉치와 유사도 기법을 이용하여 채팅 유사도를 구하고, 채팅 유사도가 실험을 통해 얻은 임계값보다 크다면 올바른 채팅쌍이라고 판단하였다. 그리고 길이가 매우 짧은 채팅성 발화의 채팅 유사도를 효과적으로 계산하기 위해 본 논문에서 제안하는 것은 형태소 단위 임베딩 벡터와 합성곱 신경망 모델을 이용하여 발화 단위 표상을 생성하는 것이다. 실험 결과 기본 발화 단위 표상 생성 방법인 TF를 이용하는 것보다 정확률, 재현율, F1에서 각각 5.16%p, 6.09%p, 5.73%p 상승하여 61.28%, 53.19%, 56.94%의 성능을 가지는 채팅 말뭉치 반자동 구축 모델을 생성할 수 있었다.

  • PDF

양방향 순환신경망 임베딩을 이용한 리그오브레전드 승패 예측 (Predicting Win-Loss of League of Legends Using Bidirectional LSTM Embedding)

  • 김철기;이수원
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제9권2호
    • /
    • pp.61-68
    • /
    • 2020
  • e-sports는 최근 꾸준한 성장을 이루면서 세계적인 인기 스포츠 종목이 되었다. 본 논문에서는 e-sports의 대표적인 게임인 리그오브레전드 경기 시작 단계에서의 승패 예측 모델을 제안한다. 리그오브레전드에서는 챔피언이라고 불리는 게임 상의 유닛을 플레이어가 선택하여 플레이하게 되는데, 각 플레이어의 선택을 통하여 구성된 팀의 챔피언 능력치 조합은 승패에 영향을 미친다. 제안 모델은 별다른 도메인 지식 없이 플레이어 단위 챔피언 능력치를 팀 단위 챔피언 능력치로 임베딩한 Bidirectional LSTM 임베딩 기반 딥러닝 모델이다. 기존 분류 모델들과 비교 결과 팀 단위 챔피언 능력치 조합을 고려한 제안 모델에서 58.07%의 가장 높은 예측 정확도를 보였다.

음절과 형태소 정보를 이용한 한국어 문장 띄어쓰기 교정 모델 (Korean sentence spacing correction model using syllable and morpheme information)

  • 최정명;오병두;허탁성;정영석;김유섭
    • 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
    • /
    • 한국정보과학회언어공학연구회 2020년도 제32회 한글 및 한국어 정보처리 학술대회
    • /
    • pp.141-144
    • /
    • 2020
  • 한국어에서 문장의 가독성이나 맥락 파악을 위해 띄어쓰기는 매우 중요하다. 또한 자연 언어 처리를 할 때 띄어쓰기 오류가 있는 문장을 사용하면 문장의 구조가 달라지기 때문에 성능에 영향을 미칠 수 있다. 기존 연구에서는 N-gram 기반 통계적인 방법과 형태소 분석기를 이용하여 띄어쓰기 교정을 해왔다. 최근 들어 심층 신경망을 활용하는 많은 띄어쓰기 교정 연구가 진행되고 있다. 기존 심층 신경망을 이용한 연구에서는 문장을 음절 단위 또는 형태소 단위로 처리하여 교정 모델을 만들었다. 본 연구에서는 음절과 형태소 단위 모두 모델의 입력으로 사용하여 두 정보를 결합하여 띄어쓰기 교정 문제를 해결하고자 한다. 모델은 문장의 음절과 형태소 시퀀스에서 지역적 정보를 학습할 수 있는 Convolutional Neural Network와 순서정보를 정방향, 후방향으로 학습할 수 있는 Bidirectional Long Short-Term Memory 구조를 사용한다. 모델의 성능은 음절의 정확도와 어절의 정밀도, 어절의 재현율, 어절의 F1 score를 사용해 평가하였다. 제안한 모델의 성능 평가 결과 어절의 F1 score가 96.06%로 우수한 성능을 냈다.

  • PDF

광 신경망 아날로그-디지탈 변환기 (Optical neural-net analog-to-digital converter)

  • 장주석;신상영;이수영
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 1988년도 전기.전자공학 학술대회 논문집
    • /
    • pp.414-417
    • /
    • 1988
  • 신경회로를 모방한 병렬 아날로그-디지탈 변환기를 설계하고 광학적으로 구현하였다. 이 회로의 동작 원리는 주어진 입력 아날로그 값에 대해 출력 bit 들의 디지털 값을 동시에 추정하는 것으로 $2^{N}$ 단계의 구분을 위해서 N개의 단위 소자가 필요하다. 에너지 최소화 방법에 의해 설계된 신경망 아날로그-디지털 변환기와 비교해 볼 때 회로의 구조가 단순하고 출력이 회로의 초기 상태에 관계없이 주어진 입력에 의해 결정된다.

  • PDF

인공신경망을 적용한 기획단계의 도로건설 공사비 예측 모델 (Road Construction Cost Estimation Model in the Planning Phase Using Artificial Neural Network)

  • 한형동;김정환;윤중호;서종원
    • 대한토목학회논문집
    • /
    • 제31권6D호
    • /
    • pp.829-837
    • /
    • 2011
  • 공사비 견적이란 건설공사를 수행하는데 소요되는 공사비를 산정하는 것으로, 공사 기획단계에서 사용하는 개략견적은 다양한 목적으로 사용된다. 한편, 도로공사의 경우, 현행 사용되는 개략견적방법은 과거의 실적자료를 산술평균하여 단위 km당 공사비를 제시한 것으로 실제 개략공사비로 활용하기에는 어려움이 있다. 본 연구에서는 기획단계의 도로공사견적 산정방식에 대한 한계를 해결하기 위하여, 인공신경망을 적용한 개략공사비 모델을 제시하는 것을 목적으로 한다. 도로건설 공사입찰을 위한 기본설계도면 작성 이후 공사비를 결정하는 변수를 포함한 과거 실적 자료를 바탕으로 인공신경망을 적용하여 기획단계에서 공사비 예측이 가능한 도로 공사비를 개략견적 하는 모델을 설계하였으며, 시행착오방식을 이용하여 모델의 변수들을 최적화하였다. 또한 최적화된 모델을 통해 나온 결과를 회귀분석을 적용한 결과와 비교하여 정확도가 뛰어남을 검증하였다. 제안된 인공신경망모델은 차후 도로건설공사의 개략공사비 산정을 위한 활용될 것으로 기대된다.