• 제목/요약/키워드: 천이변화

검색결과 701건 처리시간 0.031초

불확실성이 높은 의사결정 환경에서 SR 기반 강화학습 알고리즘의 성능 분석 (Evaluating SR-Based Reinforcement Learning Algorithm Under the Highly Uncertain Decision Task)

  • 김소현;이지항
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제11권8호
    • /
    • pp.331-338
    • /
    • 2022
  • 차기 상태 천이 표상(Successor representation, SR) 기반 강화학습 알고리즘은 두뇌에서 발현되는 신경과학적 기전을 바탕으로 발전해온 강화학습 모델이다. 해마에서 형성되는 인지맵 기반의 환경 구조 정보를 활용하여, 변화하는 환경에서도 빠르고 유연하게 학습하고 의사결정 가능한 자연 지능 모사형 강화학습 방법으로, 불확실한 보상 구조 변화에 대해 빠르게 학습하고 적응하는 강인한 성능을 보이는 것으로 잘 알려져 있다. 본 논문에서는 표면적인 보상 구조가 변화하는 환경뿐만 아니라, 상태 천이 확률과 같은 환경 구조 내 잠재 변수가 보상 구조 변화를 유발하는 상황에서도 SR-기반 강화학습 알고리즘이 강인하게 반응하고 학습할 수 있는지 확인하고자 한다. 성능 확인을 위해, 상태 천이에 대한 불확실성과 이로 인한 보상 구조 변화가 동시에 나타나는 2단계 마르코프 의사결정 환경에서, 목적 기반 강화학습 알고리즘에 SR을 융합한 SR-다이나 강화학습 에이전트 시뮬레이션을 수행하였다. 더불어, SR의 특성을 보다 잘 관찰하기 위해 환경을 변화시키는 잠재 변수들을 순차적으로 제어하면서 기존의 환경과 비교하여 추가적인 실험을 실시하였다. 실험 결과, SR-다이나는 환경 내 상태 천이 확률 변화에 따른 보상 변화를 제한적으로 학습하는 행동을 보였다. 다만 기존 환경에서의 실험 결과와 비교했을 때, SR-다이나는 잠재 변수 변화로 인한 보상 구조 변화를 빠르게 학습하지는 못하는 것으로 확인 되었다. 본 결과를 통해 환경 구조가 빠르게 변화하는 환경에서도 강인하게 동작할 수 있는 SR-기반 강화학습 에이전트 설계를 기대한다.

병렬 전극 사이의 하전 입자의 천이 특성 (Transition characteristics for charged particles between parallel electrode)

  • 김승택;이상호;김용권
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 2011년도 제42회 하계학술대회
    • /
    • pp.1710-1711
    • /
    • 2011
  • 건식 전자 종이는 평행한 병렬 전극 사이에 하전 입자들이 놓인 구조로 전극간의 입자 천이 특성은 전자 종이의 동작에 직접적인 영향을 주게된다. 따라서, 하전 입자를 이용하여 제작된 전자 종이 샘플에 인가 전압에 따른 입자의 전극간의 천이를 통해서 전자 종이의 동작 특성을 살펴 보고자 한다. 입자의 천이 특성을 제작된 샘플의 조명에 의한 반사율 분석을 통해서 살펴 보았다. 입자의 천이 특성은 히스테리시스 특성을 나타냈으며 이러한 특성은 색상의 변화시켜야만 할때에만 전력 소비가 이루어지기 때문에 소비 전력이 작으며, 저비용의 수동 매트릭스 구동을 가능하게 함을 실험을 통해서 확인하였다. 6개 샘플의 특성 분석을 통해서 회색톤의 그림 또는 하이 콘트라스트의 글씨를 구현하기 위한 특성을 고찰하였다.

  • PDF

정규혼합모델을 이용한 수중 천이신호 식별 (Classification of Underwater Transient Signals Using Gaussian Mixture Model)

  • 오상환;배건성
    • 한국정보통신학회논문지
    • /
    • 제16권9호
    • /
    • pp.1870-1877
    • /
    • 2012
  • 천이신호는 지속시간이 짧으면서 길이의 변화가 크고, 시변성 및 비정재성 특성을 갖는다. 이러한 천이신호의 식별에는 분석 프레임 단위로 참조신호에 대한 기준패턴을 만들어 입력신호와의 유사도를 비교하는 방법이 효과적일 수 있다. 본 연구에서는 참조신호의 기준패턴으로 프레임 기반의 특징벡터들에 대해 확률통계 모형인 정규혼합모델을 적용하는 방법을 제안하고, 다양한 수중 천이신호에 대한 식별 실험을 통해 제안한 방법의 타당성을 검증하였다.

인공습지의 식생 모니터링을 통한 유지관리 방안 (Maintenance Plan through the vegetation monitoring of artifical wetland)

  • 이대웅;김정욱;홍승진;정주영;김형수
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2015년도 학술발표회
    • /
    • pp.629-629
    • /
    • 2015
  • 습지는 다양한 생태계가 형성되어있고, 토양과 물의 정화기능, 폭우방지 및 홍수 완화 등 인간이 살아가는데 중요한 역할을 하고 있다. 이처럼 중요한 기능을 제공하는 습지에 대한 관심이 증가하고 있지만 그에 따른 습지관리 방안에 대한 연구가 미흡한 실정이다. 특히, 습지 조성 후 유지관리 방안을 제시하기 위해서는 습지의 생태환경을 모니터링 하여 분석하는 것이 필요하다.이를 위해 본 연구에서는 비내섬(남한강), 옥포지구(낙동강), 세도지구(금강) 3개의 인공습지를 대상으로 생태환경에 대한 모니터링을 실시하였다. 모니터링 결과, 비내섬 습지는 천이초기단계에서 개척자식물이 유입되는 등 향후 천이도중상태의 이차초지로 천이될 것으로 판단되며, 옥포지구 습지는 안정된 천이과정을 보이고 있으나, 안정화 단계에 도달할 때 까지 지속적으로 변화될 것으로 판단된다. 세도지구 습지는 인위적 교란요인이 적기 때문에 미소입지별로 식생천이에 따라 다양한 식생이 형성될 것으로 판단된다. 본 연구의 결과 향후 봄, 여름이 추가된 사계절을 장기적으로 모니터링 하여 식물상 데이터를 구축할 수 있다면 더 정량적인 식성천이 분석을 할 수 있을 것으로 판단된다.

  • PDF

천이확률 및 Gamma 분포 매개변수를 이용한 강우 경향성 분석 (Rainfall tendency analysis using transition probability and the Gamma distribution parameters)

  • 이태우;주홍준;김수전;김형수
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2018년도 학술발표회
    • /
    • pp.174-174
    • /
    • 2018
  • 현재 우리나라에서는 지속적으로 홍수 및 가뭄에 대한 예방사업을 진행하고 있음에도 불구하고 해마다 피해가 발생하고 있으며, 이에 따라 효율적인 이수 치수 계획이 절실히 필요한 실정이다. 하지만 우리나라의 경우, 강우의 발생 특성이 과거와는 다른 양상을 보이고 있다. 따라서 강우빈도해석 시 강우특성이 변화하지 않는다는 정상성(stationary)을 가정하는 기존의 방법론은 문제가 있다. 이에 본 연구에서는 강우특성이 어떻게 변화하였는지 평가하는 방법론에 대하여 고찰하고자 한다. 우선, 대상 강우관측소의 과거 일강수량 자료를 수집하고 연도별 강우발생 천이확률(Markov Chain)과 강우량 확률분포(Gamma)의 매개변수를 산정한다. 그리고 일강우시계열의 경향성 분석(Mann-Kendall test) 결과와 함께 비교 검토하여 어떠한 방법론이 강우특성 변화를 더욱 잘 추정하는지에 대하여 평가한다. 본 연구를 통하여 우리나라 강우특성의 변화를 더욱 정확하게 추정할 수 있는 기틀을 마련할 수 있을 것이며, 향후 비정상성 기반의 기후변화 모의를 수행하기 위한 기초연구로 활용될 수 있을 것으로 기대된다.

  • PDF

광양만 종합개발에 따른 섬진강 하구역의 해양생태변화 1. 엽록소 $\alpha$량의 시ㆍ공간적 분포 특성

  • 윤양호;한명일
    • 한국어업기술학회:학술대회논문집
    • /
    • 한국어업기술학회 2001년도 추계 수산관련학회 공동학술대회발표요지집
    • /
    • pp.216-218
    • /
    • 2001
  • 1970년대에 접어들면서 광양만 및 인근해역은 대규모 산업단지 조성에 의해 다량의 생활하수와 산업배(폐)수가 유입되면서 매우 빠르게 부영양화가 진행되게 되어 급격한 생태계의 천이를 발생시키고 있다. 따라서 연구에서는 연안해역의 개발과 인위적 부영양화 과정에 따른 생태계 천이과정을 추구하는 한가지 수단으로 외부 환경변화에 가장 민감하게 반응하는 식물플랑크톤 생물량의 시ㆍ공간적 분포특성을 파악하여 보았다. (중략)

  • PDF

자연형 하천의 복원에 따른 홍수위 변화와 피해 분석 - 부산시 온천천 대상 - (Analysis of Flood Water Level Change and Flood Hazard by Natural Stream Restoration - On-Cheon Stream in Busan -)

  • 박용운;홍일표
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2006년도 학술발표회 논문집
    • /
    • pp.1187-1190
    • /
    • 2006
  • 최근 급속한 도시화에 따른 토지이용 증가와 토지이용 효율성의 증대는 불투수 표면의 확대, 유역의 조도계수 감소와 함께 유입시간의 단축, 수로망 정비에 의한 첨두유량의 증가, 도달시간의 감소를 발생시켜, 수로의 통수능 증가와 저류량의 급격한 감소 등 전반적인 수문현상의 변화를 가져와 도시 하천유역에 홍수 피해를 빈번히 발생시키고 있을 뿐만 아니라 근시안적인 난개발로 인해 하천 생태계가 파괴되는 등 하천 오염이 갈수록 심각해지고 있다. 근년에 들어 이런 문제 해결을 위해 하천정비시 자연형 개념을 도입하여 공사가 시행되고 있으며 본 연구의 대상하천으로 선정된 온천천이 부산의 그 대표적인 예라 하겠다. 본 연구에서는 자연형 하천의 복원에 따른 홍수위 변화와 피해 분석을 위해 먼저 온천천이 자연형 하천으로 복원되기 이전의 하도 단면과 복원 후 변화된 하도 단면으로 분류하였으며, GIS 기법을 이용해 공간 지형자료를 정량적으로 산출하였다. 하천 복원에 따른 특성 분석을 위하여 부산지방기상청으로부터 수집된 강우자료를 이용하여 확률강우량을 산정한 후 빈도별 홍수량을 산정하였다. 산정된 빈도별 홍수량을 HEC-RAS(River Analysis System) 모형에 적용하여 복원 전.후의 홍수위를 모의한 결과 온천천의 친수공간을 대표하는 주요지점에 대해 안전하다고 판단되었으나 온천천이 시민들의 친수공간으로 이용되고 있는 자연형 하천임을 고려할 때 돌발홍수에 대한 홍수예경보가 반드시 필요하다고 본다.

  • PDF

3차원 천이를 이용한 마이크로스트립 패치 안테나 (Microstrip patch antenna using 3 dimensional microstrip transition)

  • 박동국;최형동
    • 한국정보통신학회논문지
    • /
    • 제5권4호
    • /
    • pp.817-821
    • /
    • 2001
  • 본 논문에서는 3차원 천이를 이용한 마이크로스트립 패치 안테나를 사용하여 PCS주파수 대역에서 VSWR 1.3 이하의 광대역 특성을 갖는 안테나를 제안한다. 실험적으로 안테나 설계 파라미터들의 변화에 따른 임피던스의 변화를 측정하여 원하는 특성을 만족하는 안테나 파라미터를 구하고, 서로 수직한 편파 특성을 갖는 두개의 안테나를 사용하여 편파 다이버시티 배열 안테나를 제작하여 PCS 기지국 안테나로의 응용 가능성을 검토한다.

  • PDF

함수구배재료에서 천이탄성동적모드 III 균열전파 (Transient Elastodynamic Mode III Crack Growth in Functionally Graded Materials)

  • 이광호
    • 대한기계학회논문집A
    • /
    • 제34권7호
    • /
    • pp.851-858
    • /
    • 2010
  • 함수구배재료에서 구배방향을 따라 전파하는 천이모드 III 균열에 대한 일반적인 탄성해를 근접해법으로 얻었다. 함수구배재료의 전단계수 및 밀도는 구배방향을 따라 지수형적으로 변화한다고 가정하였다. 균열선단의 응력과 변위장은 응력확대계수 및 균열선단속도의 시간변화율에 의존하는 계수들을 갖는 방사상 좌표계의 누승으로 얻었다. 비균질성과 천이계수들이 응력 및 변위장의 고차항에 미치는 영향에 대하여 토론하였다.

100fsec이하의 극초단 광펄스를 사용하는 전광위상천이스위치에서 비선형상호작용 및 최적화 초기조건에 관한 연구 (A study of nonlinear interactions and optimum input parameters in all-optical phase-shift switches using ultrashort pulses with pulse-width less than 100fsec)

  • 윤기홍;송재원
    • 대한전자공학회논문지SD
    • /
    • 제39권6호
    • /
    • pp.8-18
    • /
    • 2002
  • 본 논문에서는 π의 위상천이를 얻기 위해 솔리톤펄스열(soliton pulse-train)에 의한 다중충돌방법과 광섬유접합(fiber-splicing)에 의한 다중충돌방법을 사용하는 전광위상천이스위치(all-optical phase-shift switch)에서 백 펨토초(femtosecond)이하의 펄스폭을 가지는 두 극초단 직교펄스간의 복잡한 비선형상호작용을 비선형라만응답함수를 고려하여 연구하였다. 또한 이러한 전광스위치에서 입사펄스의 시간폭의 변화와 광섬유의 복굴절률의 변화에 따른 스위칭특성을 분석함으로 해서 π의 위상천이를 얻기 위한 최적의 초기조건을 찾을 수 있었다.