• 정보처리학회논문지:소프트웨어 및 데이터공학
• /
• 제11권8호
• /
• pp.331-338
• /
• 2022

차기 상태 천이 표상(Successor representation, SR) 기반 강화학습 알고리즘은 두뇌에서 발현되는 신경과학적 기전을 바탕으로 발전해온 강화학습 모델이다. 해마에서 형성되는 인지맵 기반의 환경 구조 정보를 활용하여, 변화하는 환경에서도 빠르고 유연하게 학습하고 의사결정 가능한 자연 지능 모사형 강화학습 방법으로, 불확실한 보상 구조 변화에 대해 빠르게 학습하고 적응하는 강인한 성능을 보이는 것으로 잘 알려져 있다. 본 논문에서는 표면적인 보상 구조가 변화하는 환경뿐만 아니라, 상태 천이 확률과 같은 환경 구조 내 잠재 변수가 보상 구조 변화를 유발하는 상황에서도 SR-기반 강화학습 알고리즘이 강인하게 반응하고 학습할 수 있는지 확인하고자 한다. 성능 확인을 위해, 상태 천이에 대한 불확실성과 이로 인한 보상 구조 변화가 동시에 나타나는 2단계 마르코프 의사결정 환경에서, 목적 기반 강화학습 알고리즘에 SR을 융합한 SR-다이나 강화학습 에이전트 시뮬레이션을 수행하였다. 더불어, SR의 특성을 보다 잘 관찰하기 위해 환경을 변화시키는 잠재 변수들을 순차적으로 제어하면서 기존의 환경과 비교하여 추가적인 실험을 실시하였다. 실험 결과, SR-다이나는 환경 내 상태 천이 확률 변화에 따른 보상 변화를 제한적으로 학습하는 행동을 보였다. 다만 기존 환경에서의 실험 결과와 비교했을 때, SR-다이나는 잠재 변수 변화로 인한 보상 구조 변화를 빠르게 학습하지는 못하는 것으로 확인 되었다. 본 결과를 통해 환경 구조가 빠르게 변화하는 환경에서도 강인하게 동작할 수 있는 SR-기반 강화학습 에이전트 설계를 기대한다.

• Korean Journal of Radiology
• /
• 제22권7호
• /
• pp.1152-1162
• /
• 2021

Objective: This study aimed to determine whether there are regional differences in the blood-brain barrier (BBB) permeability of cognitively normal elderly participants and to identify factors influencing BBB permeability with a clinically feasible, 10-minute dynamic contrast-enhanced (DCE) MRI protocol. Materials and Methods: This IRB-approved prospective study recruited 35 cognitively normal adults (26 women; mean age, 64.5 ± 5.6 years) who underwent DCE T1-weighted imaging. Permeability maps (K_trans) were coregistered with masks to calculate the mean regional values. The paired t test and Friedman test were used to compare Ktrans between different regions. The relationships between K_trans and the factors of age, sex, education, cognition score, vascular risk burden, vascular factors on imaging, and medial temporal lobar atrophy were assessed using Pearson correlation and the Spearman rank test. Results: The mean permeability rates of the right and left hippocampi, as assessed with automatic segmentation, were 0.529 ± 0.472 and 0.585 ± 0.515 (K_trans, x 10^-3 min^-1), respectively. Concerning the deep gray matter, the K_trans of the thalamus was significantly greater than those of the putamen and hippocampus (p = 0.007, p = 0.041). Regarding the white matter, the K_trans value of the occipital white matter was significantly greater than those of the frontal, cingulate, and temporal white matter (p < 0.0001, p = 0.0007, p = 0.0002). The variations in K_trans across brain regions were not related to age, cognitive score, vascular risk burden, vascular risk factors on imaging, or medial temporal lobar atrophy in the study group. Conclusion: Our study demonstrated regional differences in BBB permeability (K_trans) in cognitively normal elderly adults using a clinically acceptable 10-minutes DCE imaging protocol. The regional differences suggest that the integrity of the BBB varies across the brains of cognitively normal elderly adults. We recommend considering regional differences in K_trans values when evaluating BBB permeability in patients with neurodegenerative diseases.

• 한국지구과학회지
• /
• 제23권6호
• /
• pp.461-473
• /
• 2002

본 연구는 지구과학 ‘해양’ 단원에서 제시된 5가지 주제에 대하여 개념도를 작성한 후 이를 중학교 과학 수업에 적용하여 그 효과를 분석하는 것을 목적으로 한다. 본 연구에서 작성된 개념도를 활용한 수업을 실험집단인 고등학교 2학년 2개 학급을 대상으로 운영하고 전통적인 수업을 실시한 비교집단과 비교한 결과는 다음과 같다. 첫째, 개념도활용 수업과 전통적인 수업이 과학성취도에 미치는 효과를 검증한 결과, 개념도 활용 수업이 전통적인 과학수업에 비해 학생들의 과학성취도에 긍정적인 효과를 미치는 것으로 나타났다. 또한 학습능력 수준에 따라 두 가지 수업의 효과를 비교한 결과, 학습능력이 높은 학습자보다 학습능력이 중 ${\cdot}$ 하위 수준의 학생들에게 더 효과적인 것으로 밝혀졌으며 개념도에서 위계가 분명한 학습내용일수록 개념도 활용 수업이 더 효과적이었다. 둘째, 개념도 활용 수업과 전통적인 수업이 과학에 대한 태도에 미치는 효과를 검증한 결과, ‘과학적 탐구에 대한 태도’ 범주와 ‘과학적 태도의 적용’ 범주에서는 개념도 활용 수업이 전통적인 수업보다 더 효과적이었다. 반면에 ‘과학수업의 즐거움’ 범주에서는 개념도 활용 수업과 전통적 수업의 효과에 차이가 나타나지 않아 개념도 작성에 대한 학습자들의 심리적인 부담을 반영해주었다. 셋째, 개념도 활용 수업 집단에 대한 설문 조사 결과 개념도 수업에 대한 학습자들의 인식은 전체적으로 긍정적인 것으로 나타났다. 하위 영역 별로 살펴보면 개념도 활용 수업이 학습내용의 이해 증진면에서 유리한 것으로 평가하였으며 학생이 작성한 개념도를 통해 수업 내용에 대한 확인이 용이하기 때문 평가도구로 활용가치가 높은 것으로 인식하였다. 파지력면에서 개념도는 배운 내용을 확인하고, 기억하는데 유용한 것으로 인식하였으나 활동성면과 흥미면에서는 다른 영역점수 보다 낮게 나타났다.가 1.2 mM, 1.8 mM인 경우 배양 14일에 염기성 인산분해효소의 활성도가 유의하게 증가하였으나, 2.5 mM인 경우 활성도가 감소하였다. 4. II-1 ${\beta}$의 활성도는 카페인을 단독 처리한 경우 0.2 mM, 1.0 mM에서, 칼슘 단독 처리시에는 1.8 mM에서, 혼합 처리시 0.1 mM 카페인과 1.8 mM 칼슘 혼합 처리한 경우 높게 나타났고, 고농도의 카페인, 칼슘 혼합 처리 시에는 낮게 나타났다 이러한 실험 결과를 통하여 칼슘이 1.2 mM, 1.8 mM 농도로 존재하는 경우 카페인에 의한 골모세포의 염기성 인산분해효소 활성과 IL-1 ${\beta}$의 활성 억제 효과가 어느 정도 회복되나, 2.5 mM 고농도의 칼슘은 억제된 활성을 회복시키지 못함을 확인하였다.지 않고 다양한 분야 즉 디자인, 생활 속에서의 벽지문양과 포장지, 예술작품 등에 활용되고 있음을 체험함으로써 수학이 실생활에 광범위하게 활용되고 있음을 알게 하였다. 역으로 생활 속에서의 테셀레이션을 통해 수학적 개념을 찾는 과정을 통해 수학이 아름다우면서도 실용적이라는 생각을 심어줄 수 있었다. 셋째, 테셀매니아, GSP, 캐브리, 거북기하 등 평소 수업에서는 활용도가 적은 컴퓨터 소프트웨어를 활용함으로써 컴퓨터 소프트웨어 자체에서 오는 호기심뿐만이 아니라 직접 조작하여 테셀레이션 작품과 개념을 익히고 새로운 작품과 학습을 해 내는 과정을 통해 자신감과 성취감 등에 있어 큰 변화가 있음을 발견할 수 있었다. 컴퓨터 기능이 미숙한 학생의 경우 처음에는 당황해 하고 어려워하는 부분도 있었으나 조작할 시간적 여유를 주고 교사와 우수한 학생들이 도우미로서 역할을 잘해내어 나중에는 큰 어려움 없이 마칠 수 있었다. 테셀레이션이라는 용어가 아직은 생소한 현장에서 교수 학습 자료가 부족하고 그에 따른 이해도 부족한