• 제목/요약/키워드: actor-network

검색결과 109건 처리시간 0.023초

Self-Imitation Learning을 이용한 개선된 Deep Q-Network 알고리즘 (Improved Deep Q-Network Algorithm Using Self-Imitation Learning)

  • 선우영민;이원창
    • 전기전자학회논문지
    • /
    • 제25권4호
    • /
    • pp.644-649
    • /
    • 2021
  • Self-Imitation Learning은 간단한 비활성 정책 actor-critic 알고리즘으로써 에이전트가 과거의 좋은 경험을 활용하여 최적의 정책을 찾을 수 있도록 해준다. 그리고 actor-critic 구조를 갖는 강화학습 알고리즘에 결합되어 다양한 환경들에서 알고리즘의 상당한 개선을 보여주었다. 하지만 Self-Imitation Learning이 강화학습에 큰 도움을 준다고 하더라도 그 적용 분야는 actor-critic architecture를 가지는 강화학습 알고리즘으로 제한되어 있다. 본 논문에서 Self-Imitation Learning의 알고리즘을 가치 기반 강화학습 알고리즘인 DQN에 적용하는 방법을 제안하고, Self-Imitation Learning이 적용된 DQN 알고리즘의 학습을 다양한 환경에서 진행한다. 아울러 그 결과를 기존의 결과와 비교함으로써 Self-Imitation Leaning이 DQN에도 적용될 수 있으며 DQN의 성능을 개선할 수 있음을 보인다.

고령친화산업 행위주체 테트워크의 구조적.공간적 특성: 사회 네트워크 분석을 중심으로 (The Structural and Spatial Characteristics of the Actor Networks of the Industries for the Elderly: Based on the Social Network Analysis)

  • 구양미
    • 대한지리학회지
    • /
    • 제43권4호
    • /
    • pp.526-543
    • /
    • 2008
  • 본 연구는 고령친화산업의 제조부문과 관련된 행위주체 네트워크를 사회 네트워크 분석 방법을 이용하여 구조적, 공간적 특성을 분석한 것이다. 기존의 경제지리학 연구들이 네트워크 거버넌스 측면에 강조를 둔 것에 비해 본 연구는 네트워크 구조 분석에 초점을 두었다. 행위주체를 기업과 조직으로 나누어 네트워크 매트릭스 자료를 구축하고, 중심성 지수를 이용하여 네트워크의 위상구조적 특성을 분석하였다. 또한 공간구조적 분석을 위해서 행위주체의 지역별 비율을 비교하고, 중심성 지수와 거리 지표들의 상관관계를 분석하였다. 블록모델링을 이용하여 행위주체간 네트워크를 지역간 네트워크로 변환하여 공간적 분석을 실시하였다. 분석 결과, 초기 제도구축 과정에 있는 고령친화산업은 정부의 산업진흥 정책으로 비수도권 지역에 위치한 조직들이 네트워크에서의 영향력이 높게 나타났으며, 비수도권 간의 네트워크 역시 활발한 것으로 나타났다.

행위자-네트워크 이론의 교육 분야 적용 연구 분석을 통한 과학교육 연구 기여 가능성 탐색 (Exploring the Potential of Actor-Network Theory (ANT) in Science Education Research through the Analysis of Educational Studies Applying ANT)

  • 하윤희;임성은;김찬종
    • 한국과학교육학회지
    • /
    • 제42권3호
    • /
    • pp.341-356
    • /
    • 2022
  • 이 연구의 목적은 행위자-네트워크 이론이 과학교육 연구에 주는 시사점을 도출하는 것이었다. 이를 위해 최근 국내외의 교육 분야의 연구에서는 어떻게 행위자-네트워크 이론을 적용해왔는지를 중심으로 선행연구를 분석하였다. 연구 결과 교육 분야에서 행위자-네트워크 이론을 적용한 교육 연구들은 크게 세 가지 접근방식으로 분류되었다. 첫째, 교육 방법이나 관점을 구성하기 위한 인식론적 관점으로 활용하거나 둘째, 비인간의 행위성을 인식하는 존재론적 관점으로 활용하거나 셋째, 교육 연구를 위한 방법론으로 활용 또는 제안하였다. 연구 결과를 토대로 과학교육 연구에의 기여 가능성을 논의하였다. 새로운 이론적 관점으로써 행위자-네트워크 이론이 과학교육의 실천과 연구에 있어 함의를 줄 수 있을 것으로 기대한다.

RLS 기반 Actor-Critic 학습을 이용한 로봇이동 (Robot Locomotion via RLS-based Actor-Critic Learning)

  • 김종호;강대성;박주영
    • 한국지능시스템학회논문지
    • /
    • 제15권7호
    • /
    • pp.893-898
    • /
    • 2005
  • 강화학습 방법론 중 하나의 부류인 액터-크리틱 알고리즘은 제어압력 선택 문제에 있어서 최소한의 계산만을 필요로 하고, 확률적 정책을 명시정으로 다룰 수 있는 장점 때문에 최근에 인공지능 분야에서 많은 관심을 끌고 있다. 액터-크리틱 네트워크는 제어압력 선택 전략을 위한 액터 네트워크와 가치 함수 근사를 위한 크리틱 네트워크로 구성되며, 우수한 제어입력의 서택과 정화한 가치 함수 관사를 최대한 신속하게 달성하기 위하여, 학습 과정 동안 액터와 크리틱은 자신들의 파라미터 백터를 적응적으로 변화시키는 전략을 구사한다. 본 논문은 크리틱의 학습을 위해 빠른 수렴성을 보장하는 RLS (Recursive Least Square)를 사용하고, 액터의 학습을 위해 정책의 기울기(Policy Gradient)를 이용하는 새로운 종류의 알고리즘을 고려한다. 고려된 알고리즘의 적용 가능성은 두개의 링크를 갖는 로봇에 대한 실험을 통하여 예시된다.

한국 전자정부시스템 발전에 있어서 행정 표준의 역할과 관리체제의 변화 연구 (The Evolution of Korean e-Government Service in the Perspective of Actor-Network Theory)

  • 김수림;양희동;안중호
    • 기술혁신연구
    • /
    • 제23권3호
    • /
    • pp.21-42
    • /
    • 2015
  • 2년마다 실시되는 UN의 전자정부시스템 평가에서 한국의 전자정부 시스템은 2010, 2012, 2014년 3차례 걸쳐 1위로 평가되었다. 1978년 시작되어 이제는 해외로 수출까지 되는 한국 전자정부 시스템의 진화에 있어서 표준의 역할에 대해서는 그다지 알려진 바가 없다. 한국의 전자정부 시스템 발전에 어떠한 표준들이 어떠한 역할을 수행했으며, 이러한 표준이 제대로 기능하기 위하여 어떠한 제반 환경이 필요하고, 어떠한 노력이 경주되었는지 사례 연구를 수행하여 밝히고자 한다. 행위자 연결망 이론(Actor Network Theory)과 구조화 이론(Structuration theory)을 이론적 기반으로 하여, 표준이 행위자 연결망 이론 관점에서 어떠한 역할을 수행해 왔는지를 전자정부 시스템 발전에 직접 관여되었던 행정자치부 전자 정부담당 현/전직 관리자급 공무원, 표준담당관, NIA 표준 담당관, 민간 SI 업체 등 관련 전문가(관리자급)분들과의 인터뷰와 문헌 연구를 바탕으로 사례 분석을 실시하고자 한다.

IDMMAC: Interference Aware Distributed Multi-Channel MAC Protocol for WSAN

  • Kakarla, Jagadeesh;Majhi, Banshidhar;Battula, Ramesh Babu
    • Journal of Information Processing Systems
    • /
    • 제13권5호
    • /
    • pp.1229-1242
    • /
    • 2017
  • In this paper, an interference aware distributed multi-channel MAC (IDMMAC) protocol is proposed for wireless sensor and actor networks (WSANs). The WSAN consists of a huge number of sensors and ample amount of actors. Hence, in the IDMMAC protocol a lightweight channel selection mechanism is proposed to enhance the sensor's lifetime. The IDMMAC protocol divides the beacon interval into two phases (i.e., the ad-hoc traffic indication message (ATIM) window phase and data transmission phase). When a sensor wants to transmit event information to the actor, it negotiates the maximum packet reception ratio (PRR) and the capacity channel in the ATIM window with its 1-hop sensors. The channel negotiation takes place via a control channel. To improve the packet delivery ratio of the IDMMAC protocol, each actor selects a backup cluster head (BCH) from its cluster members. The BCH is elected based on its residual energy and node degree. The BCH selection phase takes place whenever an actor wants to perform actions in the event area or it leaves the cluster to help a neighbor actor. Furthermore, an interference and throughput aware multi-channel MAC protocol is also proposed for actor-actor coordination. An actor selects a minimum interference and maximum throughput channel among the available channels to communicate with the destination actor. The performance of the proposed IDMMAC protocol is analyzed using standard network parameters, such as packet delivery ratio, end-to-end delay, and energy dissipation, in the network. The obtained simulation results indicate that the IDMMAC protocol performs well compared to the existing MAC protocols.

무선 센서 액터 네트워크에서 액터의 연결성과 커버리지를 향상시키기 위한 클러스터 구성 (Clustering for Improved Actor Connectivity and Coverage in Wireless Sensor and Actor Networks)

  • 김영균;전창호
    • 한국컴퓨터정보학회논문지
    • /
    • 제19권8호
    • /
    • pp.63-71
    • /
    • 2014
  • 본 논문은 싱크 기반 무선 센서 액터 네트워크에서 액터의 연결성과 커버리지를 향상시키기 위하여 홉 거리를 기반으로 클러스터를 구성하는 알고리즘을 제안한다. 제안한 알고리즘은 싱크로부터 일정한 홉 간격으로 CH(Cluster Head)를 선출함으로써 목표영역에 고르게 분포된 센서 클러스터를 생성한다. CH 선출은 CH 위치에 배치되는 액터들과 싱크의 연결성을 보장하기 위해서 싱크로부터 순차적으로 진행된다. 또한 액터의 커버리지를 향상시키기 위해서 센서 밀도가 높은 영역부터 우선적으로 이루어진다. 제안한 알고리즘을 통하여 일정한 분포로 클러스터를 구성하여 중첩을 최소화함으로써 목표영역에서 생성되는 클러스터 수와 CH 위치에 배치되는 액터 수를 감축한다. 시뮬레이션을 수행하여 제안한 알고리즘이 싱크에 연결이 보장된 액터 네트워크를 형성함을 검증하였다. 그리고 기존의 IDSC 알고리즘에 비해 액터 커버리지를 향상시킴으로써 배치되는 액터 수를 9~20% 감축함을 확인하였다.

TERGM과 SAOM 비교 : 학생 네트워크 데이터의 통계적 분석 (Comparison of TERGM and SAOM : Statistical analysis of student network data)

  • 한유진;김재희
    • 응용통계연구
    • /
    • 제36권1호
    • /
    • pp.1-19
    • /
    • 2023
  • 본 연구는 학생 간의 연결에 어떤 속성이 유효한지 종단 네트워크 분석을 통해 알아보고자 하였으며, 종단 네트워크 모형인 TERGM (temporal exponential random graph model)과 SAOM (stochastic actor-oriented model) 통계적 모형을 사용하고 결과를 비교하였다. TERGM 모형은 네트워크 전체의 연결 형성을 바탕으로, SAOM 모형은 특정 행위자가 형성하는 주변 네트워크를 대상으로 연구 결과를 해석하였다. TERGM 모형은 시간 항을 통해 이전 시점의 영향을 표현하였으며, SAOM 모형은 비율 함수로 행위자의 기회에 의해 진화하는 네트워크를 구현해 시간적 종속성을 고려하였다.

한국 정보화정책의 변천과 특징 - 행위자 연결망을 중심으로 - (A Study on the Changes in and Characteristics of Informatization Policies in Korea: Focusing on the Actor-Network)

  • 한세억
    • 정보화정책
    • /
    • 제17권4호
    • /
    • pp.23-43
    • /
    • 2010
  • 한국의 정보화는 짧은 시간 동안에 커다란 변화를 경험했다. 정보화 정책의 형성과 집행과정에 수많은 인물과 조직이 참여하여 정책의 전개에 영향을 주면서 정보화 정책이 역동적으로 변화하였다. 그러면 국가사회담론으로서 자리 매김한 정보화정책의 확장적 변화와 특성에 영향을 미친 인물이 누구이며, 인적 연결망에 따라 어떠한 변화와 특징을 드러냈는가? 이러한 문제에 대한 해제탐색을 위해 시도된 이 연구의 분석결과, 한국 정보화의 정책전개 및 확장과정에서 정책 관료의 역할이 지배적이었다. 여기에 산업계 및 학계 인사들이 참여하였다. 반면 정치인의 역할은 미약한 것으로 나타났다. 통상 인맥은 학 지 혈연 등에 의해 형성되었지만 정보화정책은 기존의 연(緣)에 의해서라기보다는 정보통신기술을 매개로 한 정책공간에서 형성되었다. 정보통신인맥구성이 이질혼합적임에도 정책줄기가 공고하게 유지될 수 있었던 것은 정보화 중요성, 시급성의 공감대 바탕에서 정보통신기술, 지식과 전문성에 바탕을 둔 연대 또는 유대감이 강하게 작용했기 때문에 가능했던 것으로 판단된다.

  • PDF

행위자연계망이론을 통한 영국 도시교외지역 관리시책의 운영과정 특성 분석 -테임즈 체이스 마을 숲 조성 시책을 사례로- (An Analysis of the Urban Fringe Management Initiative's Operational Process in UK Using the Actor Network Theory - A Case Study of Thames Chase Community Forest Initiative -)

  • 김용범;박재홍;천성환
    • 농촌계획
    • /
    • 제13권1호
    • /
    • pp.97-109
    • /
    • 2007
  • The purpose of this research was to investigate and analyse how Community Forest Initiatives as urban fringe management initiatives made alliances with a variety of interest groups, enrol them in the urban fringe management processes using the Actor Network Theory. The Thames Chase Community Forest Initiative was selected and its area of operation included a $97 km^2$ area of green-belt area in East London. It was a instrument far improving and protecting the unique characteristics of the countryside landscape from urban developments as well as evaluating the impact of forestry inclusion in land use planning in the urban fringe. It was operated through a tiered structure comprising the Thames Chase Joint Committee and the management team. They employed a variety of devices to speak with one voice to bring about an effective operation process and to secure the enrolment of a variety of interest groups in its operational processes. Of note, the initiative's actor network impacted on improvement to and management of the countryside landscape despite not owning any land itself. As a result, when urban fringe management initiatives will be launched in South Korea to achieve a more effective and efficient urban fringe management, local councillors and representatives from public and non-government bodies should be more responsive to local communities' views and needs and work more vigorously on their behalf through lobbying, seeking media support, and so on. Moreover, better understanding and communication between local authorities' officers and management initiatives' teams are essential to avoid duplication of work practice.