• 제목/요약/키워드: State Space Exploration

검색결과 67건 처리시간 0.031초

다중 에이전트 강화 학습을 위한 상태 공간 타일링과 확률적 행동 선택 (State Space Tiling and Probabilistic Action Selection for Multi-Agent Reinforcement Learning)

  • 권기덕;김인철
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2006년도 한국컴퓨터종합학술대회 논문집 Vol.33 No.1 (B)
    • /
    • pp.106-108
    • /
    • 2006
  • 강화 학습은 누적 보상 값을 최대화할 수 있는 행동 선택 전략을 학습하는 온라인 학습의 한 형태이다. 효과적인 강화학습을 위해 학습 에이전트가 매 순간 고민해야 하는 문제가 탐험(exploitation)과 탐색(exploration)의 문제이다. 경험과 학습이 충분치 않은 상태의 에이전트는 어느 정도의 보상 값을 보장하는 과거에 경험한 행동을 선택하느냐 아니면 보상 값을 예측할 수 없는 새로운 행동을 시도해봄으로써 학습의 폭을 넓힐 것이냐를 고민하게 된다. 특히 단일 에이전트에 비해 상태공간과 행동공간이 더욱 커지는 다중 에이전트 시스템의 경우, 효과적인 강화학습을 위해서는 상태 공간 축소방법과 더불어 탐색의 기회가 많은 행동 선택 전략이 마련되어야 한다. 본 논문에서는 로봇축구 Keepaway를 위한 효율적인 다중 에이전트 강화학습 방법을 설명한다. 이 방법의 특징은 상태 공간 축소를 위해 함수근사방법의 하나인 타일 코딩을 적용하였고, 다양한 행동 선택을 위해 룰렛 휠 선택 전략을 적용한 것이다. 본 논문에서는 이 방법의 효과를 입증하기 위한 실험결과를 소개한다.

  • PDF

The effect of gravity and hydrostatic initial stress with variable thermal conductivity on a magneto-fiber-reinforced

  • Said, Samia M.;Othman, Mohamed I.A.
    • Structural Engineering and Mechanics
    • /
    • 제74권3호
    • /
    • pp.425-434
    • /
    • 2020
  • The present paper is concerned at investigating the effect of hydrostatic initial stress, gravity and magnetic field in fiber-reinforced thermoelastic solid, with variable thermal conductivity. The formulation of the problem applied in the context of the three-phase-lag model, Green-Naghdi theory with energy dissipation, as well as coupled theory. The exact expressions of the considered variables by using state-space approaches are obtained. Comparisons are performed in the absence and presence of the magnetic field as well as gravity. Also, a comparison was made in the three theories in the absence and presence of variable thermal conductivity as well as hydrostatic initial stress. The study finds applications in composite engineering, geology, seismology, control system and acoustics, exploration of valuable materials beneath the earth's surface.

Exploration of structural, thermal and spectroscopic properties of self-activated sulfate Eu2(SO4)3 with isolated SO4 groups

  • Denisenko, Yu.G.;Aleksandrovsky, A.S.;Atuchin, V.V.;Krylov, A.S.;Molokeev, M.S.;Oreshonkov, A.S.;Shestakov, N.P.;Andreev, O.V.
    • Journal of Industrial and Engineering Chemistry
    • /
    • 제68권
    • /
    • pp.109-116
    • /
    • 2018
  • $Eu_2(SO_4)_3$ was synthesized by chemical precipitation method and the crystal structure was determined by Rietveld analysis. The compound crystallizes in monoclinic space group C2/c. In the air environment, $Eu_2(SO_4)_3$ is stable up to $670^{\circ}C$. The sample of $Eu_2(SO_4)_3$ was examined by Raman, Fourier-transform infrared absorption and luminescence spectroscopy methods. The low site symmetry of $SO_4$ tetrahedra results in the appearance of the IR inactive ${\nu}_1$ mode around $1000cm^{-1}$ and ${\nu}_2$ modes below $500cm^{-1}$. The band intensities redistribution in the luminescent spectra of $Eu^{3+}$ ions is analyzed in terms of the peculiarities of its local environment.

Adaptive symbiotic organisms search (SOS) algorithm for structural design optimization

  • Tejani, Ghanshyam G.;Savsani, Vimal J.;Patel, Vivek K.
    • Journal of Computational Design and Engineering
    • /
    • 제3권3호
    • /
    • pp.226-249
    • /
    • 2016
  • The symbiotic organisms search (SOS) algorithm is an effective metaheuristic developed in 2014, which mimics the symbiotic relationship among the living beings, such as mutualism, commensalism, and parasitism, to survive in the ecosystem. In this study, three modified versions of the SOS algorithm are proposed by introducing adaptive benefit factors in the basic SOS algorithm to improve its efficiency. The basic SOS algorithm only considers benefit factors, whereas the proposed variants of the SOS algorithm, consider effective combinations of adaptive benefit factors and benefit factors to study their competence to lay down a good balance between exploration and exploitation of the search space. The proposed algorithms are tested to suit its applications to the engineering structures subjected to dynamic excitation, which may lead to undesirable vibrations. Structure optimization problems become more challenging if the shape and size variables are taken into account along with the frequency. To check the feasibility and effectiveness of the proposed algorithms, six different planar and space trusses are subjected to experimental analysis. The results obtained using the proposed methods are compared with those obtained using other optimization methods well established in the literature. The results reveal that the adaptive SOS algorithm is more reliable and efficient than the basic SOS algorithm and other state-of-the-art algorithms.

Proposal of Establishing a New International Space Agency for Mining the Natural Resources in the Moon, Mars and Other Celestial Bodies

  • Kim, Doo-Hwan
    • 항공우주정책ㆍ법학회지
    • /
    • 제35권2호
    • /
    • pp.313-374
    • /
    • 2020
  • 본 논문의 제목은 「달, 화성 및 기타천체에 있는 자원채굴을 위한 새로운 국제 우주기구의 설립제안」이다. 새로운 국제우주기구 (가칭: 이하 ISA이라고 호층 함)를 만들겠다는 아이디어는 본인의 학문적이며 실용적인 의견의 제시이다. 달과 화성 및 다른 우주천체에 있는 천연자원을 효율적이고 빠르게 개발하기 위해서는 국제기구로서 ISA의 설립이 필요하다. 이 새로운 국제우주기구인 ISA를 설립하는데 필요로 하는 법적이 근거는 1979 년의 달협약 제11조, 제5항 및 제18조에 근거를 두고 있다. ISA를 설립시키기 위한 절차로 우선 우주조약에 가입한 우주선진국들간에 논의를 거쳐 ISA 설립에 관한 조약초안을 마련하는데 있다. 이 논문에서 본인은 우주법에 관한 미국, 룩셈부르크, 유럽우주기구, 중국, 일본, 한국의 국내입법례와 달, 화성, 소행성, 금성, 목성, 토성, 타이탄별 등의 우주탐험과 앞으로의 개발계획 등을 살펴 보았다. ISA의 창설은 선진국들간에 우주탐험과 개발에 관한 협력사업을 추진하는데 있어 꼭 필요하고 또한 각국들 간에 국제협력이 증진됨으로 달과 화성, 기타천체에 있는 자원개발에 촉매적인 역활을 하게된다. 한편 우주선진국들은 우주자원의 탐험과 개발에 관한 기술확보, 우주 인력의 양성과 우주에 관련된 금융 등을 ISA를 통하여 중앙집중적으로, 능율적으로 관리할 수 있게 된다. 향후 우주 선진국들 간에 우주탐험과 개발에 관한 정책수립과 법율의 마련, 우주과학기술의 연구와 우주산업의 발전면에 국제협력이 절대로 필요함으로 ISA의 창설이 바람직하다고 본다. 우리가 「유럽우주기구 (ESA)의 설치에 관한 협약」을 참고하여 「국제우주기구의 설치에 관한 조약 초안」을 마련하는 것이 필요하다고 본다. 이 「국제우주기구의 설치에 관한 조약 초안」은 유엔의 우주평화적이용위원회 (UNCOPUOS)의 외교회의에서 3 분의 2의 찬성으로 위의 「조약 초안」을 통과시키는 것이 바람직하다. 마지막으로, 매우 중요한 점은 최고 수준의 정치적 추진력이 필요로 하는데 국제 연합을 포함한 우주선진국들의 수장들이 중·장기적인 우주개발 목표달성을 위해 ISA설립을 찬성한다는 엄숙한 공동성명을 발표하는 것이 매우 중요하다고 본다. 우주선진국들간에 우주산업을 더욱 발전시키고 국제협력관계를 증진시키고 새로운 이데올로기와 창조적인 아이디어를 기반으로 우주선진국들 간의 연구협력을 촉진시키기 위해 ISA를 설립시키는 것이 꼭 필요하다. 가까운 장래에 유엔을 포함한 우주선진국들의 정상들이 모이는 정상회담에서 ISA를 설립시키기로 합의만 한다면 ISA는 반듯이 창설될 수 있다고 본인은 확신하는 바입니다.

포스트모던시대 조형예술의 장소성과 환경 (Site-Specificity and Environment of Visual Art in the Postmodern Era)

  • 이봉순
    • 조형예술학연구
    • /
    • 제13권1호
    • /
    • pp.39-60
    • /
    • 2008
  • Nature/Landscape is surrounding space in which we make living. It is considerably comprehensive tenn. but on the other hand, the site can be existence, experience, and certain circumstance with boundaries. Based on these places, through contemporary art criticism, this study is to contemplate how art since 1960s, especially, site-specific art in three-dimensional space intervene in the environment. Artists of today put more value on the process and act of art making founded on the external, and they tend to create the characteristic of site or to indicate linguistic documentation. Moreover, a large-scale tendency of contemporary sculpture and 'occupation of specific site' seems to accede spatial conception from architecture. The core that recognizes these artworks is with body, that is to say, the space in which Self becomes the subject by changing the structure of the work while moving around it. In particular, 'Site-specific Art (in situ)' sometimes determines the form inward or outward It also relates directly on viewer's five senses by looking, hearing, and feeling, touching, and interacting. For example, in Richard Serra's , the viewer who moves around the work has the role to manipulate the movement of the work by perception. Works of In situ and works that planned for specific site suggest 'occupation of site' as of the function of the work These sites are ideal and special as well as being independent. Ultimately, it seems that the creative process of contemporary artists is to carry those intended form on the structure of perception. Furthermore, law of nature such as entropy, and acceptance of contingency helped organic structure of artwork become more abundant. For Robert Smithson, entropy suggests of reaching to a state of equilibriumin which everything is the same. This means that any core is justifiable and any rank is possible. Because the world without a core is a labyrinth of boundless exploration.

  • PDF

Militarization and Weaponization of Outer Space in International Law

  • Kim, Han-Taek
    • 항공우주정책ㆍ법학회지
    • /
    • 제33권1호
    • /
    • pp.261-284
    • /
    • 2018
  • 현재의 국제법제도는 우주의 군사화와 무기화에 대한 안전장치를 제공하지 못한다. 1967년 우주조약 제4조에 명시된 "우주의 평화적 이용"이라는 용어는 정부의 공식 성명서나 다자간 우주관련조약에 표현되어 있지만, 국가 관행을 검토하면 이 용어는 여전히 권위 있는 정의를 내리지 못하고 있다. 이러한 우주조약 제4조의 무기에 대한 모호한 금지는 국가들로 하여금 우주와 천체에 핵무기나 대량파괴무기 이외에 다른 기타 무기의 배치를 허용하고 있다. 1967년 우주조약에 명시된 '우주의 평화적 이용'의 문구는 1979년 달협정에서도 발견되므로 이를 함께 분석해야 한다. 또한 특정 무기통제조치가 포함되어 있지는 않지만 1975년 등록협약도 참고해야 하는데, 등록협약은 적절하게 적용되면 신뢰구축의 역할을 상당히 수행할 수 있다. 그 이유는 동 협약 제4조가 우주물체의 일반적인 기능을 포함한 우주발사물체에 관한 정보를 유엔사무총장에게 제공할 것을 요구하고 있기 때문이다. 한편 2008년 유엔총회의 특별회기 때 군비축소팀에 중국과 러시아가 공동으로 제출하고 나중에 2014년에 개정된 "우주에서의 무기배치와 우주물체에 대한 무력의 위협이나 사용금지조약안(PPWT)"은 우주에서 사용되는 무기에 대한 정의를 제공하고 우주무기확산을 금지하려는 시도를 하고 있지만, 미국이 반대하고 있다. 그 이유는 우주 공간에는 현재 무기경쟁이 없다는 이유에서인데, 실제로 우주에서 천체는 아니고 우주공간(outer void space)은 이미 "군사화"되어 군사적 수단으로 사용되고 있으나 아직 "무기화"는 되지 못하고 있다. 즉, 인공위성이 다른 위성을 파괴하거나 우주에서 발사되어 지구표면을 공격할 수 있는 우주무기는 아직 없고, 지구표면에서 발사된 인공위성을 파괴할 수 있는 능력만 계속 시도되고 입증되고 있을 뿐이다. 우주의 군사적 이용을 규제하기 위해 모든 면에서 통합적이고 구속력 있는 법적 도구의 궁극적인 창조를 목적으로 한 구속력을 가진 법이 채택되어야 한다는 경성법(hard law) 접근법을 지지하는 사람들도 있지만, 현재 그것이 불가능하다면 임시조치로 연성법(soft)인 가이드라인이 개발되어야 할 것이다. 이는 적용시킬 법이 없어서 재판불능(non liquiet) 상태에 이르는 사태에 대비하기 위하여 매우 유용하게 이용될 수 있다. 사실 연성법은 조약의 포고에 관하여 지지를 표출하며 국제관습법을 창출하는 데 사용되기도 한다. 1963년 "우주의 탐사와 사용에 있어서 국가의 활동을 규제하는 법원칙 선언"과 1992년 " 원료사용원칙"을 그 예로 들 수 있는데, 전자의 상당 부분은 이후에 제정된 1967년 우주조약에 성문화되었고, 후자는 비록 의무적인 용어로 쓰여졌지만 경성법 못지않게 지속적으로 국가에 의해 준수될 국제관습법의 일부가 되어 가고 있다. 한편 이와 관련하여 1974년 11월 12일 유엔총회에서 채택된 결의에서 '선언'(declaration)과 '결의'(resolution)는 국제법의 발전에 반영될 수 있는 방법으로서 국제사법재판소(ICJ)에 의해서 고려되어야 한다고 권고한 점에 주목해야 할 것이다.

FPGA에서 에너지 효율이 높은 데이터 경로 구성을 위한 계층적 설계 방법 (A Model-based Methodology for Application Specific Energy Efficient Data path Design Using FPGAs)

  • 장주욱;이미숙;;최선일
    • 정보처리학회논문지A
    • /
    • 제12A권5호
    • /
    • pp.451-460
    • /
    • 2005
  • 본 논문은 ffGA상에서 에너지 효율이 높은 데이터 경로 설계 방법론을 제안한다. 에너지, 처리시간, 그리고 면적간의 트레이드오프를 이해하기 위하여, 도메인 특성 모델링, coarse-grained 성능평가, 설계공간 조사, 그리고 로우-레벨 시뮬레이션 과정들을 통합한다. 도메인 특성 모델링 기술은 도메인의 특성에 따른 시스템 전체의 에너지 모에 영향을 미치는 여러 가지 구성요소와 파라미터들을 식별함으로써 하이-레벨 모델을 명시한다. 도메인이란 주어진 어플리케이션 커널의 알고리즘에 대응하는 아키텍쳐 패밀리이다. 하이-레벨 모델 또한 에너지, 처리시간 그리고 면적을 예측하는 함수들로 구성되어 트레이드오프 분석을 용이하게 한다. 설계 공간 조사(DSE)는 도메인에 명시된 설계 공간을 분석하여 설계 셋을 선택하도록 한다. 로우-레벨 시뮬레이션은 설계 공간 조사(DSE)에 의해 선택된 설계와 최종 선택된 설계의 정확한 성능평가를 위하여 사용된다. 본 논문에서 제안한 설계 방법은 매트릭스 곱셈에 대응하는 알고리즘과 아키텍쳐 패밀리를 사용한다. 제안된 방법에 의해 검증된 설계는 에너지, 처리시간과 면적간의 트레이드오프를 보인다. 제안된 설계 방법의 효율성을 보이기 위하여 Xilinx에서 제공되는 매트릭스 곱셈 커널과 비교하였다. 성능 비교 메트릭으로 평균 전력 밀도(E/AT)와 에너지 대 (면적 x 처리시간)비를 사용하였다. 다양한 문제의 크기에 대하여 Xilinx설계들과 비교하였을 때 제안한 설계 방법이 전력밀도(E/AT)에서 평균 $25\%$우수하였다. 또한 본 논문에 제안한 설계의 방법을 MILAN 프레임워크를 이용하여 구현하였다.

우주탐사용 나노기술 개발 동향 (Current Status of Nanotechnology Development for Space Exploration)

  • 이호성;채연석
    • 항공우주산업기술동향
    • /
    • 제6권1호
    • /
    • pp.90-98
    • /
    • 2008
  • 나노기술(NT, Nanotechnology)은 분자 및 원자 수준에서 물질을 제작 및 가공할 수 있는 초극미세기술을 의미하며, 재료, 물리, 전자 등의 기존의 기술 분야들을 융합하여 새로운 기술 영역을 구축하는 학제간 연구(Interdisciplinary)가 필요한 분야이다. 국내에서는 탄소나노튜브가 향후 반도체를 견인할 10대 신성장동력 미래기술로 선정되어 활발한 연구가 이루어지고 있다. 나노기술이 미소과학 분야라면 우주기술(ST, Space Technology)는 거대 복합과학 분야를 대표하는 기술로서 기계, 재료, 전자, 통신 등의 기술을 활용하는 시스템 기술이다. 우리나라의 우주개발은 선진국 보다 비록40년 가량 늦었지만 15년 남짓한 기간에 기술자립화 단계로 나아가는 비약적인 성과를 보여주고 있다. 전남 고흥에 나로우주센터가 완공되면 우리 땅에서, 우리 위성을, 우리 발사체로 발사할 수 있게 된다. 나노기술분야는 나노재료, 나노전자, 나노제조 등 매우 광범위하므로 우주기술 개발을 위한 제한된 자원의 견지에서, 비용 대비 성능이 가장 우수하게 평가되는 나노 기술적 구성요소들에 집중하는 것이 필요하다. 본 논문에서는 미국 NASA에서 수행중인 나노기술 개발현황과 유럽의 9차 나노포럼에서 보고한 우주항공분야의 나노기술을 기초로, 현재 우주항공선진국에서 수행중인 개발 현황을 정리하였다. 성능 나노기술의 도움으로 이전에는 불가능하였던 우주 기술이 현실로 다가오고 있는바, 우주개발의 경쟁력을 얻기 위해서는 나노기술을 접목해야만 한다는 것을 알 수 있다. 우리나라는 국가우주개발중장기계획에 따라 2025년 달탐사 착륙선을 개발할 계획이므로, 나노기술을 적극적으로 활용하여 선진국수준의 기술을 확보해야 할 것이다.

  • PDF

우주활동에 있어서 분쟁의 해결과 예방 (The Settlement of Conflict in International Space Activities)

  • 이영진
    • 항공우주정책ㆍ법학회지
    • /
    • 제25권1호
    • /
    • pp.159-203
    • /
    • 2010
  • 우주법상의 분쟁은 전문적, 기술적 성격을 띠고 있을 뿐만 아니라, 우주개발 기술이 발전된 선진국과 개발도상국가와의 이해관계의 차이가 매우 크다는 점에서 독특한 측면이 있다. 현재의 우주관련 협정들의 분쟁해결조항들을 분석해 보면 국가가 그들의 주권과 충돌하는 문제에 대해서 아직도 불신과 의구심을 드러내고 있다는 사실을 쉽게 간파할 수 있다. 그들은 사법적 판결이나 구속력 있는 중재에 분쟁해결을 의뢰하는 것을 꺼린다. 이러한 규정들은 정치적, 경제적, 사회적 이익과 인구통계학적 특성이 상이한 국가사이의 협상일 때 특히 그러하다. 그렇지만 국가들이 국가주권의 장벽을 걷어낼 필요성이 점점 커지고 있는 오늘날의 정치적, 경제적 그리고 기술적 압력들을 인식하게 되면서 이러한 태도는 서서히 그러나 명백히 변화하고 있다. 우주의 탐사 및 개발과 관련하여 증가하는 분쟁의 해결을 위한 효과적인 제도적 장치를 구축하는 작업은 국제기구나 개별국가뿐만 아니라 각국의 국제법 학자와 국제단체들에게 주어진 범세계적 연구과제라 할 것이다. 전술한 바 있는 1972년의 책임협약도 분쟁해결에 있어서 비교적 정교한 규정내용을 가진 우주관련 조약이긴 하지만 구속력 있는 결정을 확보하는 데는 실패했다. 이 조약의 채택이래로 강제적 관할권과 판정의 이행을 지지하는 압력단체가 출현하기도 했으며 특히 우주분쟁해결을 위한 분야별 국제적 메카니즘이 시급히 마련되어야 한다는 인식이 확산되었다. 이 점에서 1998년의 Taipei에서 채택된 분쟁해결을 위한 ILA의 협약 초안은 독립적인 분야별 우주분쟁해결 제도의 창설 여부에 대한 심도 있는 논의를 위해 의미가 큰 유용한 틀을 제공 하고 있다고 본다. 동 협약초안에 따르면 분쟁당사국 특히 우주선진국들이 구속적인 분쟁해결 절차를 꺼려한다는 사실을 고려하여 우주활동에 관한 분쟁을 선택적으로 해결하도록 할 수 있는 가능한 다양한 방법을 제시하고 있다는 점이 눈에 띈다. 즉, 당사자들은 이 협약을 서면, 비준, 가입할 때 동 협약의 해석이나 적용에 관한 분쟁을 해결하기 위하여 국제우주법재판소, 국제사법재판소 그리고 중재재판소 등 3가지 강제적 절차 중에서 하나 이상을 선택선언 할 수 있도록 하고 있는바 이것은 장차 우주활동에 따른 분쟁해결에 있어 커다란 시사점을 던져주는 것이기도 하다. 이제 국제우주법은 우주활동의 문제점과 복잡성을 조정할 수 있는 특성화된 분쟁해결체제의 요구로 국제우주법의 역사에 있어서 새로운 국면에 처해 있다. 아직은 우주선진국을 중심으로 구속적인 분쟁해결기구 창설에 반대하는 경향이 존재하는 것이 사실이지만 최근에 각 분야별로 국제법의 일반적인 준칙의 발전이 이루어져 가고 있고 해양법이나 형사법의 영역에서도 볼 수 있듯이 우주법 분야에 있어서도 점증하는 법적 분쟁의 해결을 위해 해양이용분야에 있어서의 해양법재판소 등을 참고하여 그에 준하는 효율적 분쟁해결기구의 탄생을 전향적으로 검토해야할 계제가 되었다는 점을 강조하고자 한다.

  • PDF