• 제목/요약/키워드: Macro-Action

검색결과 41건 처리시간 0.02초

A Method for Learning Macro-Actions for Virtual Characters Using Programming by Demonstration and Reinforcement Learning

  • Sung, Yun-Sick;Cho, Kyun-Geun
    • Journal of Information Processing Systems
    • /
    • 제8권3호
    • /
    • pp.409-420
    • /
    • 2012
  • The decision-making by agents in games is commonly based on reinforcement learning. To improve the quality of agents, it is necessary to solve the problems of the time and state space that are required for learning. Such problems can be solved by Macro-Actions, which are defined and executed by a sequence of primitive actions. In this line of research, the learning time is reduced by cutting down the number of policy decisions by agents. Macro-Actions were originally defined as combinations of the same primitive actions. Based on studies that showed the generation of Macro-Actions by learning, Macro-Actions are now thought to consist of diverse kinds of primitive actions. However an enormous amount of learning time and state space are required to generate Macro-Actions. To resolve these issues, we can apply insights from studies on the learning of tasks through Programming by Demonstration (PbD) to generate Macro-Actions that reduce the learning time and state space. In this paper, we propose a method to define and execute Macro-Actions. Macro-Actions are learned from a human subject via PbD and a policy is learned by reinforcement learning. In an experiment, the proposed method was applied to a car simulation to verify the scalability of the proposed method. Data was collected from the driving control of a human subject, and then the Macro-Actions that are required for running a car were generated. Furthermore, the policy that is necessary for driving on a track was learned. The acquisition of Macro-Actions by PbD reduced the driving time by about 16% compared to the case in which Macro-Actions were directly defined by a human subject. In addition, the learning time was also reduced by a faster convergence of the optimum policies.

주근의 부착작용에 기초하는 깊은보의 전단저항 기구의 모델화 (Modeling of Shear Mechanism of RC Deep Beams Incorporating Bond Action between Re-Bar and Concrete)

  • 김길희
    • 콘크리트학회논문집
    • /
    • 제18권5호
    • /
    • pp.639-648
    • /
    • 2006
  • 전단 경간비를 실험 변수로 하여 철근콘크리트 보에 대한 1방향 단조재하의 전단실험을 실시하였다. 실험에 병행하여 실시한 유한요소 해석과 실험결과를 기초로 전단 경간비가 작은 보의 전단내력을 구하는 해석 방법과 주근의 부착작용의 효과를 고려한 crooked main strut과 sub strut으로 구성되는 새로운 매크로 모델을 제안하였다. 그 결과 전단 경간비가 0.75 이하에서 본 연구에서 제안한 매크로 모델이 형성 가능하다는 것과 콘크리트 압축강도의 유효계수를 0.75로 하였을 때 실험 결과와 해석 결과가 가장 잘 일치함을 확인하였다.

Lateral confining action of mortar-filled sleeve reinforcement splice

  • Kim, Hyong-Kee;Lee, Sang-Ho
    • Structural Engineering and Mechanics
    • /
    • 제41권3호
    • /
    • pp.379-393
    • /
    • 2012
  • Of the various methods of splicing reinforcing bar in reinforced concrete structure, mortar-filled sleeve reinforcement splice offers diverse benefits, not only in terms of structural performance but also for the construction process. Consequently, after the mortar-filled sleeve splices have been developed in recent years, research and development on these splices has been actively carried out, in order to evaluate its macro structural performance, such as its strength and stiffness, with the aim of enabling this system to be applied to construction in the field as early as possible. However, to make a proper evaluation on the overall structural performance of the mortar-filled sleeve reinforcing bar splice, it is of critical importance to understand the lateral confining action of the sleeve, which is known to affect the bond strength between the embedded bar and mortar in the sleeve. Accordingly, in this study, an experiment of monotonic loading and cyclic loading was conducted with a full-sized mortar-filled sleeve splice attaching strain gauges on the sleeve surface with experimental variables such as development length of bar, etc. Based on the test results, the effect of the lateral confining action of the sleeve was analyzed and considered in terms of the bond strength between the bar and mortar in this splice.

사회적 실천지향 SSI 수업을 시행하면서 직면하는 초등 교사의 어려움 탐색 -구조와 행위주체성 관점에서- (Exploring Elementary Teacher's Challenges with the Perspective of Structure and Agency When Implementing Social Action-Oriented SSI Education Classes)

  • 임성은;김종욱;김찬종
    • 한국과학교육학회지
    • /
    • 제41권2호
    • /
    • pp.115-131
    • /
    • 2021
  • 전 지구적으로 기후변화 위기 상황이 고조되고 있는 오늘날 사회적 행동을 통해 사회를 변화시킬 수 있는 '기후변화를 주제로 한 사회적 실천지향 SSI 교육'의 필요성이 증가하고 있다. 본 연구는 사회문화적 관점을 바탕으로, 기후변화를 주제로 한 사회적 실천지향 SSI 수업을 실행하는 과정에서 직면하는 교사의 어려움이 무엇인지 탐색하고자 하였다. 이를 위해 46차시 동안 진행된 수업에 대한 질적 단일 사례연구를 진행하였으며, 연구 참여자와의 심층 면담, 교사 성찰일지, 수업 동영상, 학생 면담, 학습 결과물, 참여 관찰일지 등과 같은 질적 자료를 수집하였다. 수집된 자료는 실천적-평가적 차원의 구조를 micro(교실), meso (학교), macro (한국 사회) 장으로 나누어 분석하였다. 연구 결과 micro 장에서 새로운 시도의 수업으로 인해 기후변화에 대한 학생들의 이해나 인식을 파악하기 힘들었으며 특히 학생들이 기후변화를 나의 문제라고 인식하는 주인의식을 가지는 데 어려움이 있어 교사가 원하는 방향으로 수업이 이루어지지 않았다. 또한, 학생들은 스스로를 어린이로 위치 지으며 계획한 사회적 행동의 실현 가능성에 대해 회의적이거나, 사회적 행동을 이해하지 못하고 그 가치에 대해 공감하는 데 어려움을 겪어 학습 목표를 성취시키는 데 어려움이 있었다. meso 장에서는 동학년 교사와 교육과정을 비슷하게 운영해야 하는 학교 문화 속에서 교사만의 교육과정을 운영하는 데 어려움을 겪었다. 또한, 기후변화 수업이라는 낯선 과학 수업 주제에 대한 부담을 드러내는 동료 교사들과 소통이 단절된 채 교육과정을 홀로 운영하는 과정에서 전문성을 키워나가는 데 어려움을 겪었다. 관리자 역시 사회적 행동에 대한 소극적인 지원을 하여 학교 밖으로 사회적 행동을 실행하는 과정에서 갈등 상황에 직면하였다. 마지막으로 macro 장에서는 본 수업의 교수학습을 지원하는 물적 자원이 미흡하였으며, 학생들의 사회적 행동에 대한 사회구성원들의 제한된 시각이 교수학습상황의 거시적 제약조건으로 작용하고 있었다. 분석을 위해 유목화된 각 장의 제약조건들은 실제로는 독립적이고 분절적인 요소가 아닌 상호 간에 영향을 미치며 복합적인 그물망을 형성하며 구조적 제약조건을 형성하고 있었다. 이에 본 연구 결과를 통해 기후변화를 주제로 한 사회적 실천지향 SSI 수업을 실행하는데 교육 공동체 여러 주체의 다층적인 지원과 노력이 필요함을 시사한다.

Effect of hybrid fibers on flexural performance of reinforced SCC symmetric inclination beams

  • Zhang, Cong;Li, Zhihua;Ding, Yining
    • Computers and Concrete
    • /
    • 제22권2호
    • /
    • pp.209-220
    • /
    • 2018
  • In order to evaluate the effect of hybrid fibers on the flexural performance of tunnel segment at room temperature, twelve reinforced self-consolidating concrete (SCC) symmetric inclination beams containing steel fiber, macro polypropylene fiber, micro polypropylene fiber, and their hybridizations were studied under combined loading of flexure and axial compression. The results indicate that the addition of mono steel fiber and hybrid fibers can enhance the ultimate bearing capacity and cracking behavior of tested beams. These improvements can be further enhanced along with increasing the content of steel fiber and macro PP fiber, but reduced with the increase of the reinforcement ratio of beams. The hybrid effect of steel fiber and macro PP fiber was the most obvious. However, the addition of micro PP fibers led to a degradation to the flexural performance of reinforced beams at room temperature. Meanwhile, the hybrid use of steel fiber and micro polypropylene fiber didn't present an obvious improvement to SCC beams. Compared to micro polypropylene fiber, the macro polypropylene fiber plays a more prominent role on affecting the structural behavior of SCC beams. A calculation method for ultimate bearing capacity of flexural SCC symmetric inclination beams at room temperature by taking appropriate effect of hybrid fibers into consideration was proposed. The prediction results using the proposed model are compared with the experimental data in this study and other literature. The results indicate that the proposed model can estimate the ultimate bearing capacity of SCC symmetric inclination beams containing hybrid fibers subjected to combined action of flexure and axial compression at room temperature.

Lemna gibba $G_3$Salicylic Acid와 Dimethylsulfoxide의 영향 (Influence of Salicylic Acid and Dimethylsulfoxide on Flowering in Lemna gibba $G_3$)

  • 맹주선
    • Journal of Plant Biology
    • /
    • 제27권4호
    • /
    • pp.215-222
    • /
    • 1984
  • The reversal effect of salicylic acid(SA) on inhibition of flowering in Lemna gibba $G_3$ grown on ${NH_4}^+$-free 1/2H medium under continuous light is modified by ${PO_4}^{2-}$- and $Ca^{2+}$ levels. Dimethylsulfoxide(DMSO) either depresses the SA effect in ${NH_4}^{1}$-free 1/2H medium or amplifies it in E medium. The dual action of DMSO determined by relative levels of macro and micronutrient components is discussed.

  • PDF

블로그 포스트 랭킹을 위한 액션 발생의 순서 활용 방안 (Using Action Occurrence Orders in Blog Post Ranking)

  • 황원석;도영주;김상욱
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2010년도 춘계학술발표대회
    • /
    • pp.866-867
    • /
    • 2010
  • 블로그 이용이 활성화됨에 따라 포스트 랭킹 알고리즘의 필요성이 증가하고 있다. 본 논문에서는 액션의 발생 순서를 이용하여 포스트에 랭킹을 부여하는 방법을 제안한다. 또한, 실제 블로그 데이터를 이용한 실험을 통하여 본 논문에서 제안하는 방법의 성능의 우수성을 보인다.

영화 장르 흥행의 동학: 거시경제, 유행의 동력, 장르 간 경쟁의 효과 (The Dynamics of Film Genre Box Office Success: Macro-Economic Conditions, Fashion Momentum, and Inter-Genre Competition)

  • 정동일;김예슬;안채원;박영민
    • 문화기술의 융합
    • /
    • 제9권2호
    • /
    • pp.389-397
    • /
    • 2023
  • 대표적인 문화 상품인 영화는 시기별로 유행하는 장르가 달라진다는 특성을 갖는다. 본 연구는 거시경제 상황, 장르의 유행 동력, 장르 간의 경쟁이라는 영화시장 내외부의 요인이 영화 장르의 흥행과 그 유행에 어떠한 영향을 미치는지를 분석한다. 분석 결과, 경제 상황이 우호적일 때에는 액션/범죄 장르가 유행의 흐름을 타는 반면, 경제상황이 악화되면 다른 장르에 비해 액션/범죄 장르의 흥행이 크게 꺾이는 것으로 나타났다. 경제 상황이 잠재적 관람객의 소비자 심리에 영향을 미치며, 이러한 심리적 변화가 특정 장르의 흥행에도 영향을 주는 것으로 해석할 수 있다. 또한 액션/범죄 장르는 자체적인 유행의 동력이 크고, 따라서 유행이 상당히 오래 지속되는 특징을 보인다. 나아가 멜로/코미디 장르가 다른 장르와의 경쟁에 가장 취약한 반면, 액션/범죄 장르는 다른 장르와의 경쟁에 크게 영향을 받지 않는 것으로 나타났다. 이 결과는 액션/범죄 장르가 잠재적 관객의 기반이 상당히 넓고, 그 충성도 또한 높기 때문인 것으로 해석된다. 이 연구의 분석 결과는 문화예술 시장을 이해하고 설명하는 것뿐만 아니라, 문화 상품 공급자들이 활용할 수 있는 유용한 전략적 시사점을 제공한다.

Study on mechanism of macro failure and micro fracture of local nearly horizontal stratum in super-large section and deep buried tunnel

  • Li, Shu-cai;Wang, Jian-hua;Chen, Wei-zhong;Li, Li-ping;Zhang, Qian-qing;He, Peng
    • Geomechanics and Engineering
    • /
    • 제11권2호
    • /
    • pp.253-267
    • /
    • 2016
  • The stability of surrounding rock will be poor when the tunnel is excavated through nearly horizontal stratum. In this paper, the instability mechanism of local nearly horizontal stratum in super-large section and deep buried tunnel is revealed by the analysis of the macro failure and micro fracture. A structural model is proposed to explain the mechanics of surrounding rock collapse under the action of stress redistribution and shed light on the macroscopic analytical approach of the stability of surrounding rock. Then, some highly effective formulas applied in the tunnel engineering are developed according to the theory of mixed-mode micro fracture. And well-documented field case is made to demonstrate the effectiveness and accuracy of the proposed analytical methods of mixed-mode fracture. Meanwhile, in order to make the more accurate judgment about yield failure of rock mass, a series of comprehensive failure criteria are formed. In addition, the relationship between the nonlinear failure criterion and $K_I$ and $K_{II}$ of micro fracture is established to make the surrounding rock failure criterion more comprehensive and accurate. Further, the influence of the parameters related to the tension-shear mixed-mode fracture and compression-shear mixed-mode fracture on the propagation of rock crack is analyzed. Results show that ${\sigma}_3$ changes linearly with the change of ${\sigma}_1$. And the change rate is related to ${\beta}$, angle between the cracks and ${\sigma}_1$. The proposed simple analytical approach is economical and efficient, and suitable for the analysis of local nearly horizontal stratum in super-large section and deep buried tunnel.

지역 특성을 고려한 농촌마을계획에 관한 연구 -양양군 서면 서림리 해담마을을 사례로- (Study on the Rural Village Planning and Design by Considering Regional Characteristics -Case Study on Haedam maul, Seorim-ri, Seo-myeon, Yangyang-gun-)

  • 김상범;이승연;김은자;이승주;임창수;이상영
    • 농촌지도와개발
    • /
    • 제17권1호
    • /
    • pp.1-23
    • /
    • 2010
  • The purpose of this study is to verify and carry out action plan and issues on how local amenity can be revealed through rural village planning and design especially in the local resources such as nature, history, culture. Especially, this lead to macro view of the rural village plan i.e. related to rural identity and space planning via estimating the local resources. According to this study will plan of 4 phrase steps 1. Analyse nature, environment, human sociology environment, space etc., and comprehensive analysis 2. compare the results of estimation and find the planing factors after that set the planning process 3. plan and create to rural community i.e. considering harmony with space function, environmental circumstance, landscape etc, 4. suggest the rural community action plan by considering amenity attributes.