• 제목/요약/키워드: Behavioral Cloning

검색결과 2건 처리시간 0.015초

심층 강화학습을 이용한 휠-다리 로봇의 3차원 장애물극복 고속 모션 계획 방법 (Fast Motion Planning of Wheel-legged Robot for Crossing 3D Obstacles using Deep Reinforcement Learning)

  • 정순규;원문철
    • 로봇학회논문지
    • /
    • 제18권2호
    • /
    • pp.143-154
    • /
    • 2023
  • In this study, a fast motion planning method for the swing motion of a 6x6 wheel-legged robot to traverse large obstacles and gaps is proposed. The motion planning method presented in the previous paper, which was based on trajectory optimization, took up to tens of seconds and was limited to two-dimensional, structured vertical obstacles and trenches. A deep neural network based on one-dimensional Convolutional Neural Network (CNN) is introduced to generate keyframes, which are then used to represent smooth reference commands for the six leg angles along the robot's path. The network is initially trained using the behavioral cloning method with a dataset gathered from previous simulation results of the trajectory optimization. Its performance is then improved through reinforcement learning, using a one-step REINFORCE algorithm. The trained model has increased the speed of motion planning by up to 820 times and improved the success rates of obstacle crossing under harsh conditions, such as low friction and high roughness.

송사리 Tyrosine Hydroxylase: cDNA 클로닝 및 생물지표로서의 TH 유전자 발현의 분자생물학적 추적 (Ttrosine Hydroxylase in Japanese Medaka (Oryzias latipes): cDNA Cloning and Molecular Monitoring of TH Gene Expression As a Biomarker)

  • Shin, Sung-Woo;Kim, Jung-Sang;Chon, Tae-Soo;Lee, Sung-Kyu;Koh, Sung-Cheol
    • Environmental Analysis Health and Toxicology
    • /
    • 제15권4호
    • /
    • pp.131-137
    • /
    • 2000
  • 최근 독성 유해물질의 환경으로의 방출로 인해 인간 및 생태계에 대한 위해성 문제가 심각하게 제기되고 있다. 독성화학물질을 포함한 여러 환경 오염물질의 위해성평가는 화학물질의 유해성과 노출량 측정을 동시에 측정함으로써 가능한데 이 경우 생물지표(biomarker)가 최근 각광을 받고 있다. 본 연구에서는 동물의 행동에 관련된 신경전달물질의 생성에 결정적 역할을 하는 tyrosine hydroxylase(TH)및 그 유전자가 생물지표로서 이용 가능성이 있는지를 검토하였다. Ovary cDNA library의 PCR 스크리닝을 통한 송사리 TH유전자를 부분적으로 를론하였으며(327 bp), DNA염기서열 분석 결과 쥐 (rat)의 TH유전자와 동일한 염기서열을 보였다. 그리고 다이아지논 처리구 및 무처리구에서 송사리의 머리부분(head)및 몸통 부분(body)에서 추출된 총RNA에 TH mRNA가 존재함을 RT-PCR를 통하여 확인하였다. 그러나 다이아지논의 처리효과가 송사리의 행동에 미치는 영향을 보기 위해서는 TH의 발현을 보다 정량적으로 검토할 필요가 있을 것으로 판단된다. 생물지표로서 TH의 활성 및 mRNA의 기관별 또는 조직별 검출은 독성물질에 영향을 받는 어류 신경행동 변화를 모니터링 할 수 있는 유용한 수단이 될 것이다. 나아가 환경관리에 있어서 신경화학물질과 분자생물학적 상관관계를 통한 이상반응행동의 분석은 환경 위해성평가에 상당히 기여할 것이다.

  • PDF