• 제목/요약/키워드: Robot simulation

검색결과 1,696건 처리시간 0.03초

심층 큐 신경망을 이용한 게임 에이전트 구현 (Deep Q-Network based Game Agents)

  • 한동기;김명섭;김재윤;김정수
    • 로봇학회논문지
    • /
    • 제14권3호
    • /
    • pp.157-162
    • /
    • 2019
  • The video game Tetris is one of most popular game and it is well known that its game rule can be modelled as MDP (Markov Decision Process). This paper presents a DQN (Deep Q-Network) based game agent for Tetris game. To this end, the state is defined as the captured image of the Tetris game board and the reward is designed as a function of cleared lines by the game agent. The action is defined as left, right, rotate, drop, and their finite number of combinations. In addition to this, PER (Prioritized Experience Replay) is employed in order to enhance learning performance. To train the network more than 500000 episodes are used. The game agent employs the trained network to make a decision. The performance of the developed algorithm is validated via not only simulation but also real Tetris robot agent which is made of a camera, two Arduinos, 4 servo motors, and artificial fingers by 3D printing.

프로그래밍 도구에 따른 로봇활용수업 학습방안 (The Perception for Software Education of pre-Service Special Elementary Teacher)

  • 김세민;류창수;유강수
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2016년도 추계학술대회
    • /
    • pp.635-637
    • /
    • 2016
  • 본 연구는 같은 로봇 교구에 다른 프로그래밍 도구를 적용하였다. 로봇은 레고 마인드스톰 NXT을 활용하였다. 프로그래밍 도구는 일반적인 블록 프로그래밍 도구로는 NXT-G를 사용하였고, 시뮬레이션 프로그래밍 도구로는 MSRDS를 사용하였으며, 모바일 프로그래밍 도구로는 앱 인벤터(App Inventor)를 사용하였다. 위 3가지 프로그래밍 도구에 따라 학습들의 흥미와 학습효과를 이끌어 낼 수 있다.

  • PDF

Modified Gaussian Filter based on Fuzzy Membership Function for AWGN Removal in Digital Images

  • Cheon, Bong-Won;Kim, Nam-Ho
    • Journal of information and communication convergence engineering
    • /
    • 제19권1호
    • /
    • pp.54-60
    • /
    • 2021
  • Various digital devices were supplied throughout the Fourth Industrial Revolution. Accordingly, the importance of data processing has increased. Data processing significantly affects equipment reliability. Thus, the importance of data processing has increased, and various studies have been conducted on this topic. This study proposes a modified Gaussian filter algorithm based on a fuzzy membership function. The proposed algorithm calculates the Gaussian filter weight considering the standard deviation of the filtering mask and computes an estimate according to the fuzzy membership function. The final output is calculated by adding or subtracting the Gaussian filter output and estimate. To evaluate the proposed algorithm, simulations were conducted using existing additive white Gaussian noise removal algorithms. The proposed algorithm was then analyzed by comparing the peak signal-to-noise ratio and differential image. The simulation results show that the proposed algorithm has superior noise reduction performance and improved performance compared to the existing method.

A Modelling and Control Method for a Hybrid ROV/AUV for Underwater Exploration

  • Nak Yong, Ko;Jiyoun, Moon
    • Journal of Positioning, Navigation, and Timing
    • /
    • 제12권1호
    • /
    • pp.67-73
    • /
    • 2023
  • As interest in underwater structures and ocean exploration increases, many researchers are proposing methods for modeling and controlling various remotely operated vehicles (ROVs). Recently, hybrid systems composed of an autonomous underwater vehicle and an ROV capable of remote control and autonomous navigation are being developed. In this study we introduce a method that models Ariari-aROV, an ROV consisting of five thrusters, and performs navigation. The proposed ROV can be controlled manually and by autonomous navigation when given a target point. An extended Kalman filter is utilized for sensor measurement correction for more precise navigation. The proposed method is verified through a simulation.

비정형 환경에서 스마트 건설을 위한 이동 플랫폼 구현 (Mobile Platform Design for Smart Construction Under Unstructured Environments)

  • 문지윤;박용구
    • 한국전자통신학회논문지
    • /
    • 제17권6호
    • /
    • pp.1243-1248
    • /
    • 2022
  • 비정형 환경인 건설 현장에서 안정적으로 운영할 수 있는 이동 플랫폼은 스마트 건설기술 개발에 있어 중요한 문제이다. 본 논문에서는 건설 현장 지형정보 수집 지원을 위해 비정형 환경에서도 강인하게 주행할 수 있는 이동 로봇 플랫폼을 소개한다. 제안한 이동 플랫폼은 종경사 뿐만이 아닌 횡경사에도 대처할 수 있도록 설계하였으며 시뮬레이션 실험을 통해 제안한 플랫폼의 단차 극복성능을 분석하였다.

Self-Organization of Fuzzy Rule Base Using Genetic Algorithm

  • Park, Sae-Hie;Kim, Yong-Ho;Choi, Young-Keel;Cho, Hyun-Chan;Jeon, Hong-Tae
    • 한국지능시스템학회:학술대회논문집
    • /
    • 한국퍼지및지능시스템학회 1993년도 Fifth International Fuzzy Systems Association World Congress 93
    • /
    • pp.881-886
    • /
    • 1993
  • Fuzzy logic rule-based controller has many desirable advantages, which are simple to implement on the real time and need not the information of structure and dynamic characteristics of the system. Thus, nowadays, the scope of the application of the fuzzy logic controller becomes enlarged. But, if the controlled plant is a time-varying and nonlinear system, it is not easy to construct the fuzzy logic rules which usually need the knowledge of an expert. In this paper, an approach in which the logic control rules can be self-organized using genetic algorithm will be proposed and the effectiveness of the proposed method will be verified by computer simulation of the 2 d.o.f. planar robot manipulator.

  • PDF

군집로봇 간의 충돌 회피를 위한 시뮬레이션 (Swarm Robot Simulation for Collision Avoidance)

  • 조창권;우균
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2010년도 추계학술발표대회
    • /
    • pp.535-537
    • /
    • 2010
  • 군집로봇은 어떤 작업을 수행하기 위해 여러 로봇이 함께 움직이게 된다. 이렇게 여러 로봇이 함께 작업을 수행하다 보면 로봇 간의 충돌을 피해야 할 경우가 발생한다. 각 로봇은 주어진 환경을 인식하고 모델링하며 로봇들 간에 충돌을 피하여 주어진 임무를 효과적으로 이행할 수 있게 하는 것이 이 연구의 핵심이다. 로봇 간 충돌을 효과적으로 해결하기 위해 충돌 전 다양한 위치와 다양한 방법으로 충돌을 피할 수 있도록 했다. 따라서 이 논문에서는 카메라 센서와 위치정보 통신을 이용한 방법을 통해 군집로봇간의 충돌 회피에 대해 연구하였다.

Clock Synchronization in Delay Tolerant Sensor Networks

  • 바르터쇠 야로홉스키;신승중;류대현
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2009년도 추계학술발표대회
    • /
    • pp.189-190
    • /
    • 2009
  • For applications involving the monitoring of large areas, dense sensor networks are not practical. For such applications, delay tolerant networks which consist of disconnected clusters of sensors that are visited periodically by a mobile robot are implemented. Because clock synchronization is critical to any data collection endeavor, and because the structure of DTNs is unique, this paper examines various clock synchronization algorithms as they apply to DTNs. A simulation tool was developed to examine and evaluate the RBS clock synchronization algorithm for DTNs.

지능로봇 시뮬레이션을 이용한 창의적 학습방법 연구 (A Study on Creative Learning Method Using Intelligent Robot Simulation)

  • 이용수;홍성용
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2009년도 추계학술발표대회
    • /
    • pp.267-268
    • /
    • 2009
  • 많은 컴퓨터들이 기존의 단일코어 컴퓨터에서 벗어나 멀티코어를 장착한 컴퓨터로 변화하는 과정에서 기존의 단일 스레드 프로그래밍에서 다중처리가 중요해지는 세상이 되었다. 이러한 다중처리는 지능로봇 시뮬레이션 교육에 창의적 학습방법을 아주 잘 지원하고 있다. 지능로봇의 형태나 모형 그리고 센서 융합분야에서 동시처리는 중요한 역할을 하고 있다. 본 논문에서는 다중처리 기반 지능로봇 시뮬레이션 환경을 통해 창의적 학습방법에 관한 연구를 제안한다. 무한한 상상력과 창의성을 발휘하여 지능로봇의 모형 설계부터 직접 인공지능 프로그램까지 구현할 수 있는 방법을 소개한다.

문제해결능력을 가진 MSF 지능로봇 시뮬레이션 개발 연구 (A Study on Development of MSF Intelligent Robot Simulation with Problem Solving)

  • 김태호;홍성용
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2009년도 추계학술발표대회
    • /
    • pp.839-840
    • /
    • 2009
  • 지능 로봇 분야의 발전은 빠른 속도로 성장하고 있으며 여러 환경에서 문제 해결을 할 수 있는 로봇에 대한 연구 또한 활발하게 이루어지고 있다. 지능 로봇을 구현하기 위해서는 주변 환경을 받아들이기 위한 센서 조작이 반드시 필요한데, 비용 면이나 생산량의 한계 등의 이유로 이러한 센서들을 일반 교육자, 학생이 접하기가 쉽지 않다. 본 논문에서는 3D 시뮬레이션 환경에서 다중 센서를 이용한 문제해결 로봇을 구현하는 개발 방법을 제안하고자 한다. 만약 3D 시뮬레이션 환경에서 손쉽게 센서의 생성과 조작이 가능하다면 지능 로봇 연구분야, 특히 지능로봇 교육분야에 큰 도움이 될 것으로 기대한다.