• Title/Summary/Keyword: 모델 파라미터 튜닝

Search Result 39, Processing Time 0.032 seconds

Image Manipulation in Diffusion Model withDrag Input using Self-Attention Control (디퓨전 모델에서의 전 범위적 이미지 조작을 위한 셀프 어텐션 제어 및 드래그 특징 반영 연구)

  • SungYoon Lim;YoungJoo Jo;Yong-Ju Lee
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2023.11a
    • /
    • pp.465-468
    • /
    • 2023
  • 디퓨전 모델에서 생성한 이미지를 조작하는 기존 프롬프트 기반 방법과 포인트 기반 방법에는 각각의 단점이 있다. 프롬프트 기반은 프롬프트로만 조작이 가능하고 세세하지 못하다. 포인트 기반은 입력 이미지의 스타일을 보존하려면 파인튜닝이 필요하다. 본 논문은 디퓨전 생성 모델에 셀프 어텐션 제어와 드래그 조작을 통해, 파라미터 학습 없이, 이미지의 스타일을 보존하며 다양한 범위의 이미지 조작이 가능한 방법을 제안한다.

Improving the performance for Relation Networks using parameters tuning (파라미터 튜닝을 통한 Relation Networks 성능개선)

  • Lee, Hyun-Ok;Lim, Heui-Seok
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2018.05a
    • /
    • pp.377-380
    • /
    • 2018
  • 인간의 추론 능력이란 문제에 주어진 조건을 보고 문제 해결에 필요한 것이 무엇인지를 논리적으로 생각해 보는 것으로 문제 상황 속에서 일정한 규칙이나 성질을 발견하고 이를 수학적인 방법으로 법칙을 찾아내거나 해결하는 능력을 말한다. 이러한 인간인지 능력과 유사한 인공지능 시스템을 개발하는데 있어서 핵심적 도전은 비구조적 데이터(unstructured data)로부터 그 개체들(object)과 그들간의 관계(relation)에 대해 추론하는 능력을 부여하는 것이라고 할 수 있다. 지금까지 딥러닝(deep learning) 방법은 구조화 되지 않은 데이터로부터 문제를 해결하는 엄청난 진보를 가져왔지만, 명시적으로 개체간의 관계를 고려하지 않고 이를 수행해왔다. 최근 발표된 구조화되지 않은 데이터로부터 복잡한 관계 추론을 수행하는 심층신경망(deep neural networks)은 관계추론(relational reasoning)의 시도를 이해하는데 기대할 만한 접근법을 보여주고 있다. 그 첫 번째는 관계추론을 위한 간단한 신경망 모듈(A simple neural network module for relational reasoning) 인 RN(Relation Networks)이고, 두 번째는 시각적 관찰을 기반으로 실제대상의 미래 상태를 예측하는 범용 목적의 VIN(Visual Interaction Networks)이다. 관계 추론을 수행하는 이들 심층신경망(deep neural networks)은 세상을 객체(objects)와 그들의 관계(their relations)라는 체계로 분해하고, 신경망(neural networks)이 피상적으로는 매우 달라 보이지만 근본적으로는 공통관계를 갖는 장면들에 대하여 객체와 관계라는 새로운 결합(combinations)을 일반화할 수 있는 강력한 추론 능력(powerful ability to reason)을 보유할 수 있다는 것을 보여주고 있다. 본 논문에서는 관계 추론을 수행하는 심층신경망(deep neural networks) 중에서 Sort-of-CLEVR 데이터 셋(dataset)을 사용하여 RN(Relation Networks)의 성능을 재현 및 관찰해 보았으며, 더 나아가 파라미터(parameters) 튜닝을 통하여 RN(Relation Networks) 모델의 성능 개선방법을 제시하여 보았다.

Position Controller with Adaptive Feedforward Control (피드포워드 적응제어를 사용한 위치제어기)

  • Yoon Myung-Ha;Choi Nam-Yerl;Lee Chi-Hwan
    • Proceedings of the KIPE Conference
    • /
    • 2002.07a
    • /
    • pp.154-157
    • /
    • 2002
  • 본 연구는 관성의 변화, 비선형 마찰 등에 견실한 피드포워드 적응 위치제어기를 제안한다. 제안된 적응 위치제어기의 특징은 제어기 적응파라미터가 위치오차에 기준모델의 속도 정보를 받아들여 셀프 튜닝된다. 이것은 과도응답 특성을 향상시키고, 정상상태의 수렴 시간을 줄여 시스템의 성능을 개선시킨다. 시뮬레이션을 통하여 제안된 피드포워드 적응 위치제어기의 동작과 설계 방법의 타당성을 보였다.

  • PDF

A Study on Prompt-based Persona Dialogue Generation (Prompt를 활용한 페르소나 대화 생성 연구)

  • Yoona Jang;Kisu Yang;Hyeonseok Moon;Jaehyung Seo;Jungwoo Lim;Junyoung Son;Chanjun Park;Kinam Park;Heuiseok Lim
    • Annual Conference on Human and Language Technology
    • /
    • 2022.10a
    • /
    • pp.77-81
    • /
    • 2022
  • 최근 사전학습 언어모델에 내재된 지식을 최대한으로 활용하고자 태스크에 대한 설명을 입력으로 주는 manual prompt tuning 방법과 자연어 대신 학습가능한 파라미터로 태스크에 대한 이해를 돕는 soft prompt tuning 방법론이 자연어처리 분야에서 활발히 연구가 진행되고 있다. 이에 본 연구에서는 페르소나 대화 생성 태스크에서 encoder-decoder 구조 기반의 사전학습 언어모델 BART를 활용하여 manual prompt tuning 및 soft prompt tuning 방법을 고안하고, 파인튜닝과의 성능을 비교한다. 전체 학습 데이터에 대한 실험 뿐 아니라, few-shot 세팅에서의 성능을 확인한다.

  • PDF

Predictive Control based on Genetic Algorithm for Mobile Robots with Constraints (제한조건을 갖는 이동로봇의 유전알고리즘에 의한 예측제어)

  • Choi, Young-Kiu;Park, Jin-Hyun
    • Journal of the Korea Institute of Information and Communication Engineering
    • /
    • v.22 no.1
    • /
    • pp.9-16
    • /
    • 2018
  • Predictive control is a very practical method that obtain the current input that minimizes the future errors of the reference command and state by use of the predictive model of the controlled object, and can also consider the constraints of the state and input. Although there have been studies in which predictive control is applied to mobile robots, performance has not been optimized as various control parameters for determining control performance have been arbitrarily specified. In this paper, we apply the genetic algorithm to the trajectory tracking control of a mobile robot with input constraints in order to minimize the trajectory tracking errors through control parameter tuning, and apply the quadratic programming Hildreth method to reflect the input constraints. Through the computer simulation, the superiority of the proposed method is confirmed by comparing with the existing method.

Adaptive fuzzy sliding mode controller for uncertain nonlinear systems (불확실한 비선형 시스템에 대한 적응 퍼지 슬라이딩 모드 제어기)

  • Hwang Eun-Ju;Baek Jae-Ho;Kim Eun-Tae;Park Min-Yong
    • Proceedings of the Korean Institute of Intelligent Systems Conference
    • /
    • 2006.05a
    • /
    • pp.164-167
    • /
    • 2006
  • 본 논문에서는 불확실한 비선형 시스템에 대한 적응 퍼지 슬라이딩 모드 제어기를 설계한다. 불확실한 비선형 시스템에서 발생할 수 있는 파라미터의 변화를 대처하기 위해서 적응 퍼지 이론을 이용하였고, 외란으로 인한 불확실성을 슬라이딩 모드의 제어기를 통해서 해결하였다. 또한 퍼지 튜닝을 통해 슬라이딩 조건을 가변화함으로써 기존의 슬라이딩 모드 제어기에 비해 빠르고 정확하게 추종 가능하도록 제어기의 성능을 향상시킨다. 제안하는 제어기는 정확한 동역학 모델의 구현이 어렵고 복잡한 비선형 시스템에 외란 특성이 우수한 슬라이딩 모드와 실제 시스템을 표현하는 범용 근사자로 유용성이 입증된 퍼지 시스템을 이용하여 간단하고 쉽게 제어할 수 있도록 하였다. Lyapunov이론을 통하여 전역적인 안정화를 보이며, 마지막으로 역진자 시스템에 적용하여 제안된 제어기의 성능을 검증한다.

  • PDF

사물인터넷 환경의 이상탐지를 위한 경량 인공신경망 기술 연구

  • Oh, Sungtaek;Go, Woong;Kim, Mijoo;Lee, Jaehyuk;Kim, Hong-Geun;Park, SoonTai
    • Review of KIISC
    • /
    • v.29 no.6
    • /
    • pp.53-58
    • /
    • 2019
  • 최근 5G 네트워크의 발전으로 사물인터넷의 활용도가 커지며 시장이 급격히 확대되고 있다. 사물인터넷 기기가 급증하면서 이를 대상으로 하는 위협이 크게 늘며 사물인터넷 기기의 보안이 중요시 되고 있다. 그러나 이러한 사물인터넷 기기는 기존의 ICT 장비와는 다르게 리소스가 제한되어 있다. 본 논문에서는 이러한 특성을 갖는 사물인터넷 환경에 적합한 보안기술로 네트워크 학습을 통해 사물인터넷 기기의 이상행위를 탐지하는 경량화된 인공신경망 기술을 제안한다. 기기 별 혹은 사용자 별 네트워크 행위 패턴을 분석하여 특성 연구를 진행하였으며, 사물인터넷 기기의 정상행위를 수집하고 학습데이터로 활용한다. 이러한 학습데이터를 통해 인공신경망 기반의 오토인코더 알고리즘을 활용하여 이상행위 탐지 모델을 구축하였으며, 파라미터 튜닝을 통해 모델 사이즈, 학습 시간, 복잡도 등을 경량화 하였다. 본 논문에서 제안하는 탐지 모델은 신경망 프루닝 및 양자화를 통해 경량화된 오토인코더 기반 인공신경망을 학습하였으며, 정상 행위 패턴을 벗어나는 이상행위를 식별할 수 있었다. 본 논문은 1. 서론을 통해 현재 사물인터넷 환경과 보안 기술 연구 동향을 소개하고 2. 관련 연구를 통하여 머신러닝 기술과 이상 탐지 기술에 대해 소개한다. 3. 제안기술에서는 본 논문에서 제안하는 인공신경망 알고리즘 기반의 사물인터넷 이상행위 탐지 기술에 대해 설명하고, 4. 향후연구계획을 통해 추후 활용 방안 및 고도화에 대한 내용을 작성하였다. 마지막으로 5. 결론을 통하여 제안기술의 평가와 소회에 대해 설명하였다.

Performance Analysis of Parity Cache enabled RAID Level 5 for DDR Memory Storage Device (패리티 캐시를 이용한 DDR 메모리 저장 장치용 RAID 레벨 5의 성능 분석)

  • Gu, Bon-Gen;Kwak, Yun-Sik;Cheong, Seung-Kook;Hwang, Jung-Yeon
    • Journal of Advanced Navigation Technology
    • /
    • v.14 no.6
    • /
    • pp.916-927
    • /
    • 2010
  • In this paper, we analyze the performance of the parity cache enabled RAID level-5 via the simulation. This RAID system consists of the DDR memory-based storage devices. To do this, we develop the simulation model and suggest the basic performance analysis data which we want to get via the simulation. And we implement the simulator based on the simulation model and execute the simulator. From the result of the simulation, we expect that the parity cache enabled RAID level-5 configured by the DDR memory based storage devices has the positive effectiveness to the enhancing of the storage system performance if the storage access patterns of applications are tuned.

Deep Learning Model for Classification of Multiple Cancer Cell Lines (암세포 영상분류를 위한 심층학습 모델 연구)

  • Park, Jinhyung;Choe, Se-woon
    • Proceedings of the Korean Institute of Information and Commucation Sciences Conference
    • /
    • 2021.10a
    • /
    • pp.394-396
    • /
    • 2021
  • Additional pathological tests using imaging equipment are essential before diagnosing cancer cells. Recently, in order to reduce the need for time and human resources in these fields, research related to the establishment of a system capable of automatic classification of cancer cells using artificial intelligence is being actively conducted. However, in both previous studies, there were relatively limited deep learning algorithms and cell types, and limitations existed with low accuracy at the same time. In this study, a method of performing 4class Classification on four types of cancer cells through the Convolution Neral Network, a type of in-depth learning. EfficientNet, ResNet, and Inception were used, and finally Resnet was used to obtain an accuracy of 96.11 on average for k-fold.

  • PDF

Buffeting Response Correction Method based on Dynamic Properties of Existing Cable-Stayed Bridge (공용 사장교의 동적특성을 반영하는 버페팅 응답보정법)

  • Kim, Byeong Cheol;Yhim, Sung Soon
    • KSCE Journal of Civil and Environmental Engineering Research
    • /
    • v.33 no.1
    • /
    • pp.71-80
    • /
    • 2013
  • According to design specifications for structural safety, a bridge in initial design step has been modelled to have larger self-weight, external loads and less stiffness than those of real one in service. Thereby measured buffeting responses of existing bridge show different distributions from those of the design model in design step. In order to obtain accurate buffeting responses of the in-site bridge, the analysis model needs to be modified by considering the measured natural frequencies. Until now, a Manual Tuning Method (MTM) has been widely used to obtain the Measurement-based Model(MBM) that has equal natural frequencies to the real bridge. However, since state variables can be selected randomly and its result is not apt to converge exact rapidly, MTM takes a lot of effort and elapsed time. This study presents Buffeting Response Correction Method (BRCM) to obtain more exact buffeting response above MTM. The BRCM is based on the idea the commonly used frequency domain buffeting analysis does not need all structural properties except mode shapes, natural frequencies and damping ratio. BRCM is used to improve each modal buffeting responses of the design model by substituting measured natural frequencies. The measured natural frequencies are determined from acceleration time-history in ordinary vibration of the real bridge. As illustrated examples, simple beam is applied to compare the results of BRCM with those of a assumed MBM by numerical simulation. Buffeting responses of BRCM are shown to be appropriate for those of in-site bridge and the difference is less than 3% between the responses of BRCM and MTM. Therefore, BRCM can calculate easily and conveniently the buffeting responses and improve effectively maintenance and management of in-site bridge than MTM.