• Title/Summary/Keyword: 성능 파라미터

Search Result 2,139, Processing Time 0.028 seconds

Research on Performance Improvement Using LoRA Techniques in RAG End2End Models (RAG End2End 모델에서 LoRA기법을 이용한 성능 향상에 관한 연구)

  • Min-Chang Kim;Sae-Hun Yeom
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2024.05a
    • /
    • pp.600-601
    • /
    • 2024
  • 본 논문은 RAG(Retrieval-Augmented Generation) End2End의 리소스(Resource) 과부하 문제를 해결하는 동시에 모델 성능을 향상 시키기 위해 PEFT(Parameters-Efficient Fine-Tuning)기술인 LoRA(Low Rank Adaptation)적용에 관한 연구이다. 본 논문에서는 RAG End2End 모델의 파라미터 값과 개수를 유지하면서, LRM(Low Rank Matrices)을 이용하여 추가적인 파라미터만을 미세 조정하는 방식으로, 전반적인 모델의 효율성을 극대화하는 방안을 제시하였다. 본 논문에서 다양한 도메인에 데이터 셋에 대한 제안 방식의 성능을 검증하고자 Conversation, Covid-19, News 데이터 셋을 사용하였다. 실험결과, 훈련에 필요한 파라미터의 크기가 약 6.4억개에서 180만개로 감소하였고, EM(Exact Match)점수가 유사하거나 향상되었다. 이는 LoRA를 통한 접근 법이 RAG End2End 모델의 효율성을 개선할 수 있는 효과적인 전략임을 증명하였다.

Performance for System Parameters Mismatch of Space-Time Beamformer in Multipath Environment (다중경로 환경에서 시공간 빔 형성기의 시스템 파라미터 부정합에 대한 성능 평가)

  • 김성곤;오정근;박지언;변건식
    • Proceedings of the Korea Institute of Convergence Signal Processing
    • /
    • 2003.06a
    • /
    • pp.193-196
    • /
    • 2003
  • 시공간 빔포밍 기술은 기존의 배열 안테나가 공간만의 처리를 해온 것에 대하여 이를 시간 영역으로까지 확장하여 특정한 방향에서 특정한 시간에 도착하는 다중경로는 증폭하고 다른 다중경로는 제거하는 것을 의미한다. 본 논문은 배열 안테나를 가진 DS-CDMA에서 시스템 파라미터 부정합이 존재할 때, 시공간 빔 형성기의 성능에 대하여 연구하였다. 시뮬레이션 결과, 부정합이 존재할 때 전통적인 빔포머가 상대적으로 강인함을 보였지만 원근 문제는 해결할 수 없었으며, 실제의 추정 결과를 적용했을 때는 MUSIC 시공간 빔포머가 가장 우수한 성능을 보였다.

  • PDF

QoS Management Using Variations of RED Parameters (RED 파라미터 조정을 통한 서비스 품질 관리)

  • Chun, Sang Hun
    • Journal of the Institute of Electronics and Information Engineers
    • /
    • v.49 no.11
    • /
    • pp.205-210
    • /
    • 2012
  • This paper investigated the performance of QoS management using variations of RED parameters in Differentiated Service. Differentiated Service separates packets from a specific traffic by using QoS parameters such as CIR or PIR. A code point is used to mark each packet which is enqueued into each virtual queue. Different RED parameters are configured for virtual queues according to each code point. As the code point value increases, the RED parameters become harsher. To show QoS Management using variations of RED parameters, this paper used the policy model of time sliding window with 2 color marking (TSW2CM). Simulation results using NS-2 showed that the QoS management of a differentiated service can be obtained from using variations of RED parameters.

HMM Parameter Adaptation to FIR Filtering (FIR 필터링에 대한 HMM 파라미터 적응기법)

  • Kim Nam Soo;Kim Dong Kook
    • Proceedings of the Acoustical Society of Korea Conference
    • /
    • autumn
    • /
    • pp.25-28
    • /
    • 1999
  • 본 연구에서는 finite impulse response (FIR) 필터에 의해 인식기의 입력 특징벡터가 필터링되는 경우에 hidden Markov model (HMM) 파라미터를 적응시키는 새로운 기법을 제안한다. 제안한 적응 기법은 필터링에 의해 변환된 특징벡터에 대해 HMM 파라미터를 다시 학습시킬 필요가 없으며 주어진 FIR필터 계수만을 사용하여 HMM 파라미터를 적응시킬 수 있다. 개발된 FIR필터링에 대한 HMM 파라미터 적응 기법은 연속 숫자음 인식 실험에서 재학습 방법과 비교 실험한 결과 low-pass 필터의 경우에 재학습 방법과 비슷한 인식 성능을 나타내었다.

  • PDF

A Study on the Endpoint Detection Algorithm Based on a Modified Teager Energy (변형된 Teager 에너지에 기초한 음성끝점검출 알고리듬에 관한 연구)

  • 이재한
    • Proceedings of the Acoustical Society of Korea Conference
    • /
    • 1998.06e
    • /
    • pp.407-410
    • /
    • 1998
  • 본 논문에서는 변형된 Teager 에너지를 이용하여 음성의 끝점을 검출하는 알고리듬을 제안하였다. 기존의 방법에서는 대부분 음성신호의 에너지와 영교차율을 이용하거나 이 파라미터들과 함께 다른 여러 파라미터들을 사용하여 끝점을 검출하였다. 여러 파라미터들을 사용하는 알고리듬의 경우 계산량이 많아지게 되는데, 이에 비해 본 논문에서는 하나의 파라미터를 이용하기 때문에 계산량이 기존의 알고리듬보다 적다. 그리고 이 알고리듬에서 사용한 변형된 Teager 에너지는 음성신호의 진폭뿐만 아니라 주파수까지 고려한 파라미터이다. 일반적으로 마찰음은 진폭이 작아 검출하기가 어려운데, 본 논문에서는 이러한 마찰음에 대해 실험을 했고, 그 결과를 통해 제안한 알고리듬이 기존의 다른 여러 알고리듬보다 성능이 우수하다는 것을 확인할 수 있었다.

  • PDF

Learning and Modeling of Neuro-Fuzzy modeling using Clustering and Fuzzy rules (클러스터링과 퍼지 규칙을 이용한 뉴로-퍼지 시스템 학습 및 모델링)

  • Kim, Sung-Suk;Kwak, Keun-Chang;Kim, Ju-Sik;Ryu, Jeong-Woong
    • Proceedings of the KIEE Conference
    • /
    • 2005.07d
    • /
    • pp.2879-2881
    • /
    • 2005
  • 본 논문에서는 뉴로-퍼지 모델의 전제부 소속함수의 새로운 학습방법을 통한 모델링 기법을 제안한다. 모델의 크기와 학습시간을 줄이는 기법으로 클러스터링 기법을 이용한 모델의 초기 파라미터 결정 방법이 있다. 이는 클러스터링 후 이들 파라미터를 다시 모델에 적용하여 모델을 학습하는 순차적 방법으로써 모델의 학습이 끝난 후의 전제부 파라미터가 클러스터링 파라미터와 연관성을 가지지 못하는 경우가 발생하였다. 또한 오차미분 기반 학습에서는 전제부 초기치가 국부적 최적해에서 벋어나지 못하는 문제점을 가지고 있다. 본 논문에서는 자율적으로 클러스터의 수를 추정하며 이들 파라미터를 최적화하며 이를 이용하여 뉴로-퍼지 모델의 학습을 실시하는 학습기법을 제안하였다. 제안된 방법에서는 기존의 오차미분 기반 학습을 클러스터링 기반 학습으로 확장하였으며 이를 이용한 모델의 성능을 기존의 연구결과와 비교하여 우수성을 보인다.

  • PDF

An Efficient Method for Representing of Binary Images by Region-centralized Shape Descriptor (영역집중 형태 기술자에 의한 이진 영상의 효과적인 표현 방법)

  • Kim, Seon-Jong;Kwon, Hyeog-Soong
    • The KIPS Transactions:PartB
    • /
    • v.14B no.1 s.111
    • /
    • pp.5-12
    • /
    • 2007
  • This paper gives a novel approach that can be represented an image efficiently with its region and shape information together. To do this, we introduced a region-centralized shape descriptor(RCSD) that the size of region only exists at a center point. RCSD consists of circles with three parameters, the distance and the angle between the tenter points, and the diameter, respectively We verified the RCSD parameters to have an information of shape. We can be proved this by reconstructing the shape from the given parameters and evaluated the difference between the its image and the original one. To get this image, we find the estimated points on the contour from the parameters, and connect them by using an interpolation. According to the evaluation, we obtained 88% performance for real images, and showed that it can be used efficiently for representing the binary images. Also we cu make RCSD parameters to be the normalized patterns to have an invariant of its scale or position, and expand them to improve the quality of the performance.

A Study on the Definition and the Measuring Method of Average Coupled Power in Optical Transmitters (광송신기에서의 평균결합전력 정의 및 측정방법 연구)

  • Jang, Dong-Won
    • Electronics and Telecommunications Trends
    • /
    • v.10 no.4 s.38
    • /
    • pp.155-163
    • /
    • 1995
  • 본 고에서는 광통신 시스템 송신단에 영향을 주는 파라미터를 분류하고 기술하였다. 광통신 시스템을 안정적으로 운영하기 위해서는 성능 관련 파라미터에 대한 기준값을 정해야 한다. 본 고에서는 송신단의 기준 파라미터로 평균결합전력을 선정하고 이 값에 영향을 주는 요인들을 분석했으며, ITU-T에서 권고한 평균결합전력값을 분석하였다. 또한 측정기를 이용하여 실제로 평균결합전력을 측정하는 방법에 대해서도 기술하였다.

Establishment way for Quality of Service and Network Performance Parameter in BcN (BcN 에서의 서비스 품질 및 네트워크 성능 파라미터 설정 방안)

  • Lim, Seog-Ku
    • Proceedings of the KAIS Fall Conference
    • /
    • 2007.05a
    • /
    • pp.212-215
    • /
    • 2007
  • BcN은 유 ${\cdot}$ 무선에 관계없이 일정한 데이터 전송속도를 구현하는 것을 목표로 하고 있어 개인들이 하나의 단말기로 자유롭게 네트워크에 접속할 수 있는 "u-life(유비쿼터스 시대)" 진입이 한층 가속화될 전망이다. 본 논문에서는 ITD, ETSI, IETF에서의 QoS 정의를 살펴보고 각각을 비교하였으며, 각 표준화 기관에서의 QoS 파라미터를 근거로 BcN에서의 서비스 품질 및 네트워크 파라미터들을 정립하였다.

  • PDF

Coding of LPC Parameters Using the Ordering Property of LSP in the Presence of Channel Errors (전송에러가 있는 채널에서 LSP 순서화특성을 이용한 선형예측계수(LPC)의 양자화 방법)

  • 이인성
    • Proceedings of the Acoustical Society of Korea Conference
    • /
    • 1995.06a
    • /
    • pp.76-80
    • /
    • 1995
  • Differential pulse code modulation 구조의 Line spectrum pairs 양자화기에 높은 차수 LSP 파라미터 값은 낮은 차수 LSP 파라미터 값보다 커야한다는 LSP 파라미터의 순서화 특징을 이용하여 양자화하는 방법을 제시한다. 31 비트/프레임에서 1 dB 이하의 스펙트럴 왜곡을 갖는 명료한 음질을 보였다. 또한 LSP 주파수의 순서화 특성은 벡터-스칼라 결합 양자화기에 적용하였다. 벡터-스칼라 결합 양자화기에서는 26비트/프레임에서 명료한 음질을 보였다. 새로운 LSP 양자화 방법들은 전송에러 발생시 성능을 시험하고, 전송 에러에 강인하도록 프레임간 예측을 위해 Moving Average 예측기를 사용한다.

  • PDF