• 한국컴퓨터정보학회논문지
• /
• 제5권3호
• /
• pp.29-32
• /
• 2000

계층화 비디오 코딩은 확장성을 갖기 위해 다중 비디오 스트림 안에 비디오 정보가 전송되도록 한다. 계층화 코딩 구조는 두 가지 면에서 이론상의 장점을 갖는다. 첫째, 클라이언트 프로세싱 능력과 네트워크 대역폭 면에서 네트워크와 수신자의 이질성을 허락한다. 둘째. 여러단계의 비디오 화질이 요구될 때 이용가능한 대역폭에 맞출수 있다. 본 논문에서 우리는 움직임 보상을 이용한 확장가능한 비디오 코덱 구조를 제시한다. 이것은 패킷 네트워크 상에서 실시간 오디오, 비디오 통신에 적합하다. 코딩 알고리즘은 ITU-T 추천 H.263+에 맞추면서 복잡도를 감소시키기 위한 기법들을 제시한다 빠른 움직임 검출은 H.263 베이스 레이어에서 이루어지고 상위계층에서 이용된다. 시각적 성질에 따른 매크로 블록 배제는 움직임 검출에 앞서서 모든 계층에서 이루어진다. 패킷 손실로 인한 에러확산은 주기적으로 각 계층에서 프레임 안에 인트라 블록단위의 행렬을 도입함으로써 차단되어질 수 있다.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제17권3호
• /
• pp.881-895
• /
• 2023

Modern image inpainting techniques based on deep learning have achieved remarkable performance, and more and more people are working on repairing more complex and larger missing areas, although this is still challenging, especially for facial image inpainting. For a face image with a huge missing area, there are very few valid pixels available; however, people have an ability to imagine the complete picture in their mind according to their subjective will. It is important to simulate this capability while maintaining the identity features of the face as much as possible. To achieve this goal, we propose a three-stage network model, which we refer to as the identity and structure feature refinement network (ISFRNet). ISFRNet is based on 1) a pre-trained pSp-styleGAN model that generates an extremely realistic face image with rich structural features; 2) a shallow structured network with a small receptive field; and 3) a modified U-net with two encoders and a decoder, which has a large receptive field. We choose structural similarity index (SSIM), peak signal-to-noise ratio (PSNR), L1 Loss and learned perceptual image patch similarity (LPIPS) to evaluate our model. When the missing region is 20%-40%, the above four metric scores of our model are 28.12, 0.942, 0.015 and 0.090, respectively. When the lost area is between 40% and 60%, the metric scores are 23.31, 0.840, 0.053 and 0.177, respectively. Our inpainting network not only guarantees excellent face identity feature recovery but also exhibits state-of-the-art performance compared to other multi-stage refinement models.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제18권4호
• /
• pp.980-997
• /
• 2024

To improve the brightness of images and reveal hidden information in dark areas is the main objective of low-light image enhancement (LLIE). LLIE methods based on deep learning show good performance. However, there are some limitations to these methods, such as the complex network model requires highly configurable environments, and deficient enhancement of edge details leads to blurring of the target content. Single-scale feature extraction results in the insufficient recovery of the hidden content of the enhanced images. This paper proposed an edge detection-based multi-scale feature enhancement network for LLIE (EDMFEN). To reduce the loss of edge details in the enhanced images, an edge extraction module consisting of a Sobel operator is introduced to obtain edge information by computing gradients of images. In addition, a multi-scale feature enhancement module (MSFEM) consisting of multi-scale feature extraction block (MSFEB) and a spatial attention mechanism is proposed to thoroughly recover the hidden content of the enhanced images and obtain richer features. Since the fused features may contain some useless information, the MSFEB is introduced so as to obtain the image features with different perceptual fields. To use the multi-scale features more effectively, a spatial attention mechanism module is used to retain the key features and improve the model performance after fusing multi-scale features. Experimental results on two datasets and five baseline datasets show that EDMFEN has good performance when compared with the stateof-the-art LLIE methods.

• 방송공학회논문지
• /
• 제20권5호
• /
• pp.687-696
• /
• 2015

최근 동영상 압축에 관한 국제 표준화 기구인 JCT-VC (Joint Collaborative Team on Video Coding) 에서는 High Efficiency Video Coding (HEVC)의 확장 표준으로 HEVC/Range Extension (HEVC/RExt)의 개발을 완료하고 스크린 콘텐츠 동영상의 부호화기술을 위한 표준인 HEVC/Screen Content Coding (HEVC/SCC)을 제정 중이다. 기존 동영상 압축 과정에서는 이미지 센서로부터 취득한 RGB 영상을 변환하여 부호화를 수행하는 반면에 애니매이션, 그래픽스 등 컴퓨터로 합성한 영상을 일컫는 스크린 콘텐츠의 경우는 색 공간의 변환이 주관적 화질을 심각하게 열화 시킬 수 있으므로 기존 RGB 색 공간을 유지하며 효율적으로 색 공간 내 정보의 중복성을 줄이기 위한 부호화 기법이 필요하다. 본 논문에서는 HEVC/RExt.와 HEVC/SCC에서 개발한 스크린 콘텐츠 동영상 압축을 위한 색 요소 예측 기법과 루프 내 색 공간 변환 기술의 성능을 분석한다. 실험 결과에 의하면 색 요소 예측 기법은 평균 약 11.7% BD-rate 감소, 색 공간 예측 기법은 평균 약 16.4% BD-rate 감소를 보인다. 그러나 두 기법이 동시에 적용되는 경우 약 18.2%의 BD-rate 감소를 보여 두 기법의 부호화 효율이 약 9.9% 중첩된다. 본 결과를 응용하여 두 기법이 배타적으로 선택이 되게끔 부호기 고속화를 수행하는 경우 약 0.3%의 부호화 손실로 93%의 부호화 측정 시간을 제공한다.

• 방송공학회논문지
• /
• 제22권1호
• /
• pp.28-41
• /
• 2017

본 논문에서는 사람의 인지특성을 기반으로 대조 민감도에 의해 나타나는 특성을 모델링 한 JND (Just Noticeable Difference) 모델을 비디오 코딩에 적용하여 압축률을 높이는 방법을 제안한다. 제안하는 방법은 JND 모델에 따른 임계치를 기준으로 양자화 단계에서 비가시 신호를 제한하여 주관적 화질을 유지하면서 비트율을 낮추는 방법으로, 변환을 통해 주파수 도메인으로 변환된 잔차 신호들을 양자화 단계에서 입력으로 받아 신호제한 및 양자화를 수행한다. 양자화 단계에서 주파수 도메인의 신호가 JND 관점에서 유사하게 인지되는 기준 임계치를 구해 잔차 신호에서 비가시 신호를 제한하고 양자화를 수행한 후, 최적의 율-인지왜곡 비용을 갖는 양자화 계수를 선택함으로써 비트율을 절감시킨다. 제안하는 알고리즘의 성능 검증은 최신 비디오 압축 표준인 HEVC (High Efficiency Video Coding)의 참조 소프트웨어인 HM16.0에 적용했으며, CTC (Common Test Condition)의 Random Access 모드에서 HM 16.0을 통해 압축된 영상 대비 평균 4.11%, BQTerrace 영상의 양자화 파라미터 22에서 최대 17.22%의 비트율 절감을 보였으며, Low Delay 모드에서 평균 7.16%, 최대 22.55%, All intra 모드에서 평균 13.41%, 최대 21.64%의 비트율 절감을 보였다. 5명의 평가자들의 주관적 화질 측정으로 평균 DMOS (Difference Mean Opinion Score) 값은 최대 약 0.36 최소 0 정도의 분포를 보였다.

• 한국의학물리학회지:의학물리
• /
• 제19권3호
• /
• pp.143-149
• /
• 2008

본 연구의 목적은 디지털 방사선 흉부영상의 개선을 위한 영상처리방법을 제안하고 임상적 유용성을 평가하는 것이다. 흉부영상의 edge를 보존하면서 산란성 노이즈 제거를 위한 비선형의 반복 필터가 고안되었다. 영상의 다이나믹 레인지 (dynamic_range)의 조절이 이루어 졌으며, 해부학적 영역과 주변픽셀과의 호환성을 바탕으로 적응적 영상증강이 이루어졌다. 종격동 영역에서의 영상증강과 더불어, 폐 영역에서의 혈관조직, 기관지, 폐 조직 등이 적절하게 증강되었다. 3명의 판독의에 의한 임상평가가 이루어 졌으며, PA 영상에서는 11개, 그리고 Lateral 영상에서는 9개의 해부학적 영역이 면밀하게 관찰되었다. 각각 100장의 영상들이 ITU (International Telecommunication Union) recommendation 500에 따라 평가되어졌으며, 그 결과는 good과 adequate중간인 3.4의 평균치를 보였다. 이는 제안한 영상처리의 임상적 유용성이 최소한 양호함 이상의 가치가 있음을 의미한다. 유용한 해부학적 정보의 손실을 방지하기 위해, 영상표시장치와 인간의 인지계를 고려하면서 영상개선이 이루어졌다. 디지털 방사선기기의 등장으로 진단의 정확성을 향상시키기 위한 지속적인 영상 개선연구가 필요하다.

• 재활복지
• /
• 제18권4호
• /
• pp.237-255
• /
• 2014

특발성 파킨슨병(idiopathic Parkinson disease, IPD)은 알 수 없는 원인으로 인해 중뇌의 흑질신경세포가 손실되는 대표적인 퇴행성 신경계 질환이다. IPD 환자는 신체 운동 이상을 주로 호소하지만 이들 중 70~90%가 운동저하형 마비말장애(hypokinetic dysarthria)를 동반하는 것으로 알려져 있다. 진행된 심도의 IPD 환자의 운동 증상 호전에 가장 효과적인 치료 방법으로 알려진 시상밑부핵 심부뇌자극술(subthalamic nucleus deep brain stimulation, STN-DBS)은 말 산출에서는 그 효과가 일관되지 않게 보고된다. 이에 본 연구에서는 STN-DBS가 말 산출에 미치는 영향을 살펴보고, 연구에서 어떠한 말 평가 과제가 사용되었는지를 조사하기 위하여 medline을 통해 2012까지 이루어진 연구 논문을 수집하였다. 총 32편 중, 연구대상자들에서 술 후 말 상태의'호전'이 관찰된 논문은 42%,'악화'는 29%,'엇갈리는 결과'는 26%,'변화 없음'은 3%로 확인되었다. 말 효과 간에는 문맥발화(contextual speech)가 연구에 사용된 비중이 높을수록 술 후 말 상태는 부정적인 결과로 보고되었으며, 말 산출 단계 중 일부 단계(예: 호흡 및 발성만, 혹은 조음만)만이 반영된 평가 과제가 연구마다 선택적으로 사용되었음을 확인하였다. 이에 본 연구는 STN-DBS를 받은 IPD 환자의 말 평가는 말 산출 하부 단계를 모두 반영하는 문맥발화 과제를 통일적으로 사용할 것을 제안한다.

• 대한전자공학회논문지SP
• /
• 제44권4호통권316호
• /
• pp.60-69
• /
• 2007

인간 시각은 고휘도를 접할 경우 색 민감도가 떨어진다. 이러한 현상으로 인해, 인간이 고휘도와 일반 휘도를 가지는 두 디스플레이를 볼 때, 측정 상 동일한 색을 가지는 패치에 대해 두 색이 다르다고 인지하게 되고, 이를 색상이동 현상이라 한다. 본 논문에서는 고휘도와 일반휘도 디스플레이의 색상이동현상을 모델링하고, 두 디스플레이의 색이 인간시각에 동일하게 인지되도록 하는 색 보정 방법을 제안하였다. 색상이동모델은 색상 매칭 실험으로써 결정된다. 먼저 실험은 고휘도와 일반휘도 디스플레이의 3단계 밝기에서 비율을 일정하게 유지하여 수행한다. 실험에 쓰이는 패치는, CIELAB 색 공간에서 밝기와 채도를 고정하여 색상만 변화하는 패치를 사용한다. 실험에서 관찰자는 휘도차가 나는 두 패치를 동시에 보면서, 고휘도 디스플레이의 인지되는 색상이 일반 휘도의 디스플레이와 같을 때까지 색상 값만을 수정하고, 수정된 색상 값의 차이가 색상이동양으로 사용된다. 실험에서 얻어진 각 패치의 색상 이동양은 일곱 개의 구간으로 나뉘어 모델링 되어 색상이동모델로 사용된다. 고휘도 디스플레이의 색 보정은 픽셀단위로 수행되며, 먼저 입력 RGB 값을 CIELAB 값으로 변환 후, 색상 값만을 보정하기 위하여 LCh(lightness, chroma, hue)값으로 변환한다. 여기서, 색상 값만을 색상이동모델을 사용하여 수정한 후, 역 과정을 통하여 출력 RGB값을 추정한다. 평가를 위해 관찰자의 선호도 테스트를 하였고, 대부분의 관찰자는 고휘도 디스플레이에서 색상이동모델이 적용된 영상이 일반휘도를 가지는 디스플레이의 영상과 인지되는 색상이 유사하다고 판단하였다.울어진 분포를 보여주고 있어 응용분야에 따라 정확한 분석이 필요한 경우 이러한 펄스 모양을 고려한 방법이 필요하다. 본 연구에서는 이러한 펄스 모양을 처리하기 위한 새로운 방법론이 제시되어있다.는데 더 부합하는 것으로 평가할 수 있다. 높았고 외해역에서 다소 낮은 경향이었으며 지세포항 내에 위치한 정점은 '심각한 교란(heavily disturbed)'을 나타내기도 하였으나 연구 해역 전반적으로 '경미한 교란(slightly disturbed)'을 나타내고 있었다. 지세포항 인근 연안역의 저서생태계는 다소 불안정하거나 교란된 군집을 형성하고 있다고 볼 수 있으나 연구 해역 전반적으로는 계절적으로 큰 변동 없이 비교적 안정된 군집을 형성하고 있다고 보여진다.의 치료 방법으로서 관혈적 방법과 고식적 관절경적 수술보다 좋은 치료라고 판단된다.해는 30명 중 28명으로 완전관해율은 93%였다. 3년 국소제어율은 87%, 전체환자의 3년 생존율은 93%, 무병생존율은 87%였다. 4명(13%)에서 국소실패를 보였고 1명(3%)에서 원격전이를 보였다. 치료 중 급성 합병증으로 11명(37%)에서 RTOG grade 1-2의 장염을 보였으며 1명은 대장의 천공이 발생하여 수술로 치유되었다. 12명(40%)에서 RTOG grade 1-2의 급성 방광염을 보였다. 3명(10%)에서 RTOG grade 1-2의 백혈구 감소증이 보였으며 1명에서 심한 백혈구 감소증(RTOG grade 4)이 나타났으나 회복되어 치료를 완료하였다. 만성 합병증으로 5명(15%)에서 RTOG grade 1-2의 만성 장염을 보였으며 별다른 치료 없이 지내고 있으며 1명(3%)에서 R

• 한국엔터테인먼트산업학회논문지
• /
• 제15권8호
• /
• pp.145-159
• /
• 2021

영화 <이다>(Ida, 2013)는 서사와 인물의 심리적 동기를 모호하게 하고, 선형적 시간성을 파괴하며, 다양한 기법을 통해 디지털 이미지의 조작 가능성을 상기시키는 현대의 실험적 영화라 볼 수 있다. 인간의 주체와 자아인식 변화 과정이 사회적 트라우마와 연결된다는 점에서 다른 국가나 사회의 역사적 맥락을 대비시켜 추론할 수 있다. 영화 <이다>는 화면 밖의 공간, 부재하는 공간, 여백과 프레임 안에 내포된 의미를 중심으로, 보이는 공간의 정보와 화면 밖 공간과의 정보를 나눔으로써 관객으로 하여금 제시되지 않은 정보에 대해서 추론하게 하는 능동적 인지과정을 불러일으키고 있다. 시대적 배경을 자세히 기술하지 않으면서도 역사적 의미를 시각화했고, 초월적 존재인 신과 한계적 존재인 인간 사이의 갈등과 고민의 문제를 인간과 인간의 갈등 구조 안에서 표현하고자 했다. 아울러 상실과 부재의 슬픔을 공간적 미학으로 풀어내고자 시도했으며 인물의 대비와 대조, 빛과 어둠의 대비를 통해 상황의 전개를 나타냈다. 본고에서는 영화 <이다>가 함축하고 있는 개인(인물)의 이야기와 사회, 역사적 배경과 종교적 영역을 아우르는 해석을 시도하고, 의미적 맥락의 시각화를 다루고자 한다. 또한 정체성과 역사적 사건의 재구성, 종교적 가치를 다룬 영화 <이다>의 시퀀스 장면 분석을 통해 그 의미와 특징을 살펴보고, 영화가 추구한 총체적 의미를 구체적으로 분석할 것이다. 이는 영화 <이다>가 내포하고 있는 트라우마의 재현과 해석 차원으로 개인과 지역, 국가적 트라우마를 안고 있는 문제를 다루었다는 측면에서 한국적 상황에 주는 함의를 고려해 볼 수 있다. 나아가 과하게 표현하지 않으면서도 인간과 사회적 성장, 고민을 잔잔하게 다루는 모습을 통해 새로운 영상기술과 독창적 시각화 기법의 영화를 창조하려는 흐름에 또 다른 영감을 주는 연구가 될 것이다.