• 한국컴퓨터정보학회:학술대회논문집
• /
• 한국컴퓨터정보학회 2022년도 제66차 하계학술대회논문집 30권2호
• /
• pp.507-508
• /
• 2022

현재 코로나-19로 인해 많은 사람들이 실내외 사진 촬영에 대한 불편함을 호소하며, 2022년 5월 기준 야외 마스크에 대한 의무 착용이 해제되었지만, 여전히 야외에서 마스크를 착용하는 사람들이 대다수 존재한다. 또한 코로나 발생 후 약 2, 3년간 소중한 가족들 및 지인들과의 찍은 중요한 사진들이 마스크를 착용한 채 그대로 남아있다. 본 논문에서는 파노라마 기술인 Image Stitching 기술을 활용하여 마스크 제거 사진 생성 연구에 대해 기술한다. 본 연구를 통해 사용자들의 실내외 마스크 착용 시 촬영에 대한 불편함을 해소하고 이전 마스크 착용 사진들을 복원함으로써 만족감을 높일 수 있을 것으로 기대한다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제23권3호
• /
• pp.65-75
• /
• 2017

360 영상은 상하좌우 모든 영역에 대한 정보를 갖고 있기 때문에 종종 지나치게 많은 정보를 포함하게 된다. 또한 360 영상의 내용을 2D 모니터를 이용하여 확인하기 위해서는 마우스를 이용하여 360 영상을 돌려 봐야 하거나, 또는 심하게 왜곡된 2D 영상으로 변환해서 봐야 하는 문제가 있다. 따라서 360 영상에서 사용자가 원하는 물체를 찾는 것은 상당히 까다로운 일이 될 수 있다. 본 논문은 물체나 영역을 묘사하는 문장이 주어졌을 때, 360 영상 내에서 문장과 가장 잘 어울리는 영상을 추출해 내는 방법을 제시한다. 본 논문에서 제시한 방법은 주어진 문장 뿐 아니라 구도 역시 고려하여 구도 면에서도 보기 좋은 결과 영상을 생성한다. 본 논문에서 제시하는 방법은 우선 360 영상을 2D 큐브맵으로 변환한다. 일반적인 큐브맵은 큐브맵의 경계 부분에 걸쳐 있는 물체가 있을 경우, 이를 검출하기 어려운 문제가 있다. 따라서 더 정확한 물체 검출을 위해 본 논문에서는 변형된 큐브맵을 제시한다. 이렇게 변형된 큐브맵에 Long Short Term Memory (LSTM) 네트워크 기반의 자연어 문장을 이용한 물체 검출 방법을 적용한다. 최종적으로 원래의 360영상에서 검출된 영역을 포함하면서도 영상 구도 면에서 보기 좋은 영역을 찾아서 결과 영상을 생성한다.

• 한국산학기술학회논문지
• /
• 제9권5호
• /
• pp.1225-1233
• /
• 2008

본 논문은 2D/3D 변환 알고리즘을 제안하였다. 제안된 알고리즘은 2차원 영상의 단일 프레임을 이용한 것으로 실시간 처리가 가능한 알고리즘이다. 제안된 알고리즘은 하나의 프레임에서 객체의 수직 위치 정보를 이용하여 깊이 지도를 생성한다. 실시간 처리와 하드웨어 복잡도를 개선하기 위해 영상 샘플링, 표준 휘도화를 이용한 객체 분할, 그리고 경계 스캔을 이용한 깊이지도 생성 등을 수행하였다. 동영상, 정지영상 모두 적용이 가능하며, 수직 위치 정보를 이용하므로 원거리 영상 혹은 풍경, 파노라마 사진과 같은 영상도 효과적인 입체 효과를 보여줄 수 있다. 제안된 알고리즘은 객체의 움직임 방향 혹은 속도 또는 장면 전환 등에 제약 없이 입체 효과가 가능하다. 제안 알고리즘 검증은 시각적인 방법과 APD(Absolute Parallax Difference)를 이용하여 MTD (Modified Time Difference)방식과의 비교를 수행하였다.

• 한국멀티미디어학회논문지
• /
• 제16권4호
• /
• pp.483-492
• /
• 2013

SURF는 영상의 특징점을 추출하고 서술자를 생성하는 알고리즘으로 객체인식 및 추적, 파노라마 이미지 생성 등 여러 영상처리 시스템에 응용되고 있다. SURF 알고리즘은 영상의 크기, 회전, 시점 등의 변화에 강인한 특징을 갖지만 복잡하고 반복적인 연산이 많아 실시간 처리가 어렵다. 실제 PC(Pentium, 3.3GHz) 환경에서 1000개 정도의 특징점이 추출되는 VGA($640{\times}480$) 해상도의 영상을 이용하여 실험한 결과 특징점 추출 및 서술자 생성에 총 240ms 이상이 걸려 약 4frame/sec로 실시간 처리가 불가능한 것을 확인하였다. 본 논문에서는 SURF 알고리즘의 메모리 접근 패턴을 분석하여 라인 메모리를 효율적으로 구성해 메모리 사용을 최소화하고 반복적으로 수행되는 연산을 병렬처리 하는 방법으로 하드웨어를 설계하였다. 하드웨어 설계 검증 결과 Xilinx사의 Virtex5LX330 FPGA를 타겟으로 합성 시 101,348LUTs(66%)와 1,367KB의 내부 메모리를 사용하고, 100MHz 동작 클록에서 30 frame/sec로 실시간 처리가 가능함을 볼 수 있었다.

• 한국통신학회논문지
• /
• 제31권4C호
• /
• pp.417-425
• /
• 2006

본 논문은 다수의 카메라로부터 입력받은 동영상을 하나의 파노라마 동영상으로 합치는 기법을 제안한다. 서로 인접하면서 겹치는 영상들을 하나의 큰 영상으로 만들어주는 파노라마 영상은 사진 측량법, 위성사진, 컴퓨터 그래픽 등의 분야에서 응용된다. 일반적으로 영상을 모자이크할 때 발생하는 왜곡을 최소화를 위해 투시 변환(perspective transformation)을 사용하는데, 변환 추정에 필요한 특징점을 얻어내는 방법이 결과물의 품질을 결정하게 된다. 본 논문에서는 코너점을 특징점으로 사용했으며, 결과물의 품질이 우수하고 연산 속도가 빠르게 하기 위해 모폴로지 구조를 사용해서 코너점을 추출하였다. 그리고 거의 모든 상황에서 안정적으로 코너점을 검출하기 위해 코너점의 강도를 구분하는 방법을 이용했다. 인접한 영상의 대응점으로부터 추정한 8-변수 투시 변환 값으로 영상 모자이크를 했으며, 결과 영상의 잔상을 제거하기 위해 쌍일차 색상혼합을 적용했다. 실험결과 제안한 방법은 여러 조건에서 빠른 속도와 좋은 화질의 결과를 보였다.

• 방송공학회논문지
• /
• 제22권3호
• /
• pp.366-374
• /
• 2017

TV나 디지털 사이니지와 같은 화면표시장치들이 점점 커져감에 따라, 미디어의 종류가 UHD, 파노라마, 퍼즐형 미디어와 같은 광각의 미디어로 변하고 있다. 특히, 파노라마 및 퍼즐형 미디어는 스티칭을 통해 복수개의 카메라로 촬영된 비디오 클립을 합성한 형태로 구성된다. 그러나, 스티칭 과정의 처리 시간이 오래 걸리기 때문에 실시간 서비스에는 적용하기 어려운 문제가 있다. 따라서 본 논문에서는 스티칠 처리 시간을 감소하기 위한 방법으로, 영상간의 공간적 연관관계를 알려주는 2D Adjacency Matrix를 생성하는 것을 제안한다. Discrete Cosine Transform (DCT)를 사용하여, 비디오 소스의 각 프레임을 공간 영역에서 주파수 영역으로 변환 시킨다. 앞서 언급한 DCT 계수를 기반으로 효과적으로 이미지들의 공간적 연관관계를 알려주는 2D Adjacency Matrix를 생성한다. 본 논문에서는 각각의 비디오 클립들로부터 파노라마 영상과, 퍼즐형 미디어를 생성하기 위해 DCT를 이용한 2D Adjacency matrix 생성 방법을 제안한다.

• 방송공학회논문지
• /
• 제27권4호
• /
• pp.487-498
• /
• 2022

깊이 영상은 3차원 공간상의 거리 정보를 2차원 평면에 나타낸 영상이며 다양한 3D 비전 연구에서 유용하게 사용된다. 기존의 많은 깊이 추정 연구는 주로 좁은 FoV (Field of View) 영상을 사용하여 전체 장면 중 상당 부분이 소실된 영상에 대한 깊이 정보를 추정한다. 본 논문에서는 소수의 좁은 FoV 영상으로부터 360° 전 방향 RGBD 영상을 동시에 생성하는 기법을 제안한다. 오버랩 되지 않는 4장의 소수 영상으로부터 전체 파노라마 영상에 대해서 상대적인 FoV를 추정하고 360° 컬러 영상과 깊이 영상을 동시에 생성하는 적대적 생성 신경망 기반의 영상 생성 모델을 제안하였으며, 두 모달리티의 특징을 공유하여 상호 보완된 결과를 확인한다. 또한 360° 영상의 구면 특성을 반영한 네트워크를 구성하여 개선된 성능을 보인다.

• 디자인학연구
• /
• 제18권4호
• /
• pp.215-224
• /
• 2005

최근 장식에 대한 관심이 증가하면서 제품의 외관을 다루는 작업의 중요성이 강조되고 있다 이는 색채 디자인 활동의 전문성으로 이어지고 있으며 이러 찬 상황에서 색채 디자인에 대한 개념의 재정립과 방향성의 제고는 불가피하다고 하겠다. 이와 같은 맥락에서 우리나라 색채 디자인의 출발점인 1960-70년대의 색채를 살펴봄으로써 색채 디자인의 적극적 도입 과정과 그 매커니즘에 대한 이해에 도움이 되고자 한다. 본 연구를 위해 60-70년대의 산업 재효의 색채에 관한 문헌을 조사 분석하여 색채의 특징을 구분하고 각각의 색채에 대한 배경과 의미를 고찰하였다. 연구 결과, 우리나라의 제품 색채는 산업화 속에서 제품의 기능적, 시각적인 마무리를 위한 개념에서 설정된 생산과 판매중심의 접근임을 알 수 있었다. 색채는 경제 성장을 향하는 물질가치 중심의 산업화의 이념과 제품에 대한 인식틀 속에서 그 방향성이 결정되었고 따라서 단순한 모방이나 기능적 보완, 또는 시각적인 주목성과 차별화기 기능 역할을 부여 받았다. 이러한 인식은 가전 제품을 중심으로 하는 백색, 소규모 일상용품을 중심으로 하는 순색, 가구와 같은 장식 개념의 제품을 중심으로 하는 자연 소재색의 3영역으로 나타났다. 이와 같은 연구는 제품 색채에 대한 연구가 미흡했던 점, 특히 제품 디자인에 대한 연구가 외형적 특성에만 집중하는 기존의 연구 태도로 인해 중요성의 인식이 부족하였던 색채에 대한 고찰이라는 면에서 의의를 갖는다.

• 전자공학회논문지CI
• /
• 제43권1호
• /
• pp.45-52
• /
• 2006

본 논문에서는 2차원 영상의 단일 프레임을 이용한 실시간 입체 영상 변환 방법을 제안하였다. 2차원 영상의 단일 프레임에서 객체의 수직 위치 정보에 기반하여 깊이 지도를 생성하고, 시차 처리를 통해 입체 영상으로 변환한다. 입체 영상 변환의 실시간 처리와 하드웨어 구현에 따른 복잡도 감소를 위해 영상 샘플링과 표준 휘도화를 통한 객체 분할, 그리고 경계 스캔을 통한 깊이 지도 생성을 수행한다. 제안한 방법은 단일 프레임만을 이용하므로 운동 방향과 속도, 장면 전환에 상관없이 3차원 효과를 제공하며, 동영상뿐만 아니라 정지 영상에도 적용 가능하다. 단일 프레임만을 이용하여 영상 내 객체들의 수직 위치 정보에 의한 차등 깊이감을 제시하기 때문에 본 논문에서 가정한 영상의 구도 조건에 적합한 원거리 촬영 영상이나 풍경, 파노라마 사진과 같은 영상에서 효과적인 입체 영상 변환 효과를 제시한다. 제안한 방법의 성능 평가를 위해 시각적 검증과 APD(Absolute Parallax Difference)를 도입하여 기존의 MTD 방식과의 비교를 수행하였다. 제안한 방법에 의한 입체 변환 영상이 영상의 운동 방향이나 속도에 상관없이 입체 변환 효과를 나타냄을 확인하였다.