• 제목/요약/키워드: Two-dimensional single layer

검색결과 103건 처리시간 0.021초

전이학습 기반 다중 컨볼류션 신경망 레이어의 활성화 특징과 주성분 분석을 이용한 이미지 분류 방법 (Transfer Learning using Multiple ConvNet Layers Activation Features with Principal Component Analysis for Image Classification)

  • 바트후 ?바자브;주마벡 알리하노브;팡양;고승현;조근식
    • 지능정보연구
    • /
    • 제24권1호
    • /
    • pp.205-225
    • /
    • 2018
  • Convolutional Neural Network (ConvNet)은 시각적 특징의 계층 구조를 분석하고 학습할 수 있는 대표적인 심층 신경망이다. 첫 번째 신경망 모델인 Neocognitron은 80 년대에 처음 소개되었다. 당시 신경망은 대규모 데이터 집합과 계산 능력이 부족하여 학계와 산업계에서 널리 사용되지 않았다. 그러나 2012년 Krizhevsky는 ImageNet ILSVRC (Large Scale Visual Recognition Challenge) 에서 심층 신경망을 사용하여 시각적 인식 문제를 획기적으로 해결하였고 그로 인해 신경망에 대한 사람들의 관심을 다시 불러 일으켰다. 이미지넷 첼린지에서 제공하는 다양한 이미지 데이터와 병렬 컴퓨팅 하드웨어 (GPU)의 발전이 Krizhevsky의 승리의 주요 요인이었다. 그러므로 최근의 딥 컨볼루션 신경망의 성공을 병렬계산을 위한 GPU의 출현과 더불어 ImageNet과 같은 대규모 이미지 데이터의 가용성으로 정의 할 수 있다. 그러나 이러한 요소는 많은 도메인에서 병목 현상이 될 수 있다. 대부분의 도메인에서 ConvNet을 교육하기 위해 대규모 데이터를 수집하려면 많은 노력이 필요하다. 대규모 데이터를 보유하고 있어도 처음부터 ConvNet을 교육하려면 많은 자원과 시간이 소요된다. 이와 같은 문제점은 전이 학습을 사용하면 해결할 수 있다. 전이 학습은 지식을 원본 도메인에서 새 도메인으로 전이하는 방법이다. 전이학습에는 주요한 두 가지 케이스가 있다. 첫 번째는 고정된 특징점 추출기로서의 ConvNet이고, 두번째는 새 데이터에서 ConvNet을 fine-tuning 하는 것이다. 첫 번째 경우, 사전 훈련 된 ConvNet (예: ImageNet)을 사용하여 ConvNet을 통해 이미지의 피드포워드 활성화를 계산하고 특정 레이어에서 활성화 특징점을 추출한다. 두 번째 경우에는 새 데이터에서 ConvNet 분류기를 교체하고 재교육을 한 후에 사전 훈련된 네트워크의 가중치를 백프로퍼게이션으로 fine-tuning 한다. 이 논문에서는 고정된 특징점 추출기를 여러 개의 ConvNet 레이어를 사용하는 것에 중점을 두었다. 그러나 여러 ConvNet 레이어에서 직접 추출된 차원적 복잡성을 가진 특징점을 적용하는 것은 여전히 어려운 문제이다. 우리는 여러 ConvNet 레이어에서 추출한 특징점이 이미지의 다른 특성을 처리한다는 것을 발견했다. 즉, 여러 ConvNet 레이어의 최적의 조합을 찾으면 더 나은 특징점을 얻을 수 있다. 위의 발견을 토대로 이 논문에서는 단일 ConvNet 계층의 특징점 대신에 전이 학습을 위해 여러 ConvNet 계층의 특징점을 사용하도록 제안한다. 본 논문에서 제안하는 방법은 크게 세단계로 이루어져 있다. 먼저 이미지 데이터셋의 이미지를 ConvNet의 입력으로 넣으면 해당 이미지가 사전 훈련된 AlexNet으로 피드포워드 되고 3개의 fully-connected 레이어의 활성화 틀징점이 추출된다. 둘째, 3개의 ConvNet 레이어의 활성화 특징점을 연결하여 여러 개의 ConvNet 레이어의 특징점을 얻는다. 레이어의 활성화 특징점을 연결을 하는 이유는 더 많은 이미지 정보를 얻기 위해서이다. 동일한 이미지를 사용한 3개의 fully-connected 레이어의 특징점이 연결되면 결과 이미지의 특징점의 차원은 4096 + 4096 + 1000이 된다. 그러나 여러 ConvNet 레이어에서 추출 된 특징점은 동일한 ConvNet에서 추출되므로 특징점이 중복되거나 노이즈를 갖는다. 따라서 세 번째 단계로 PCA (Principal Component Analysis)를 사용하여 교육 단계 전에 주요 특징점을 선택한다. 뚜렷한 특징이 얻어지면, 분류기는 이미지를 보다 정확하게 분류 할 수 있고, 전이 학습의 성능을 향상시킬 수 있다. 제안된 방법을 평가하기 위해 특징점 선택 및 차원축소를 위해 PCA를 사용하여 여러 ConvNet 레이어의 특징점과 단일 ConvNet 레이어의 특징점을 비교하고 3개의 표준 데이터 (Caltech-256, VOC07 및 SUN397)로 실험을 수행했다. 실험결과 제안된 방법은 Caltech-256 데이터의 FC7 레이어로 73.9 %의 정확도를 얻었을 때와 비교하여 75.6 %의 정확도를 보였고 VOC07 데이터의 FC8 레이어로 얻은 69.2 %의 정확도와 비교하여 73.1 %의 정확도를 보였으며 SUN397 데이터의 FC7 레이어로 48.7%의 정확도를 얻었을 때와 비교하여 52.2%의 정확도를 보였다. 본 논문에 제안된 방법은 Caltech-256, VOC07 및 SUN397 데이터에서 각각 기존에 제안된 방법과 비교하여 2.8 %, 2.1 % 및 3.1 %의 성능 향상을 보였다.

그래핀에 기초한 막의 구조와 물질 전달 성질 개관 (Architecture and Transport Properties of Membranes out of Graphene)

  • 야콥 부크하임;로만 비스;김창민;등명명;박형규
    • 멤브레인
    • /
    • 제26권4호
    • /
    • pp.239-252
    • /
    • 2016
  • 최근 2차원 나노 물질을 응용하여 수처리 막의 성능을 향상시킬 수 있는가에 대한 연구가 활발하다. 그 노력의 한 가운데에 원자 두께를 가지고 있으면서 손쉽게 구할 수 있고 층으로 쌓을 수도 있는 2차원 물질인 그래핀이 자리하고 있다. 이 총설에서 우리는 그래핀으로부터 만들 수 있는 두 가지 막 구조에 관한 기초 물질 전달 현상을 최근 연구 성과를 중심으로 다룬다. 그 물질 자체로 이미 물질 전달 차단성을 갖는 그래핀에 정확히 제어된 크기의 구멍을 뚫을 수 있다면 아마도 원자 크기 수준으로 얇은 두께 때문에 그래핀 막은 같은 기공 크기의 어느 막보다도 빠른 궁극적 투과도를 나타낼 것이며, 이로부터 선택도를 담보할 수 있다면 다양한 막 분리 공정에 적용할 수 있을 것이다. 그 한 예로, 나노미터 이하의 기공을 가정한 초박막 침투성 그래핀 막에 대한 분자동역학 연구와 몇몇 초기 실험 결과들이 해수담수화 막으로서의 가능성을 보인 점은 주목할 만하다. 그래핀 물질로부터 다른 구성을 가진 막을 설계할 수 있는데, 이 막은 적당히 산화된 그래핀 마이크로 판들을 무작위로 적층함으로써 구현할 수 있다. 그래핀 판 적층 간격을 나노미터 이하로 쉽게 제어할 수 있기 때문에 이 구조 역시 수처리 및 해수담수화 막으로서의 가능성을 시사한다. 기존 막기술에 존재하지 않던 구조와 물질 전달 성질을 가짐으로써 두 종류의 그래핀 막은 앞으로 수처리 기술을 비롯한 다양한 막 기술의 응용분야에서 효과적으로 기여할 가능성이 충분하다.

르네상스 고전주의 건축양식의 조형원리와 현대패션디자인에의 적용 - 1999년 이후 클래식 스타일 패션을 중심으로 - (Layout Principles of Renaissance Classicism Architectural Style and Its Application on Modern Fashion Design - Focused on Classic Style Fashion after the Year 1999 -)

  • 이신영
    • 복식문화연구
    • /
    • 제18권2호
    • /
    • pp.261-276
    • /
    • 2010
  • The analysis of an art trend in the principle dimension starts by observing the object of work in the perspective of formative composition and recognizing it as a universal system. It can be said that it is consistent with an interpretation method for a form theory of formal history by Heinrich W$\ddot{o}$lfflin, a leading form critic in art criticism. Hence, the purpose of this study was to find out what are the formative principles in Renaissance Classicism as a design principle to be applicable to modern fashion by reviewing the formative characteristics of Renaissance Classicism Architecture with which W$\ddot{o}$lfflin directly dealt. As for the theoretical literature review, I used W$\ddot{o}$lfflin's theoretical framework and looked at the Renaissance Classicism Architecture that he studied and examined the possibility of utilizing his theory as a layout principle and the characteristics. As for analysis of design cases, I applied the aforementioned architecture layout principle to modern fashion and conducted case study analysis to delve into distinctive layout principles found in fashion. The study showed that the Renaissance Classicism Architectural Style is marked by linearity, planarity, closing and multiple unity: linearity was expressed in the observation form in fixed frontal view and an emphasis on a tangible silhouette homeogenous and definite line structures; planarity was achieved in the form of paralleled layers of frontal view element, planarity style, and identical and proportional repetition of various sizes.; closing signified the pursuit of complete and clear regularity, and architecture developed in a constructive phase through organizational inevitability and absolute invariability.; multiple unity was expressed in self-completedness and independent parallel of discrete forms and harmony of emphasized individual elements in a totality. Applying these layout characteristics of the Renaissance Classicism Architectural style and to see their individual expressive features, I found out that in adopting layout principles of the Renaissance Classicism Architecture to modern fashion, it turned out to be an emphasis of individual silhouettes, a flattened space, completed objects, organic harmony among independent parts: the emphasis of individual silhouettes was expressed in individual definitiveness of formative lines of clothes in accordance with body joints and an emphasis on formative lines of clothes; the flattened space was marked by single layer structure, planarity of elements of clothes, and listing arrangement by appropriate proportion.; the completedness of the objects was expressed by the stationary state where overall image is fixed, the construction of homogeneous and complete space, and absolute inevitability of internal layout in proportion; lastly, organic harmony of independent parts was stressed in independent completedness of each detail, and organic harmony of the whole. The expressive features would lead to a unique expression style of linear emphasis, proportion, constructive forms, and two-dimensional arrangement. The meaning of this study is follows: The characteristics of art school of thought are given shape by appling & analysing the architectural layout principles of historical art school of thought to modern fashion in the view point of formal construction dimension. The applied possibility of historical art school of thought as the source of inspiration about the fashion design is extended.