• 제목/요약/키워드: 핵심어 유사도

검색결과 45건 처리시간 0.021초

전문어의 범용 공간 매핑을 위한 비선형 벡터 정렬 방법론 (Nonlinear Vector Alignment Methodology for Mapping Domain-Specific Terminology into General Space)

  • 김준우;윤병호;김남규
    • 지능정보연구
    • /
    • 제28권2호
    • /
    • pp.127-146
    • /
    • 2022
  • 최근 워드 임베딩이 딥러닝 기반 자연어 처리를 다루는 다양한 업무에서 우수한 성능을 나타내면서, 단어, 문장, 그리고 문서 임베딩의 고도화 및 활용에 대한 연구가 활발하게 이루어지고 있다. 예를 들어 교차 언어 전이는 서로 다른 언어 간의 의미적 교환을 가능하게 하는 분야로, 임베딩 모델의 발전과 동시에 성장하고 있다. 또한 핵심 기술인 벡터 정렬(Vector Alignment)은 임베딩 기반 다양한 분석에 적용될 수 있다는 기대에 힘입어 학계의 관심이 더욱 높아지고 있다. 특히 벡터 정렬은 최근 수요가 높아지고 있는 분야간 매핑, 즉 대용량의 범용 문서로 학습된 사전학습 언어모델의 공간에 R&D, 의료, 법률 등 전문 분야의 어휘를 매핑하거나 이들 전문 분야간의 어휘를 매핑하기 위한 실마리를 제공할 수 있을 것으로 기대된다. 하지만 학계에서 주로 연구되어 온 선형 기반 벡터 정렬은 기본적으로 통계적 선형성을 가정하기 때문에, 본질적으로 상이한 형태의 벡터 공간을 기하학적으로 유사한 것으로 간주하는 가정으로 인해 정렬 과정에서 필연적인 왜곡을 야기한다는 한계를 갖는다. 본 연구에서는 이러한 한계를 극복하기 위해 데이터의 비선형성을 효과적으로 학습하는 딥러닝 기반 벡터 정렬 방법론을 제안한다. 제안 방법론은 서로 다른 공간에서 벡터로 표현된 전문어 임베딩을 범용어 임베딩 공간에 정렬하는 스킵연결 오토인코더와 회귀 모델의 순차별 학습으로 구성되며, 학습된 두 모델의 추론을 통해 전문 어휘를 범용어 공간에 정렬할 수 있다. 제안 방법론의 성능을 검증하기 위해 2011년부터 2020년까지 수행된 국가 R&D 과제 중 '보건의료' 분야의 문서 총 77,578건에 대한 실험을 수행한 결과, 제안 방법론이 기존의 선형 벡터 정렬에 비해 코사인 유사도 측면에서 우수한 성능을 나타냄을 확인하였다.

인과적 사슬구조에서의 범주기반 속성추론 (Category-based Feature Inference in Causal Chain)

  • 최인범;이형철;김신우
    • 감성과학
    • /
    • 제24권1호
    • /
    • pp.59-72
    • /
    • 2021
  • 개념과 범주는 관찰하지 못한 속성을 추론할 수 있는 기반을 제공한다. 무의미 속성을 사용한 범주기반 속성추론 연구들은 범주 및 속성의 유사성이 추론을 설명하는 핵심 요인이라는 것을 제안했다(Rips, 1975; Osherson et al., 1990). 이후 연구들은 사람들의 사전지식이 범주기반 추론에 막대한 영향을 미치며 심지어 유사성 효과가 완전히 사라지는 경우도 있음을 보고했다. 본 연구는 범주 속성들이 사전지식의 한 종류인 인과적 지식에 의해 사슬구조로 연결되었을 때의 범주기반 속성추론을 검증했으며 그 결과를 예측하는 속성추론모형을 제안했다. 참가자들은 네 개의 속성들이 사슬구조를 이루는 인과적 범주를 학습한 뒤 해당 범주의 다양한 범주 예시들의 숨겨진 속성에 대한 추론을 실시했다. 그 결과 인과적으로 직접 연결된 속성뿐만 아니라 다른 속성 노드에 의해 차폐된 속성들도 추론에 영향을 미치는 비독립성이 나타났다(인과적 마코프 조건의 위배). 인과모형이론(Sloman, 2005)에 기반한 속성추론모형을 적용하여 참가자들의 추론을 모델링한 결과 인과적 연결의 직접 효과뿐만 아니라 간접 효과 즉 인과추론의 비독립성도 예측하는 것으로 나타났다. 다만 간접적으로 연결된 속성들은 인과적 거리와 무관하게 참가자들의 추론평정에 동일하게 영향을 미쳤지만 모형은 거리가 멀어짐에 따라 추론에 미치는 영향이 작아짐을 예측했다.

Word2Vec을 활용한 제품군별 시장규모 추정 방법에 관한 연구 (A Study on Market Size Estimation Method by Product Group Using Word2Vec Algorithm)

  • 정예림;김지희;유형선
    • 지능정보연구
    • /
    • 제26권1호
    • /
    • pp.1-21
    • /
    • 2020
  • 인공지능 기술의 급속한 발전과 함께 빅데이터의 상당 부분을 차지하는 비정형 텍스트 데이터로부터 의미있는 정보를 추출하기 위한 다양한 연구들이 활발히 진행되고 있다. 비즈니스 인텔리전스 분야에서도 새로운 시장기회를 발굴하거나 기술사업화 주체의 합리적 의사결정을 돕기 위한 많은 연구들이 이뤄져 왔다. 본 연구에서는 기업의 성공적인 사업 추진을 위해 핵심적인 정보 중의 하나인 시장규모 정보를 도출함에 있어 기존에 제공되던 범위보다 세부적인 수준의 제품군별 시장규모 추정이 가능하고 자동화된 방법론을 제안하고자 한다. 이를 위해 신경망 기반의 시멘틱 단어 임베딩 모델인 Word2Vec 알고리즘을 적용하여 개별 기업의 생산제품에 대한 텍스트 데이터를 벡터 공간으로 임베딩하고, 제품명 간 코사인 거리(유사도)를 계산함으로써 특정한 제품명과 유사한 제품들을 추출한 뒤, 이들의 매출액 정보를 연산하여 자동으로 해당 제품군의 시장규모를 산출하는 알고리즘을 구현하였다. 실험 데이터로서 통계청의 경제총조사 마이크로데이터(약 34만 5천 건)를 이용하여 제품명 텍스트 데이터를 벡터화 하고, 한국표준산업분류 해설서의 산업분류 색인어를 기준으로 활용하여 코사인 거리 기반으로 유사한 제품명을 추출하였다. 이후 개별 기업의 제품 데이터에 연결된 매출액 정보를 기초로 추출된 제품들의 매출액을 합산함으로써 11,654개의 상세한 제품군별 시장규모를 추정하였다. 성능 검증을 위해 실제 집계된 통계청의 품목별 시장규모 수치와 비교한 결과 피어슨 상관계수가 0.513 수준으로 나타났다. 본 연구에서 제시한 모형은 의미 기반 임베딩 모델의 정확성 향상 및 제품군 추출 방식의 개선이 필요하나, 표본조사 또는 다수의 가정을 기반으로 하는 전통적인 시장규모 추정 방법의 한계를 뛰어넘어 텍스트 마이닝 및 기계학습 기법을 최초로 적용하여 시장규모 추정 방식을 지능화하였다는 점, 시장규모 산출범위를 사용 목적에 따라 쉽고 빠르게 조절할 수 있다는 점, 이를 통해 다양한 분야에서 수요가 높은 세부적인 제품군별 시장정보 도출이 가능하여 실무적인 활용성이 높다는 점에서 의의가 있다.

Research on the history of astronomy and the role of astronomer

  • Lee, Yong Bok
    • 천문학회보
    • /
    • 제42권2호
    • /
    • pp.37.3-38
    • /
    • 2017
  • 우리나라의 천문 관측의 기록의 역사는 삼국시대 이전 선사시대까지 거슬러 올라간다. 선사시대에는 천문 현상을 바위나 건축 유물에 기록을 남기고 역사를 기록하기 시작한 이후에는 일반 역사 기록 속에 항상 함께 기록하고 있다. 특히 동양은 역사기록 자체가 인간이 남긴 자취뿐만 아니라 하늘과 땅에 일어나는 다양한 자연 현상도 함께 동시에 남겼다. 고대로부터 인간은 하늘과 땅과 항상 유기적인 관계를 갖는다고 믿었기 때문이다. 우리나라는 정사로서 가장 오래된 역사 기록인 삼국사기와 삼국유사에 일식, 혜성 출현, 별똥과 유성우, 달과 행성 운행, 초신성 관측 등 250회 이상의 천문 기록이 나타나며 대부분 실제로 일어났던 사실을 그대로 기록하고 있다. 그 후 고려사와 조선왕조실록에는 이루 헤아릴 수 없을 정도로 많은 천문 기록을 남기고 있다. 이러한 천문 기록뿐만 아니라 일찍부터 중국으로부터 역법을 도입하여 천체 운행을 이용하여 우리 생활에 필요한 시각법을 사용하고 달력을 제작하였다. 특히 달과 태양의 운행 원리를 파악하여 일식과 월식을 직접 추산하였다. 역법의 운용은 천체 운행의 원리를 이해하고 수학을 발전시키는데 큰 역할을 하였다. 이러한 천문 관측과 정확한 시각 체계를 유지하고 정밀한 역법을 사용하기 위해서는 끊임없이 천체를 정밀하게 관측할 필요성이 있다. 이를 위해 다양한 천문 관측기기를 개발하고 제작하였다. 천문 의기는 천체의 위치를 측정하고 천체의 운행을 이용하여 시각 체계를 유지 관리를 위해 필수불가결한 기기이다. 우리나라 천문학 발달의 네 가지 축인 천문(天文), 역법(曆法), 의상(儀象), 구루(晷漏)등은 조선 초기 세종시대 완성을 보게 되었다. 이는 단일 왕조가 이룬 업적으로 다른 문화권에서 볼 수 없을 정도의 우수한 과학 기술의 유산이다. 특히 칠정산내편과 외편의 완성은 중국의 역법에서 벗어나 독자적인 역법을 완성하려는 시도였다. 이 모든 것은 당시 이를 주도하던 세종대왕의 지도력과 천문학과 수학에 뛰어난 천문학자가 이룩한 업적이다. 그 후 조선 중기로 접어들면서 쇠퇴하다가 임진왜란과 병자호란을 겪으면서 거의 모든 과학기술의 유산이 파괴되거나 유실되었다. 조선 현종 이후에 세종시대의 유산을 복원하려는 노력 중에 중국을 통하여 서양의 천문학을 도입하게 되었다. 중국에 들어와 있던 서양 선교사들이 주도하여 중국의 역법 체계를 바꾸었다. 즉, 일식과 월식의 예측력이 뛰어난 시헌력을 만들어 사용하기 시작했다. 시헌력에는 서양의 대수학과 기하학을 이용한 다양한 수학적 기법이 사용되었다. 조선 후기에 이 시헌력을 익히기 위한 노력을 하는 과정에서 서양의 수학과 기하학을 접하게 되고 새로운 우주 체계를 도입하게 되었다. 특히 서양의 천문도와 지도 제작에 기하학의 투사법이 사용되어 복잡한 대수학적 계산을 단순화시켜 활용하였다. 조선 후기에 전문 수학자뿐만 아니라 많은 유학자들도 서양의 수학과 기하학에 깊은 관심을 갖고 연구하였다. 고천문학 전체를 조망해 볼 때 핵심은 현대의 천체물리학이 아니라 위치천문학이다. 따라서 고천문학을 연구하는데 필수적인 요소가 지구의 자전과 공전 운동에 의해서 일어나는 현상과 세차운동에 의한 효과를 정확하게 이해하고 있어야 한다. 그중에서도 구면천문학과 천체역학에 대한 원리를 알고 있는 상태에서 접근해야 한다. 고천문학의 중심인 천문(天文), 역법(曆法), 의상(儀象), 구루(晷漏) 등의 내용은 이러한 위치천문학이 그 기본 골격을 이루고 있다. 예를 들어 고려사의 천문 현상을 모아 놓은 천문지(天文志)와 일식과 월식 계산 원리가 들어있는 역지(曆志)를 연구하기 위해서는 위치천문학의 기본 개념 없이는 연구하는데 한계가 있다. 인문학을 전공하는 학자가 고천문을 연구하는데 가장 큰 걸림돌이 되는 점이 위치 천문학의 기본 개념 없이 접근하는 것이다. 심지어 조선시대 유학자들조차 저술한 많은 천문 관련 기록을 보면 상당부분 천체 운행 원리를 모르고 혼란스럽게 기록된 내용이 적지 않다. 우리나라 수학사를 연구할 경우 방정식 해법, 보간법, 삼각법, 일반 기하 원리에 대한 것을 연구하는데 큰 문제가 없다. 그러나 천문 현상이나 천문 의기 제작에 사용되는 수학은 천문 현상에 대한 원리를 모르면 접근하기 어렵게 된다. 수학사를 하더라고 기본적인 위치 천문학의 기본개념을 이해하고 있어야 폭 넓은 수학사 연구에 성과를 거둘 수 있다. 의외로 천문 현상 추산을 위해 사용되는 수학이나 기하학 원리가 수학사 연구에 중요한 요소가 된다. 더구나 한문으로 기록된 천문 내용을 한문 해독이 능숙한 학자라 하더라도 내용을 모르고 번역하면 도무지 무슨 내용인지 알아볼 수 없는 경우가 많다. 그래서 한문으로 된 천문 현상 기록이나 역법 관련 기록의 번역 내용 중에 많은 오역을 발견하게 된다. 문제는 한번 오역을 해 놓으면 몇 십 년이고 그대로 그 내용을 무비판적으로 인용하게 되고 사실로서 인정하는 오류를 범하게 된다. 이 때문에 우리 선조들이 남긴 고천문 관련 기록에 관한 이해는 우리 현대 천문학자의 역할이 대단히 크다.

  • PDF

타이포그라피의 한국성 연구 - 단순 미학, 그 고유성의 근거에 대하여 (A Study on Korean Style of Typography - Aesthetic of Simplicity, the Essence of Style)

  • 유정미
    • 디자인학연구
    • /
    • 제12권1호
    • /
    • pp.145-154
    • /
    • 1999
  • 1970년대 후반에 소개된 디지틀 기술과 함께 우리 인류는 지금 산업화 시대로부터 '정보화 시대'로 이동해가고 있다. 새로운 커뮤니케이션 시스템은 기존의 현실 인식 체계를 바꾸어 놓을 만금 놀라운 것이다. 한국은 고유한 문자와 언어를 지니고 있는 민족이다. 그러나 타이포그라피 분야는 우리만의 고유한 규범을 제대로 갖지 못하고 있으며 국제적인 보편성도 확보하지 못하고 있는 실정이다. 현대 한국의 타이포그라피는 커뮤니케이션의 기본인 합리적이고 효율적인 체계를 지니지 못한 채 복잡하고 장식적이며 혼란스러운 양상을 자주 드러내고 있다. 심지어 젊은 디자이너를 중심으로 서구 스타일을 무분별하게 모방하고 있다. 이제 우리는 우리의 고유한 철학을 확립해야 할 때이다. 다양하게 변해 가는 정보화 사회 속에서 어떻게 한국적인 고유성을 확보할 것인가? 어떻게 보편적인 국제성을 지니고 세계 문화에 기여 할 것인가를 연구해야 한다. 이 연구에서는 한국적인 고유성을 갖는 철학의 바탕을 우리 전통 문화에서 찾고자 한다. 또한 한국 현대 타이포그라피에 적합한 통합의 방법을 모색하고자 스위스 모더니즘의 철학을 연구해 보고자 한다. 스위스 타이포그라피는 그 간결함과 단순함의 미학을 특징으로 했다는 점에서 한국 전통의 미의식과 유사한 점이 많다 이에 본 연구는 이 두 방향간의 공통적인 철학을 토대로 우리에게 적합한 새로운 한국적 타이포그라피의 규범을 확립해 보았다. 첫째, 가독성을 우선시하는 디자인 양식의 개발. 둘째 , 내용의 핵심을 담아낼 수 있는 디자인 셋째, 객관적이고 합리적인 디자인 태도의 견지 마지막으로 전통에 대한 관심과 애정을 지닌 정신적인 자세를 가져야 한다는 점이다. 지금 우리는 세계적인 조류를 무비판적으로 따르기보다 우리 한글에 맞는 적절한 규범을 갖는 것이 더 중요한 시점이다. 우리 전통의 미의식에 대한 연구가 우리에게 '좋은 디자인'의 해답을 줄 것이다. 그와 동시에 객관적이고 간결한 양식인 스위스 디자인에 대한 탐구가 세계적인 보편성을 확보해 줄 것이다.

  • PDF