• Title/Summary/Keyword: 지식구조론

Search Result 202, Processing Time 0.035 seconds

지식 증류 기반 연합학습의 강건성 평가 (A Evaluation on Robustness of Knowledge Distillation-based Federated Learning)

  • 조윤기;한우림;유미선;윤수빈;백윤흥
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2024년도 춘계학술발표대회
    • /
    • pp.666-669
    • /
    • 2024
  • 연합학습은 원본 데이터를 공유하지 않고 모델을 학습할 수 있는 각광받는 프라이버시를 위한 학습방법론이다. 이를 위해 참여자의 데이터를 수집하는 대신, 데이터를 인공지능 모델 학습의 요소들(가중치, 기울기 등)로 변환한 뒤, 이를 공유한다. 이러한 강점에 더해 기존 연합학습을 개선하는 방법론들이 추가적으로 연구되고 있다. 기존 연합학습은 모델 가중치를 평균내는 것으로 참여자 간에 동일한 모델 구조를 강요하기 때문에, 참여자 별로 자신의 환경에 알맞은 모델 구조를 사용하기 어렵다. 이를 해결하기 위해 지식 증류 기반의 연합학습 방법(Knowledge Distillation-based Federated Learning)으로 서로 다른 모델 구조를 가질 수 있도록(Model Heterogenousity) 하는 방법이 제시되고 있다. 연합학습은 여러 참여자가 연합하기 때문에 일부 악의적인 참여자로 인한 모델 포이즈닝 공격에 취약하다. 수많은 연구들이 기존 가중치를 기반으로한 연합학습에서의 위협을 연구하였지만, 지식 증류 기반의 연합학습에서는 이러한 위협에 대한 조사가 부족하다. 본 연구에서는 최초로 지식 증류 기반의 연합학습에서의 모델 성능 하락 공격에 대한 위협을 실체화하고자 한다. 이를 위해 우리는 GMA(Gaussian-based Model Poisoning Attack)과 SMA(Sign-Flip based Model Poisoning Attack)을 제안한다. 결과적으로 우리가 제안한 공격 방법은 실험에서 최신 학습 기법에 대해 평균적으로 모델 정확도를 83.43%에서 무작위 추론에 가깝게 떨어뜨리는 것으로 공격 성능을 입증하였다. 우리는 지식 증류 기반의 연합학습의 강건성을 평가하기 위해, 새로운 공격 방법을 제안하였고, 이를통해 현재 지식 증류 기반의 연합학습이 악의적인 공격자에 의한 모델 성능 하락 공격에 취약한 것을 보였다. 우리는 방대한 실험을 통해 제안하는 방법의 성능을 입증하고, 결과적으로 강건성을 높이기 위한 많은 방어 연구가 필요함을 시사한다.

파인만의 '과학 강의'를 통해 예비교사가 받아들이게 된 과학에 대한 인식론적 신념 탐색 (Exploring the Scientific Epistemological Beliefs That Pre-service Teachers Accepted through Feynman's 'Science Lectures')

  • 김주원;임성만
    • 대한지구과학교육학회지
    • /
    • 제16권1호
    • /
    • pp.72-86
    • /
    • 2023
  • 본 연구의 목적은 예비교사가 상황에 따라 과학에 대해 어떤 인식론적 신념을 가지는지를 살피고, 교과독서를 통한 인식론적 신념의 변화양상을 심층적으로 탐색하는 것이다. 이를 위해 초등 예비교사들이 '파인만의 과학이란 무엇인가?'를 읽고 쓴 에세이 77편을 귀납적 분석법을 이용해 분석하였다. 연구 결과로, 기존에 예비교사가 지녔던 인식론적 신념을 '교과 학습에서의 과학', '일상생활에서의 과학'의 두 가지 상황으로 구분하고, 교과독서 후에 '과학자가 다루는 과학' 상황에서 형성된 인식론적 신념을 분석하였다. 각 상황은 '지식의 인상', '지식의 근원', '지식의 정당화', '지식의 가변성', '지식의 구조', '지식 습득 가치'를 하위 범주로 세분화하여 세련된 신념과 소박한 신념 수준에서 차이를 밝혔다. 그 결과로 파인만의 과학 강의가 예비교사에게 새로운 관점 정립, 기존의 인식론적 신념 재맥락화 측면에서 영향을 주었음을 도출하였다. 본 연구는 예비교사가 가지는 과학에 대한 인식론적 신념이 상황에 따라 상이할 수 있음을 밝히고, 교과독서를 통해 과학자가 다루는 과학에 대한 신념을 포괄하는 방향으로 인식론적 신념의 폭과 깊이가 확장될 가능성을 확인하였다는 점에서 의미가 있다.

심포지움-기술과 사회 변동

  • 김경동
    • 과학과기술
    • /
    • 제12권6호통권121호
    • /
    • pp.27-32
    • /
    • 1979
  • 산업사회를 구성하고 발전 변화시키는 가장 중요한 힘은 과학과 지식이다. 그러므로 과학지식의 구조와 그림자는 현대사회의 구조와 과제에 그대로 반영된다. 한국과학저술인협회는 6월 18일 성균관대학에서 「과학과 사회」심포지움을 갖고 현대과학의 방법론적 특징등을 분석, 현대사회와 현대인이 처한 상황 진단을 모색했다. 이날 심포지움에서는 김경동교수(서울대 사회학과)의「기술과 사회변동」 및 노재식 박사(원자력연구소 환경부장)의 「국가발전과 환경보전」등 논문이 발표되었는데 다음은 그 요지이다.

  • PDF

데이터웨어하우스 환경에서의 설명기반 데이터마이닝 (Explanation-Based Data Mining in Data Warehouse)

  • 김현수;이창호
    • 지능정보연구
    • /
    • 제5권2호
    • /
    • pp.15-27
    • /
    • 1999
  • 산업계 전반에 걸친 오랜 정보시스템 운용의 결과로 대용량의 데이터들이 축적되고 있다. 이러한 데이터로부터 유용한 지식을 추출하기 위해 여러 가지 데이터마이닝 기법들이 연구되어 왔다. 특히 데이터웨어하우스의 등장은 이러한 데이터마이닝에 있어 필요한 데이터 제공 환경을 주고 있다. 그러나 전문가의 적절한 판단과 해석을 거치지 않은 데이터마이닝의 결과는 당연한 사실이거나, 사실과 다른 가짜이거나 또한 관련성 없는(Trivial, Spurious and Irrelevant) 내용만 무수히 쏟아낼 수 있다. 그러므로 데이터마이닝의 결과가 비록 통계적 유의성을 가진다 하더라고 그 정당성과 유용성에 대한 검증과정과 방법론의 정립이 필요하다. 데이터마이닝의 가장 어려운 점은 귀납적 오류를 없애기 위해 사람이 직접 그 결과를 해석하고 판단하며 아울러 새로운 탐색 방향을 제시해야 한다는 것이다. 본 논문의 목적인 이러한 데이터마이닝에서 추출된 결과를 검증하고 아울러 새로운 지식 탐색 방향을 제시하는 방법론을 정립하는데 있다. 본 논문에서는 데이터마이닝 기법 중 연관규칙탐사(Associations)로 얻어진 결과를 설명가능성 여부의 판단을 통해 검증하는 기법을 제안하였고, 이를 위해 도메인 지식(Domain Knowledge)과 연관규칙탐사를 통해 얻어진 결과를 표현하기 위한 지식표현방법으로 관계형 술어논리(RPL : Relational Predicate Logic)를 개발하였다. 연관규칙탐사로 얻어진 결과를 설명하기 위한 방법으로는 연관규칙탐사로 얻어진 연관규칙에 대한 RPL로 표현된 도메인 지식으로서 설명됨을 보이게 한다. 또한 이러한 설명(Explanation)을 토대로 검증된 지식을 일반화하여 새로운 가설을 연역적으로 생성하고 이를 연관규칙탐사를 통해 검증한 후 새로운 지식을 얻는 설명기반 데이터마이닝 구조(Explanation-based Data Mining Architecture)를 제시하였다.

  • PDF

Technological Knowledge Management Systems in Large-Scale Facility-Intensive Steelworks

  • Jung, Kyung-Hee;Lee, Sang-Kyu
    • 기술혁신학회지
    • /
    • 제6권3호
    • /
    • pp.358-372
    • /
    • 2003
  • 본 연구에서는 일관제철 공정의 철강산업과 같은 대규모 기계설비 집약적 산업 환경에 적합한 기술지식 경영시스템에 대해 고려하고자 한다. 기술경쟁력 확보를 위한 철강업체의 전략적 기술경영은 핵심기술에 대한 지식경영 활동과 연계될 때 비로소 시너지효과를 극대화할 수 있다. 또한 철강업체의 지식경영은 암묵적 혹은 형식적 제철공정 기술지식의 창출, 획득 및 공유 등의 활동을 통해 활성화되어야 한다. 본 연구에서는 먼저 철강산업 현장의 기술지식 관리대상으로 조업설비 프로세스 및 무형 지식자산의 범위를 정의하고, 일관제철 공정의 핵심기술 로드맵에 따라 기술지식 경영활동에 적합한 계층적 지식경영 조직구조를 구축하고자 한다. 또한 제철공정 노하우 등과 같이 암묵적 기술지식을 획득하고 이를 공유할 수 있는 형태로 변환하기 위한 기술지식 획득 방법론을 수립하고 이를 기초로 인터넷에 기반을 둔 제철공정 기술지식 경영시스템을 구축하고자 한다.

  • PDF

문틀기반 영한 자동번역 시스템 (Sentence-Frame based English-to-Korean Machine Translation)

  • 최승권;서광준;김영길;서영애;노윤형;이현근
    • 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
    • /
    • 한국정보과학회언어공학연구회 2000년도 제12회 한글 및 한국어 정보처리 학술대회
    • /
    • pp.323-328
    • /
    • 2000
  • 국내에서 영한 자동번역 시스템을 1985 년부터 개발한 지 벌써 15년이 흐르고 있다. 15 년의 영한 자동번역 기술개발에도 불구하고 아직도 영한 자동번역 시스템의 번역품질은 40%를 넘지 못하고 있다. 이렇게 번역품질이 낮은 이유는 다음과 같이 요약할 수 있을 것이다. o 입력문에 대해 파싱할 때 오른쪽 경계를 잘못 인식함으로써 구조적 모호성의 발생문제: 예를 들어 등위 접속절에서 오른쪽 등위절이 등위 접속절에 포함되는 지의 모호성. o 번역 단위로써 전체 문장을 대상으로 한 번역패턴이 아닌 구나 절과 같은 부분적인 번역패턴으로 인한 문장 전체의 잘못된 번역 결과 발생. o 점차 증가하는 대용량 번역지식의 구축과 관련해 새로 구축되는 번역 지식과 기구축된 대용량 번역지식들 간의 상호 충돌로 인한 번역 품질의 저하. 이러한 심각한 원인들을 극복하기 위해 본 논문에서는 문틀에 기반한 새로운 영한 자동번역 방법론을 소개하고자 한다. 이 문틀에 기반한 영한 자동번역 방법론은 현재 CNN뉴스 방송 자막을 대상으로 한 영한 자동번역 시스템에서 실제 활용되고 있다. 이 방법론은 기본적으로 data-driven 방법론에 속하다. 문틀 기반 자동번역 방법론은 규칙기반 자동번역 방법론보다는 낮은 단계에서 예제 기반 자동번역 방법론보다는 높은 단계에서 번역을 하는 번역방법론이다. 이 방법론은 영한 자동번역에 뿐만 아니라 다른 언어쌍에서의 번역에도 적용할 수 있을 것이다.

  • PDF

자연스러운 텍스트 생성을 위한 추계적 텍스트 구조화 (A Stochastic Text Structuring using Simulated Annealing)

  • 노지은;이종혁
    • 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
    • /
    • 한국정보과학회언어공학연구회 2002년도 제14회 한글 및 한국어 정보처리 학술대회
    • /
    • pp.199-206
    • /
    • 2002
  • 언어가 아닌 다양한 지식원으로부터 그것을 설명하는 텍스트를 생성하는 텍스트 생성 (text generation)은 여러 가지 복합적이고 단계적인 과정을 거쳐 이루어진다. 자연스러운 텍스트를 생성하기 위한 여러 단계 중, 지식원으로부터 텍스트에 포함되기 위해 뽑힌 정보들간의 순서를 적절히 결정하는 과정을 텍스트 구조화(text structuring)라고 한다. 텍스트 구조화는 생성될 텍스트의 결속성(coherence)을 크게 좌우하므로, 양질의 텍스트를 생성하기 위해서는 텍스트 구조화를 다루기 위한 정교한 방법론이 요구된다. 본 논문에서는 SA(simulated annealing) 알고리즘을 이용해 추계적 텍스트 구조화 방안을 제안하며 특히, SA의 평가 함수(evaluation function)로서, 총 4가지의 방법론-중심화 이론(centering theory)을 이용한 센터 전이 유형의 선호도, 추론 비용에 근거한 전이 유형간의 선호도, 서두 문장을 결정하기 위한 가중치 할당에 따른 선호도, 인접한 문장간의 유사도에 따른 선호도-을 제안하고 실험을 통해, 그 효용성을 보였다.

  • PDF

지식흐름 관점에서 신.생에너지연구의 학제간 다양성 분석 -태양전지 연구를 중심으로- (Analysis of inter-disciplinarity on renewable energy research)

  • 김민지;박정규
    • 한국신재생에너지학회:학술대회논문집
    • /
    • 한국신재생에너지학회 2010년도 추계학술대회 초록집
    • /
    • pp.141-141
    • /
    • 2010
  • 과학기술은 기술영역간의 관계를 통해 고유한 연구영역을 그리며 발달하며, 이는 학제의 다양성을 바탕으로 기존 기술들이 독특한 결합과정의 형성을 의미한다. 기술의 결합과정은 지식의 결합과정 관점으로 이해할 수 있다. 본 연구에서는 기존의 에너지산업과 다른 특성을 갖는 신 재생에너지의 기술발전경로를 '지식흐름'의 관점에서 탐색하여 신 재생에너지 연구의 학제 구조 및 다양성을 살펴보고자 한다. 계량서지학적 분석은 데이터 수집의 간편성 및 초기 연구결과물 분석에 적용할 수 있다는 장점에 의해 여러 분야에서 폭넓게 응용되어 왔다. 특히, A.L Porter(1984)에 의해 'citation'을 이용한 학제간관계 측정에 적용하여 계량서지학적 방법을 바탕으로 지식흐름을 관찰하는데 선구적인 방법을 제시하였다. 또한 Tijsen(1992)은 동시분류분석방법을 적용하여 네덜란드 에너지 연구분야의 학제구조를 분석하였고, Kajikawa(2007)은 에너지분야의 신기술인 태양전지와 연료전지에 한정하여 인용네트워크 분석을 수행하여 연구발전의 경향을 알아보았다. 이에 본 연구에서는 계량 서지학적 방법의 하나인 co-classification 방법론을 적용하여 태양광 분야 중 태양전지에 초점을 맞추어 학제 간 다양성 분석 연구를 수행 하였다. 태양광은 신 재생에너지 중 전후방연관 파급효과가 가장 큰 분야이며, 반도체 기반기술을 바탕으로 그 기술을 전개할 수 있기에 국내 산업과의 연관도가 높은 산업이다. 태양전지의 연구 동향 파악 및 고유의 연구영역을 도출을 분석하기 위한 기본 자료는 ISI의 'Web of Science'를 기반하여 수집하였다. 또한 태양광 연구의 연구구조 파악을 위하여 계량서지학분석의 하나인 'co-classification' 방법론을 추가적으로 적용하여 학제간의 분석을 수행하였다. 분석결과 1979-2009년까지의 태양전지 연구 논문 2,602개를 바탕으로 동시에 2개 이상의 SC를 포함한 논문은 총 논문의 51.8%이며, 출현한 SC는 65개로 분석되었다. 이 중 2개 이상의 SC가 동시에 출연한 횟수는 증가하는 경향을 가짐을 알 수 있었다. 이는 과학기술의 발전이 기술의 결합과정 또는 지식의 결합과정 관점으로 이해할 수 있음을 확인할 수 있었다.

  • PDF

지식베이스 구축을 위한 한국어 위키피디아의 학습 기반 지식추출 방법론 및 플랫폼 연구 (Knowledge Extraction Methodology and Framework from Wikipedia Articles for Construction of Knowledge-Base)

  • 김재헌;이명진
    • 지능정보연구
    • /
    • 제25권1호
    • /
    • pp.43-61
    • /
    • 2019
  • 최근 4차 산업혁명과 함께 인공지능 기술에 대한 연구가 활발히 진행되고 있으며, 이전의 그 어느 때보다도 기술의 발전이 빠르게 진행되고 있는 추세이다. 이러한 인공지능 환경에서 양질의 지식베이스는 인공지능 기술의 향상 및 사용자 경험을 높이기 위한 기반 기술로써 중요한 역할을 하고 있다. 특히 최근에는 인공지능 스피커를 통한 질의응답과 같은 서비스의 기반 지식으로 활용되고 있다. 하지만 지식베이스를 구축하는 것은 사람의 많은 노력을 요하며, 이로 인해 지식을 구축하는데 많은 시간과 비용이 소모된다. 이러한 문제를 해결하기 위해 본 연구에서는 기계학습을 이용하여 지식베이스의 구조에 따라 학습을 수행하고, 이를 통해 자연어 문서로부터 지식을 추출하여 지식화하는 방법에 대해 제안하고자 한다. 이러한 방법의 적절성을 보이기 위해 DBpedia 온톨로지의 구조를 기반으로 학습을 수행하여 지식을 구축할 것이다. 즉, DBpedia의 온톨로지 구조에 따라 위키피디아 문서에 기술되어 있는 인포박스를 이용하여 학습을 수행하고 이를 바탕으로 자연어 텍스트로부터 지식을 추출하여 온톨로지화하기 위한 방법론을 제안하고자 한다. 학습을 바탕으로 지식을 추출하기 위한 과정은 문서 분류, 적합 문장 분류, 그리고 지식 추출 및 지식베이스 변환의 과정으로 이루어진다. 이와 같은 방법론에 따라 실제 지식 추출을 위한 플랫폼을 구축하였으며, 실험을 통해 본 연구에서 제안하고자 하는 방법론이 지식을 확장하는데 있어 유용하게 활용될 수 있음을 증명하였다. 이러한 방법을 통해 구축된 지식은 향후 지식베이스를 기반으로 한 인공지능을 위해 활용될 수 있을 것으로 판단된다.

Semantic parsing 기반 지식 베이스 질의응답 시스템의 어휘-의미 패턴 질의 템플릿을 통한 보완 (Assisting semantic parsing-based QA system with lexico-semantic pattern query template)

  • 심효섭;박선영;이근배
    • 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
    • /
    • 한국정보과학회언어공학연구회 2014년도 제26회 한글 및 한국어 정보처리 학술대회
    • /
    • pp.255-258
    • /
    • 2014
  • 본 논문에서는 semantic parsing과 사전 정의된 어휘-의미 패턴 질의 템플릿 방법론을 결합하여 자연어 질의로부터 RDF 지식베이스에 질의하기 위한 SPARQL 쿼리를 생성하는 방법을 제안한다. semantic parsing 접근법은 문장의 표현과 분리된 형식적 의미표현만을 포착해내므로, paraphrase 혹은 의미 변화와 무관한 어순의 변화에 강인하지만, 일부 자연어 질의문장에는 단순한 의미 및 구조를 갖는 문장도 적합한 형식적 의미표현을 생성하지 못하는 단점이 있다. 따라서 이 연구에서는 이러한 단순한 문장에 있어서는 사전 정의된 질의 템플릿을 사용하여 적합한 쿼리를 생성하되, 적합한 템플릿을 선택하는데 있어 해당 질의문장의 어휘-의미적 유형을 포착하고 해당 정보를 이용하는 방법을 이용하였으며 이를 통해 주 방법론의 약점을 보완하는 제한적인 효과를 얻을 수 있었다.

  • PDF