• Annual Conference on Human and Language Technology
• /
• 2023.10a
• /
• pp.25-30
• /
• 2023

초거대 언어모델은 과연 수수께끼 문제에 재치있는 답변을 할 수 있을까? 최근 초거대 언어모델(Large language model, LLM)은 강력한 성능 및 유저 만족도를 보이며 세계의 이목을 집중시키고 있다. 여러 태스크들에 대한 정량 평가를 넘어서 최근에는 LLM의 창의력 및 고도화된 언어능력을 평가하는 연구들이 등장하고 있다. 본 논문에서는 이러한 연구 흐름에 따라 LLM의 재치에 관해 고찰해본다. 이때 재치를 평가하기 위한 태스크로 이를 요구하는 말놀이인 수수께끼를 활용한다. 본 논문은 LLM이 수수께끼를 잘 수행하는지를 모델 추론을 통해 평가하며, 모델 추론 시 활용되는 프롬프트들의 성격에 따른 성능 변화를 관찰한다. 또한 수수께끼의 종류에 따른 모델의 능력을 비교 분석하며 LLM의 추론 결과에 대한 오류 분석을 수행한다. 본 논문은 실험을 통해 GPT-4가 가장 높은 성능을 보이며, 설명글이나 데이터 예시를 추가할 시 성능을 한층 더 향상시킬 수 있음을 확인한다. 또한 단어 기반보다는 특성 기반의 수수께끼에 더욱 강력한 성능을 보이며, 오류 유형 분석을 통해 LLM이 환각(hallucination) 문제와 창의력을 동시에 가지고 있다고 분석한다.

• The Science & Technology
• /
• v.31 no.8 s.351
• /
• pp.26-27
• /
• 1998

• The Science & Technology
• /
• v.31 no.7 s.350
• /
• pp.29-31
• /
• 1998

우리가 삶을 살아가면서 무엇인가를 알기 위해서는 뇌가 정보를 저장하고 검색하는 수수께끼같은 과정에 전적으로 기댈 수밖에 없다. 그러나 뇌가 일하는 방법은 컴퓨터처럼 질서정연하게 다듬어져 있지 않다. 통찰력이 뛰어나지만 곧잘 사실과 다르게 해석하거나 쉽게 망각하기도 한다. 뇌를 훑어보는 영상기술이나 뇌 속 어디에 하나하나의 기억이 저장되어 있는가를 정확하게 규명해 줄 수 있기까지는 아직도 요원하다

• The Science & Technology
• /
• v.31 no.4 s.347
• /
• pp.27-29
• /
• 1998

남성은 왜 존재하며 과연 필요한 것인가? 남성은 여성에 비해 거칠고 온갖 골칫거리의 원인을 제공하나 종의 존속을 위해 필요한 것이라고 하지만 이 세상에는 처녀생식을 하는 종들도 많다. 칠면조는 수정하지 않은 알에서 부화하여 발육시킬 수 있으며 채찍꼬리 도마뱀은 모두 암컷이다. 또 델로이드윤층과 같은 일부 미생물중에는 4천만년동안 성없이도 살아왔고 민들레와 같이 전혀 무성인 식물도 있다. 수수께끼같은 남성의 세계를 알아본다.

• The Science & Technology
• /
• no.9 s.460
• /
• pp.104-108
• /
• 2007

• The Korean Publising Journal, Monthly
• /
• s.310
• /
• pp.40-40
• /
• 2001

• Nuclear industry
• /
• v.23 no.9 s.247
• /
• pp.49-56
• /
• 2003

• Proceedings of the Korean Society of Rheology Conference
• /
• 2001.06a
• /
• pp.4-4
• /
• 2001

• The Science & Technology
• /
• v.31 no.12 s.355
• /
• pp.17-19
• /
• 1998

• CDE review
• /
• v.13 no.2
• /
• pp.25-27
• /
• 2007