• 대한임베디드공학회논문지
• /
• 제6권3호
• /
• pp.174-182
• /
• 2011

Conventional home audio system (e.g. AV Receiver, CD Player etc) has a various functionality of audio play, channel mixing, but the remote controller of these audio players is too complex, difficult for user to manage them effectively. Users want to use these functionalities with more easy, comprehensible way. In this study, "intelligent real-sound presentation technology" that support high quality, realistic audio and the "design of complex information and controller of real sound using intelligent real sound play and control interface" will be introduced. So user can actively, realistically enjoy and play real sound based on user's preference, emotion and circumstance, instead of user's passive service.

• 디지털콘텐츠학회 논문지
• /
• 제9권2호
• /
• pp.203-211
• /
• 2008

입체음 재생을 위한 하드웨어 및 소프트웨어 기술발전에 의해 입체음과 입체영상을 적용한 3D 가상 공간은 보다 증강된 입체감 및 생동감을 제공할 수 있다. 그러나 영세한 지역 영상콘텐츠 전문제작자들과 일반인들이 입체음을 구현하기 위해서는 고가의 입체음향 엔진구입, 전문 인력 투입 및 고급 프로그래밍을 작성해야 하는 어려움이 있다. 그러므로 입체음 기술의 저비용 활용을 위해서 단순하면서도 효율적인 입체음 재생 인터페이스 개발이 필요하다. 이를 활용하게 되면 영상 제작전문가들이 손쉽게 입체음 재생기술을 콘텐츠 제작물에 추가할 수 있다. 본 논문은 입체음 재생 인터페이스 개발을 위한 기초연구 단계로서 다음 내용을 설계하고 구현한다. 먼저 PC 기반 시스템에서 모노음을 입체음향으로 재생하는 주요한 모듈을 구현한다. 두 번째로 3D 영상과 입체음을 연동하는 모듈을 개발한다. 본 논문에서 구현된 모듈은 청취자가 가상공간 상에서 이동함에 따라 음원의 위치 및 서라운드 효과를 인지할 수 있도록 한다. 추후 본 연구는 사운드와 이동객체의 동기화 및 HRTF 구현을 추진하여 보다 완벽한 입체음향 재생 인터페이스를 완성 할 예정이다.

• 대한인간공학회지
• /
• 제25권2호
• /
• pp.125-134
• /
• 2006

Most users learn new, complex systems through trial-and-error experience rather than referring to the manuals in a cognitive process that is called 'exploratory learning'. While exploring a system, people find prototypical rules for using the system based especially on frequent tasks. The rules are formed from consistent task procedures and well-expected interface elements on the designed system. These rules play the role of the basis of users' knowledge for performing tasks. The decision making to select and apply those rules interacting with an interface can be aided by properly provided hints on the interface. With appropriate hints, users can learn new systems easily and use them with reduced usability problems. This paper first reports an observation of user behavior performing tasks with prototypical interaction rules and finds a sound set of criteria to extract prototypical interaction rules systematically. Two types of hints are defined. Extending hints prompt users to apply prototypical interaction rules beyond well-known tasks. Preventive hints guide users out of possible capture errors by drawing attention to the variation of rules. A systematic and practical method is proposed to identify the opportunities for both types in designing interfaces. It is then verified through a usability test that the proposed method is effective in identifying the locations and types of appropriate hints to reduce or mitigate usability problems.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2008년도 학술대회 2부
• /
• pp.405-410
• /
• 2008

There is always a rhythm in our language and speech. As soon as we speech out, even just simple words and voice we make are edited as various emotions and information. Through this process we succeed or fail in our communication, and it becomes a fun communication or a monotonous delivery. Even with the same music, impression of the play can be different according to each musician' s emotion and their understanding. We 'play' our language in the same way as that. However, I think, people are used to the variety, which is, in fact, the variation of a set format covered with hollow variety. People might have been living loosing or limiting their own creative way to express themselves by that hollow variety. SPACIAL POEM started from this point. This is a new type of 'real-time visual interaction' expressing our own creative narrative as real-time visual by playing a musical instrument which is an emotional human behavior. Producing many kinds of sound by playing musical instruments is the same behavior with which we express our emotions through. There are sensors on each hole on the surface of the musical instrument. When you play it, sensors recognize that you have covered the holes. All sensors are connected to a keyboard, which means your playing behavior becomes a typing action on the keyboard. And I programmed the visual of your words to spread out in a virtual 3D space when you play the musical instrument. The behavior when you blow the instrument, to make sounds, changes into the energy that makes you walk ahead continuously in a virtual space. I used a microphone sensor for this. After all by playing musical instrument, we get back the emotion we forgot so far, and my voice is expressed with my own visual language in virtual space.

• 한국콘텐츠학회논문지
• /
• 제11권3호
• /
• pp.116-127
• /
• 2011

본 논문에서는 유아를 위한 체감형 게임 개발에 필요한 요소로 콘텐츠, 디자인, 음향, 동작인식, 음성인식 기술을 제안하였다. 유아용 체감형 게임은 유아의 감성에 맞춘 교육적 요구가 반영된 콘텐츠와 밝고 친근감 있으면서 사용이 편리한 디자인 요소들이 반영되어야 하고 유아가 친숙하고도 쉽게 게임을 할 수 있게 유도할 수 있는 배경음악과 설명 대사가 사용되는 것이 좋다. 만약 동작 인식과 음성인식 시스템을 유아용 체감형 게임에 사용할 경우 게임 사용자의 연령에 맞는 동작 데이터와 음성 데이터를 사용해 인식률을 높여야 한다. 특히, 본 논문에서는 피부색과 유아 신체 모델을 사용하여 유아의 얼굴과 손을 인식한 후 그 위치를 고려하여 유아의 동작을 인식하였고 유아의 음성 데이터를 수집해 신경망을 이용한 음성인식 기술을 게임에 적용해 신체 놀이 중심 활동의 줄넘기 게임인 '신나게 폴짝'을 개발하였다.

• 한국게임학회 논문지
• /
• 제13권6호
• /
• pp.15-26
• /
• 2013

최근 BCI(Brain Computer Interface) 기술의 발전과 함께 보급형 BCI 장치를 활용한 게임연구가 활발히 진행되고 있다. BCI 게임은 대부분 연구를 위한 실험적인 체험용 콘텐츠 형태로 개발되어 왔으며, 명령 패러다임에 있어서 BCI 게임 명령에 적합한 뇌파를 유도하는 방법에 대한 연구는 미흡하다. 본 연구에서는 음악의 리듬을 시청각적으로 표현하는 새로운 플레이 요소를 제공하는 BCI 리듬게임과 음악의 템포와 뇌파를 동기화 시켜 다양한 형태의 시청각 피드백을 생성하는 방법을 제안한다. 제안방법은 실험을 통해 게임조작에 필요로 하는 뇌파를 유도하여 게임점수를 향상시킬 수 있음을 확인하였다.

• 정보교육학회논문지
• /
• 제17권4호
• /
• pp.421-432
• /
• 2013

본 연구의 목적은 로봇과 증강현실 기술을 통합하여, 유아 극놀이 활동을 지원하는 콘텐츠와 교수 학습 모형을 개발하는 것이다. 극놀이 활동 지원을 위해서 로봇은 다양한 표정 변화와 액션을 보이면서 나레이터와 음향담당 역할을 수행하도록 하였으며, 카메라 기능을 이용하여 마커와 유아의 움직임을 인식하여 동시다발적인 상호작용을 지원하고, 극놀이 활동을 영상매체로 촬영하여 추후 활동을 위해 이용하도록 하였다. 또한 프로젝터 기능을 이용하여 영상 객체와 직접 상호작용하도록 하였다. 한편, 증강현실 기술은 다양한 캐릭터 변신과 소품 제공 뿐아니라 다양한 무대 배경과 전경의 효과도 가능하도록 하였다. 또한 실물형 인터페이스를 통하여 증강된 콘텐츠와 유아들 간의 상호작용이 자연스럽게 이루어지도록 하였고, 배우와 관객의 상호작용 기회도 제공하였으며, 유아가 학습 상황을 조작하거나 선택하여 그 결과를 경험하는 경험 중심 학습 환경을 구현하여 감각적 몰입을 유도하였다. 이와 더불어서 콘텐츠를 활용한 극놀이 활동을 지원할 수 있는 교수 학습 모형은 '교사의 사전 준비', '극놀이 이야기 소개와 이해', '극놀이 활동 계획과 진행' 그리고 '극놀이 활동 평가와 정리' 등과 같은 4가지 단계로 구분하고, 각 단계별로 결정하고 진행해야 할 세부 활동들을 제안하였다.

• 전자통신동향분석
• /
• 제33권6호
• /
• pp.69-80
• /
• 2018

Sensory devices have been developed to help people with disabled or weakened sensory functions. Such devices play a role in collecting and transferring data for the five senses (vision, sound, smell, taste, and tactility) and also stimulating nerves. To provide brain or prosthesis devices with more sophisticated senses, hyper sensory devices with a high resolution comparable to or even better than the human system based on individual neuron cells are essential. As for data collecting components, technologies for sensors with higher resolution and sensitivity, and the conversion of algorithms from physical sensing data to human neuron signals, are needed. Converted data can be transferred to neurons that are responsible for human senses through communication with high security, and neural interfaces with high resolution. When communication deals with human data, security is the most important consideration, and intra-body communication is expected to be a candidate with high priority. To generate sophisticated human senses by modulating neurons, neural interfaces should modulate individual neurons, and therefore a high resolution compared to human neurons (~ several tens of um) with a large area covering neuron cells for human senses (~ several tens of mm) should be developed. The technological challenges for developing sensory devices with human and even beyond-human capabilities have been tackled by various research groups, the details of which are described in this paper.

• 한국정보처리학회논문지
• /
• 제6권4호
• /
• pp.877-890
• /
• 1999

본 논문은 기존이 텍스트 위주였던 인터넷 한 단계 넘어 동영상, 음향, 그래픽 등 다양한 멀티미디어 데이터를 이용한 프리젠테이션 메일을 제안한다. 이를 개발함에 있어 가장 큰 문제점은 프리젠테이션 메일을 구성하는 요소가 일반적으로 거대한 용량을 가지는 멀티미디어데이터라는 것이다. 거대한 용량의 멀티미디어 데이터는 전송 및 저장에 있어서 많은 문제점을 갖게 되는데, 이를 극복하기 위해 실제 데이터 부분과 제어 데이터를 분리시켜 제어 프로그램만을 전달하고 실제 데이터는 보낸 사람의 컴퓨터에 있거나 고속 접속이 가능한 원격지 서버에 저장되어 실제 연출할 때에 서버로부터 전송하는 방식을 취한다. 이러한 상황에서 젱 프로그램에 포함된 하이퍼프리젠테이션을 인터넷상에서 실시간으로 재생하기 위한 버퍼관리 및 쓰레드 스케줄링 기법을 제안하였다. 그리고 또 다른 문제는 멀티미디어 연출을 제어하는 방법은 일반 사람들이 사용할 수 있을 정도로 쉬워야 한다는 점이다. 본 논문은 제어 프로그램을 제작하는 도구로써 VIP(Visual Interface player)를 이용하였으며 그것을 LAN기반엣 구현하고 실험한 결과를 제시하였다.

• 한국산학기술학회논문지
• /
• 제16권12호
• /
• pp.8933-8939
• /
• 2015

본 논문에서는 효율성 및 사용자 편리성을 극대화 할 수 있는 전시공연을 위한 멀티 소형 휴머노이드 로봇제어 방법을 설계 및 구현 하였다. 근래에는 공연과 전시분야에도 로봇을 활용하는 사례가 늘고 있으며, 연극, 뮤지컬, 오케스트라 공연 등 장르 또한 다양하다. 기존의 소형 휴머노이드를 이용한 전시공연에서는 컴퓨터 및 MP3 플레이어 등을 이용하여 외부에서 음원을 재생과, 동시에 로봇의 공연시작을 위한 통신장비의 시작 버튼을 눌러줌으로 공연을 시작하였다. 이처럼 이원화된 음원과 로봇 동작과의 동기화로 인하여 음원시작시점과 로봇의 공연 시작 시점의 동기화가 잘 이루어지지 않아 로봇의 동작과 음원이 따로 재생되어 공연을 재시작 해야 하는 경우가 빈번히 발생하였다. 또한 공연 도중 로봇이 무게중심을 잃거나 했을 때 사람이 공연에 개입하거나 공연을 재시작 해야 하는 등의 문제점이 존재하였다. 이를 개선하기 위해서, 본 논문에서는 멀티 소형 휴머노이드 로봇제어의 효율성 향상 및 사용자의 편리성을 극대화할 수 있는 GUI 기반의 휴먼 인터페이스 S/W를 설계하였으며, 다수의 소형 휴머노이드에 데이터를 전송하기 위하여 지그비 통신을 사용하였다. 또한, 다수의 소형 휴머노이드 로봇을 대상으로 실제 구현함으로써 효율성 및 사용자의 편리성에 대한 타당성을 입증하였다.