• Journal of the Korea Society of Computer and Information
• /
• v.11 no.2 s.40
• /
• pp.159-167
• /
• 2006

Lipreading has been suggested as one of the methods to improve the performance of speech recognition in noisy environment. However, existing methods are developed and implemented only in software. This paper suggests a hardware design for real-time lipreading. For real-time processing and feasible implementation, we decompose the lipreading system into three parts; image acquisition module, feature vector extraction module, and recognition module. Image acquisition module capture input image by using CMOS image sensor. The feature vector extraction module extracts feature vector from the input image by using parallel block matching algorithm. The parallel block matching algorithm is coded and simulated for FPGA circuit. Recognition module uses HMM based recognition algorithm. The recognition algorithm is coded and simulated by using DSP chip. The simulation results show that a real-time lipreading system can be implemented in hardware.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2019.01a
• /
• pp.391-393
• /
• 2019

본 논문은 일상적인 대화로부터 감성을 추출하고 분석함으로써 상황에 맞는 대화의 내용과 분위기를 이미지의 색상으로 표현할 수 있는 이미지 색상 변환 프레임워크를 소개한다. 본 연구는 라즈베리 파이와 마이크 센서를 기반으로 사용자로부터 목소리를 입력받을 수 있는 모듈을 제작하고, 그 목소리로부터 감성을 분석한다. 분석된 감성을 이용하여 이미지의 색상을 자동으로 변환하는 기술과 통합함으로써 청각장애인 및 미취학 아동들이 화자의 대화를 이미지를 통해 쉽게 인지하여 의사소통 및 감성 전달 환경을 개선하고자 한다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2017.11a
• /
• pp.1118-1119
• /
• 2017

머신 비전 시스템은 영상 처리와 영상 분석을 함께 사용하여 공장의 조립라인 등 다양한 분야에서 응용 되고 있는 시스템이다. 하지만 기존의 시스템은 고가의 초고속 카메라와 다양한 센서를 동시에 이용하는 문제로 시스템 구축 및 확장성 등의 불편함을 야기하고 있다. 이에 본 연구에서는 초고속 실시간 트리거를 이용한 저가형 이미지 센서 기반의 머신 비전 시스템을 구성하고자 한다.

• Proceedings of the KIEE Conference
• /
• 2015.07a
• /
• pp.1086-1087
• /
• 2015

본 논문에서는 태양전지 모듈의 표면 오염으로 인한 태양광발전량의 감소를 사전 예방하기 위해 영상기술을 이용한 표면 오염도 자동검출 기술에 대해 논의하였다. 일반적인 태양광발전시스템의 경우 태양전지 모듈의 표면 오염원 제거를 위해 사람에 의한 수동적인 방법에 의존하는 것이 현실이나, 커다란 규모의 태양광 발전시설의 경우는 인력으로 오염원을 제거하는 것은 거의 불가능 하다. 이러한 관점에서 태양전지 모듈 표면에 떨어진 오염 물질로 인한 출력감소를 사전에 예방하고, 시스템을 효율적으로 운영하기 위해 이미지 영상기술이 적용되었다. 본 기술은 기본적으로 레이저 광원과 먼지와 상호 interaction을 통해 생성된 반사파 및 이를 CCD 영상으로 획득하고 태양전지 모듈 표면의 오염원의 유무, 균일/불균일 분포 등의 3가지 서로 다른 조건을 설정하여 비교 시험을 수행하였고, 개발된 오염측정 시스템을 수상 태양광 발전 파일럿 설비에 적용하여 운전성능을 검증하였다.

• The Journal of the Institute of Internet, Broadcasting and Communication
• /
• v.13 no.4
• /
• pp.149-156
• /
• 2013

With a rapid growth of smartphone technologies, various applications are developed and diffused actively nowadays. Especially, interesting applications using camera module in a smartphone are developed continuously, mobile users are able to use various useful mobile services in humdrum life. In this paper, we design and implement measurement algorithms which precisely measure the object taken by the camera module in a smartphone. We use 3-axis gyro accelerometer sensor in a smartphone to get the distance, incline and rotation angle in a real time when we take a picture of shooting object and can obtain precise size of it in the picture image. The measurement algorithms proposed in this paper are analyzed and evaluated by a simulation study.

• Journal of Digital Convergence
• /
• v.12 no.6
• /
• pp.237-243
• /
• 2014

In this paper, we propose a mobile image retrieval system which utilizes the mobile device's sensor information and enables running in a variety of the environments, and implement the system on Android platform. The proposed system deals with a new image descriptor using combination of the visual feature with EXIF attributes in the target of JPEG image, and image matching algorithm which is optimized to the mobile environments. Experiments are performed on the Android platform, and the experimental results revealed that the proposed algorithm exhibits a significant improved results with large image database.

• Electronics and Telecommunications Trends
• /
• v.25 no.5
• /
• pp.97-105
• /
• 2010

모바일과 유비쿼터스 센서 네트워크 센서 시대가 도래함에 따라 가볍고, 작고, 얇고, 멀티기능을 구현할 수 있는 부품에 대한 요구가 증대하고 있다. 이에 대한 여러 가지 솔루션 중 MCM의 개념을 수직 방향으로 확장시킨 3D IC가 최근 각광을 받고 있다. 이는 물리적인 한계에 부딪힌 반도체 집적 공정의 한계를 극복하여 지속적으로 무어의 법칙에 맞춰 집적도를 향상시킬 수 있을 뿐만 아니라 소재와 공정이 달라도 3차원적으로 집적이 가능하여 메모리와 프로세서로 대표되는 디지털 칩뿐만 아니라 아날로그/RF, 수동소자, 전력소자, 센서/액추에이터, 바이오칩 등을 하나로 패키징 할 수 있는 장점이 있기 때문이다. 이를 통해 성능 향상, 경박단소, 저비용의 부품 개발이 가능하기 때문에 미국, 유럽, 일본 등 선도국뿐만 아니라 싱가포르, 타이완, 중국 등에서도 활발한 연구가 진행되고 있으며 CMOS 이미지 센서 모듈 생산에 TSV 기술이 이미 적용되고 있다. 본 고에서는 3D IC를 위한 TSV 및 적층 요소 기술을 소개하고 이를 통해 개발된 사례와 표준화 동향에 대하여 소개하고자 한다.

• Journal of the Korea Society for Simulation
• /
• v.17 no.4
• /
• pp.199-208
• /
• 2008

Lately, since Complementary Metal Oxide Semiconductor(CMOS) image sensor system has low power, low cost and been miniaturized, hardware and applied software studies using these strengths are being carrying on actively. However, the products equipped with CMOS image sensor based polling method yet has several problems in degree of completeness of applied software and firmware, compared with hardware’s. CMOS image sensor system has an ineffective synchronous problem due to superfluous message exchange. Also when a sending of data is delayed continually, overhead of re-sending is large. So because of these, it has a problem in structural stability according to Polling Method. In this study, polling cycle was subdivided in high-speed synchronization method of firmware -based through MCU and synchronization method of Stepwise was proposed. Also, re-connection and data sending were advanced more efficiently by using interrupt way. In conclusion, the proposed method showed more than 20 times better performance in synchronization time and error connection. Also, a board was created by using C328R board of CMOS image sensor-based and ATmega128L which has low power, MCU and camera modules of proposed firmware were compared with provided software and analyzed in synchronization time and error connection.

• Journal of KIISE:Computing Practices and Letters
• /
• v.13 no.6
• /
• pp.358-370
• /
• 2007

Software simulations have been widely used for the design and application development of a wireless sensor network that is an infrastructure of ubiquitous computing. In this study, we develop a sensor network simulator that can verify the behavior of sensor network applications, estimate execution time and power consumption, and simulate a large-scale sensor network. To implement the simulator, we use an instruction-level parallel discrete-event simulation method. Instruction-level simulation uses executable images loaded into a real sensor board as workload, such that it results in the high degree of details. Parallel simulation makes simulation of a large-scale sensor network possible by distributing workload into multiple computers. The simulator can predict the amount of power consumption based on operating time of modules in a sensor node and counting the number of executed instructions by kind. Also it can simulate ubiquitous applications with various scenarios and debug programs. Instruction traces used as workload for simulations are executable images produced by the cross-compiler for ATmega128L microcontroller.

• Proceedings of the Korean Society of Precision Engineering Conference
• /
• 2006.05a
• /
• pp.71-72
• /
• 2006

In this study, automatic assembly and evaluation system fer phone camera module is conceptually designed. The designed core(Auto focus & UV curing, Image Test) equipments adopts a clustering mechanism and compactible structure using index table for minimum tact time. Using a ball screw actuator and absolute encoder in each axis, we can verifies the repeatability and position accuracy of system within ${\pm}3{\mu}m$. In result of simulation test, the proposed system is expected up to 30% in productivity than manual operation.