• 제목/요약/키워드: 다중 프레임

검색결과 553건 처리시간 0.044초

다중 프레임 예측 에러를 활용한 영상 이상 탐지 (Video anomaly detection using multi-frame prediction error)

  • 김유준;김영갑
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2022년도 추계학술발표대회
    • /
    • pp.498-500
    • /
    • 2022
  • 공공 안전을 위한 영상 감시 시스템이 증가함에 따라 CCTV 관제사가 관제해야 할 영상의 수가 증가하고 있다. 점점 증가하는 관제 영상 수로 인해 CCTV 관제사는 수많은 영상 사이에서 발생하는 살인, 강도, 폭력 등 위급한 이상 상황을 놓치는 문제가 발생할 수 있다. 이러한 문제를 해결하기 위해 최근에는 영상에서 발생하는 이상 상황을 자동으로 탐지하고 CCTV 관제사에게 알려 관제 효율을 향상시키는 연구가 진행되고 있다. 본 논문은 영상에서 발생하는 이상 상황을 자동으로 탐지하기 위해 예측 기반 이상 탐지 방법에 다중 프레임 예측 에러를 활용해서 영상 이상 탐지 정확도를 향상시키는 방법을 제안한다. 결과적으로 제안한 방법을 사용함으로써 프레임 레벨 AUC가 Ped2 데이터 셋에서 92.70%에서 94.56%, Avenue 데이터셋에서 87.37%에서 89.17%로 상승하였다.

H.264 동영상 압축에서의 가변 블록과 다중 프레임을 지원하는 효율적인 움직임 추정 방법 (An Efficient Motion Estimation Method which Supports Variable Block Sizes and Multi-frames for H.264 Video Compression)

  • 윤미선;장승호;문동선;신현철
    • 대한전자공학회논문지SD
    • /
    • 제44권5호
    • /
    • pp.58-65
    • /
    • 2007
  • 휴대용 단말기에서의 멀티미디어 정보의 이용이 일반화 되면서 동영상 압축 등의 데이터 처리를 위한 연산량이 크게 증가하고 있다. 특히, 휴대용 단말기에서의 소모 전력 감소와 실시간 처리를 위한 다양한 연구가 진행되고 있다. 본 연구에서는 H.264 인코더에서 67% 이상의 많은 연산량을 차지하는 움직임 추정기를 새로운 구조로 설계하였다. 근사적인 SAD를 사용하여 움직임을 예측하고 Alternative Row Scan (ARS) 방법을 개발하였으며, DAU, FDVS 알고리즘을 사용하여, JM8.2에 제시된 다중 프레임 움직임 추정보다 연산량을 평균적으로 75%이상 감소시켰다. 또한, 다중 프레임 움직임 추정에서의 적절한 참조 프레임 수와 참조 프레임 블록의 크기를 결정하여 연산량을 감소시키면서도 화질 열화가 거의 없도록 하였다. iPROVE 검증툴을 사용하여 하드웨어/소프트웨어 Co-Simulation을 수행하여 제안한 움직임 추정기가 정상 동작함을 확인하였으며, 50MHz에서 30 CIF frames/sec가 처리됨을 확인하였다.

다중대역 여기신호를 이용한 음성의 규칙합성에 관한 연구 (A Study on the speech synthesis-by-rue system using Multiband Excitation signal)

  • 경연정
    • 한국음향학회:학술대회논문집
    • /
    • 한국음향학회 1993년도 학술논문발표회 논문집 제12권 1호
    • /
    • pp.80-83
    • /
    • 1993
  • 본 논문에서는 양질의 규칙합성을 얻기 위하여, 유성음에 대한 여기신호로 임펄스 스펙트럼과 노이즈 스펙트럼을 다중대역으로 혼합하여 생성한 여기신호를 규칙합성에 적용하는 방법을 제안한다. 이 방법에서는, 분석합성에서 각 프레임별로 요구되었던 혼합여기신호에 대한 정보량 문제를 해결하기 위해 유성음의 정상부분의 한 프레임에 대해 혼합여기신호를 구하여 규칙합성에 적용하였고, 정보량을 더욱 줄이는 방안으로, 켑스트럼 유클리디안 거리를 이용하여 유성음을 분류하여, 각 그룹에 대한 대표 여기신호를 규칙합성의 여기신호로 사용하였다. 제안된 방법으로 음성을 합성한 결과 양질의 합성음을 얻을 수 있음을 확인하였다.

  • PDF

지상파 3D HDTV 방송을 위한 수정된 ATSC 전송 시스템의 프레임 구조에 대한 연구 (A frame structure of modified ATSC system for terrestial 3D HDTV broadcasting)

  • 오종규;김준태
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 2010년도 추계학술대회
    • /
    • pp.257-259
    • /
    • 2010
  • 본 논문에서는 지상파 3D HDTV 방송 서비스를 제공하기 위해 수정된 ATSC (Advanced Television Systems Committee) 전송 시스템 [2]을 위한 시변다중경로채널에 강인한 프레임 구조를 제안하고 성능을 측정하였다. 수정된 ATSC 전송 시스템 [2]은 기존 ATSC 전송 시스템[1]의 채널 부호화부를 수정하고, 변조 성상도를 증가 시키면서 적정한 수준의 TOV (Threshold of Visibility)에서의 전송 용량 증대 가능성을 확인하였다. 이를 토대로, 증가된 전송 데이터 전송률에 대한 순수 데이터 전송률을 최대한 보장하면서 시변다중경로채널에서 효율적으로 채널을 추정하고 복구하기 위해, ISI (Inter Symbol Interference)를 방지하기 위한 프레임 헤더의 보호구간에 알려진 PN (Pseudorandom Noise) 심벌을 삽입하였다. PN 심벌을 보호 구간에 이용할 경우 시간 영역에서 채널 임펄스 응답 (CIR: Channel Impulse Response)을 추정하여, 주파수 영역에서의 채널 보상을 가능케 하여 정확한 채널 추정 및 보상을 수행할 수 있다. 또한 수신기의 속도에 따른 다양한 최대 도플러 주파수가 존재하는 채널에 강인한 프레임 구조들을 제안하였다. 컴퓨터 시뮬레이션을 통해 수정된 ATSC 전송 시스템에 제안된 프레임 구조를 적용하여 TU (Typical Urban)-6 채널에서의 SER (Symbol Error Rate) 성능을 측정하였다.

  • PDF

묵시적 동기화 기반의 고성능 다중 GPU 렌더링 (High-Performance Multi-GPU Rendering Based on Implicit Synchronization)

  • 김영욱;이성길
    • 정보과학회 논문지
    • /
    • 제42권11호
    • /
    • pp.1332-1338
    • /
    • 2015
  • 최근 고품질, 초고해상도 실시간 렌더링 지원을 위하여 다중 GPU 렌더링에 대한 관심이 커지고 있다. 실시간 렌더링에서 여러 개의 GPU로 고성능을 달성하기 위해서는 GPU 간의 데이터 전송 지연과 프레임 합성 부하를 고려해야 한다. 이 논문은 이러한 부하를 최소화하고 다중 GPU의 효율을 향상하기 위해 split frame 렌더링의 동기화를 묵시적 질의 기반으로 향상하는 기법을 제안한다. 또한, 이러한 묵시적 동기화 기반 프레임 합성을 지원하기 위한 메시지 큐 기반의 렌더링 스케줄링 알고리즘도 제안한다. 본 알고리즘을 적용한 실험은 본 알고리즘이 기존 알고리즘 대비 200% 이상 효율을 향상함을 확인하였다.

VANET 환경에서 다중경로 패킷전송기법을 이용한 라우팅 프로토콜 설계 (A Routing Protocol Design using Multi-Path Packet Transmission Technique in VANET)

  • 배극도;김강현
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2013년도 추계학술발표대회
    • /
    • pp.314-317
    • /
    • 2013
  • 본 논문에서는 수시로 차량이 빠르게 이동하고 차량 밀도가 변화하는 그리드 형태의 도로로 구성된 도심의 VANET 환경에서 패킷 전송 성공률을 높일 수 있는 다중경로 패킷전송기법을 제안하였다. 다중경로 패킷전송기법은 이웃노드 리스트의 정보를 이용하여 목적지까지 다중경로를 정한 후 도달가능성이 높은 순서대로 1개 이상의 다중경로로 패킷을 전송하는 방법이다. 다중경로가 발생할 가능성이 높은 그리드 형태의 도로환경에서 목적지까지의 거리 및 차량 밀도를 기반으로 다중경로를 선정하고 각 경로 별로 패킷 프레임에 선호경로 및 Trace 등의 정보를 추가하여 Local Maximum에 빠질 확률을 낮추고 경로 단절로 인한 경로 복구와 그에 따른 경로 중복 및 패킷 전송지연을 방지하여 패킷 단절률을 낮추고 패킷 전송 성공률을 향상 시킬 수 있다.

도심영상 입체 가시화 중 발생하는 원거리 환영현상 해소를 위한 3차원 파노라믹 모자이크 (3D Panoramic Mosaiciking to Silppress the Ghost Effect at Long Distance Scene for Urban Area Visualization)

  • 전재춘;김형석
    • 대한전자공학회논문지SP
    • /
    • 제42권4호
    • /
    • pp.87-94
    • /
    • 2005
  • 3차원 영상 모자이크 방법은 도심지의 도로를 따라 움직이는 카메라로부터 취득된 영상을 3차원 다중 투영평면에 투영하여 도심지를 입체적으로 가시화하기 위한 것이다. 카메라가 교차로와 같은 원거리 가시 지점을 통과할 때, 취득된 영상에 대해 3차원 영상 모자이크 방법을 적용 하면, 모자이크 된 영상에서 동일한 대상물의 영상이 반복하여 나타난다. 이 현상을 환영현상(ghost effect)이라고 하는데, 이 환영현상을 줄이기 위해서 원거리 대상물이 있는 곳의 영상 프레임을 찾고, 이 곳에 나타나는 환영현상을 효과적으로 제거하는 알고리즘을 제안하였다. 제안한 알고리즘은 3차원 공간에서 계산된 가상의 초점과 영상 프레임의 초점을 지나는 벡터를 이용하여 영상 프레임들을 3차원 다중평면에 투영 하는 것이다. 이를 위한 가상 초점은 원거리 대상물이 보이기 시작하는 영상 프레임과 원거리 대상물이 사라지기 시작하는 영상 프레임을 이용하여 계산된다. 본 논문에서는 원거리 대상물 지역에 제안한 방법을 적용했을 때, 환영현상이 효과적으로 제거될 수 있음을 실험적으로 보였다

동영상의 다중 참조 빗줄기 제거 기법 (Multi Hypothesis Rain Streak Removal for Video Sequences)

  • 김진환;김창수
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 2013년도 하계학술대회
    • /
    • pp.12-13
    • /
    • 2013
  • 본 논문은 비가 오는 장면을 촬영한 동영상에서 빗줄기를 효과적으로 제거하는 기법을 제안한다. 제안하는 기법에서는 광흐름 검출 기법을 이용하여 인접한 프레임에서 현재 프레임의 픽셀에 대응하는 픽셀을 검출하고, 확률에 따라 해당 프레임의 픽셀 적용 유무를 결정한다. 빗줄기로 검출된 픽셀을 인접한 프레임의 픽셀 값으로 대체함으로써 영상 내 빗줄기를 제거한다. 컴퓨터 모의실험을 통해 제안하는 알고리즘이 동영상에서 효과적으로 빗줄기를 제거할 수 있음을 확인한다.

  • PDF

트랜스포머 기반의 다중 시점 3차원 인체자세추정 (Multi-View 3D Human Pose Estimation Based on Transformer)

  • 최승욱;이진영;김계영
    • 스마트미디어저널
    • /
    • 제12권11호
    • /
    • pp.48-56
    • /
    • 2023
  • 3차원 인체자세추정은 스포츠, 동작인식, 영상매체의 특수효과 등의 분야에서 널리 활용되고 있는 기술이다. 이를 위한 여러 방법들 중 다중 시점 3차원 인체자세추정은 현실의 복잡한 환경에서도 정밀한 추정을 하기 위해 필수적인 방법이다. 하지만 기존 다중 시점 3차원 인체자세추정 모델들은 3차원 특징 맵을 사용함에 따라 시간 복잡도가 높은 단점이 있다. 본 논문은 계산 복잡도가 적은 트랜스포머 기반 기존 단안 시점 다중 프레임 모델을 다중 시점에 대한 3차원 인체자세추정으로 확장하는 방법을 제안한다. 다중 시점으로 확장하기 위하여 먼저 2차원 인체자세 검출자 CPN(Cascaded Pyramid Network)을 활용하여 획득한 4개 시점의 17가지 관절에 대한 2차원 관절좌표를 연결한 8차원 관절좌표를 생성한다. 그 다음 이들을 패치 임베딩 한 뒤 17×32 데이터로 변환하여 트랜스포머 모델에 입력한다. 마지막으로, 인체자세를 출력하는 MLP(Multi-Layer Perceptron) 블록을 매 반복 마다 사용한다. 이를 통해 4개 시점에 대한 3차원 인체자세추정을 동시에 수정한다. 입력 프레임 길이 27을 사용한 Zheng[5]의 방법과 비교했을 때 제안한 방법의 모델 매개변수의 수는 48.9%, MPJPE(Mean Per Joint Position Error)는 20.6mm(43.8%) 감소했으며, 학습 횟수 당 평균 학습 소요 시간은 20배 이상 빠르다.

  • PDF

다중 레프런스 프레임 기반의 에러에 강인한 동영상 부호화 기법 (Multiple Reference Frame based Error-Resilient Video Coding)

  • 정한승;김인철;이상욱
    • 한국통신학회논문지
    • /
    • 제26권10B호
    • /
    • pp.1382-1389
    • /
    • 2001
  • 움직임 보상-이산 코사인 변환 (motion compensation-discrete cosine transform : MC-DCT) 기반의 동영상 부호화 기법이 부호화 효율성 및 구현의 단순성으로 인해 널리 사용되고 있으나, 에러 환경에서 구조적으로 취약한 면이 있다. 본 논문에서는 다중 메모리 움직임 보상 예측 (long-term memory motion compensated prediction : LTMP) 기반의 다중 레프런스 프레임을 사용하여 에러에 강인한 동영상 부호화 기법을 제안한다. 또한 제안하는 알고리듬에 기반한 에러 은닉 기법 (error concealment : EC)을 구현한다. 즉, R-D (rate-distortion) 최적화에 프레임간 움직임 벡터 (temporal motion vectors)의 확산 인자를 추가하여 에러에 대한 강인성 및 에러 은닉 기법의 효율성을 증가시켰다. 또한, 제안하는 알고리듬은 시간축상의 에러 전파를 피드백 정보 (negative acknowledgement : NAK)를 사용하여 억제한다. 즉, NAK는 채널 에러에 의해 손실된 영역과 에러가 전파된 영역을 추정하여 움직임 보상 영역에서 제외되도록 하는데 이용된다. 따라서, 제안하는 알고리듬은 PSNR 측면에서 FIU (forced intra update)에 근사하는 성능을 보이나, FIU와는 달리 비트율의 증가를 피할 수 있어 제한된 대역폭의 네트웍을 효율적으로 사용할 수 있다. 컴퓨터 모의 실험을 통해 제안하는 알고리듬이 기존의 H.263 및 LTMP 기반의 부호기에 비해 에러 환경에서 주관적 및 객관적 화질 측면에서 성능이 우수함을 보인다.

  • PDF