• 제목/요약/키워드: Lost Data Recovery

검색결과 39건 처리시간 0.023초

A Data-Consistency Scheme for the Distributed-Cache Storage of the Memcached System

  • Liao, Jianwei;Peng, Xiaoning
    • Journal of Computing Science and Engineering
    • /
    • 제11권3호
    • /
    • pp.92-99
    • /
    • 2017
  • Memcached, commonly used to speed up the data access in big-data and Internet-web applications, is a system software of the distributed-cache mechanism. But it is subject to the severe challenge of the loss of recently uncommitted updates in the case where the Memcached servers crash due to some reason. Although the replica scheme and the disk-log-based replay mechanism have been proposed to overcome this problem, they generate either the overhead of the replica synchronization or the persistent-storage overhead that is caused by flushing related logs. This paper proposes a scheme of backing up the write requests (i.e., set and add) on the Memcached client side, to reduce the overhead resulting from the making of disk-log records or performing the replica consistency. If the Memcached server fails, a timestamp-based recovery mechanism is then introduced to replay the write requests (buffered by relevant clients), for regaining the lost-data updates on the rebooted Memcached server, thereby meeting the data-consistency requirement. More importantly, compared with the mechanism of logging the write requests to the persistent storage of the master server and the server-replication scheme, the newly proposed approach of backing up the logs on the client side can greatly decrease the time overhead by up to 116.8% when processing the write workloads.

수리시설물 원격관리에 있어 통신두절시 데이터 자동복구 시스템 최적설계에 관한 연구 (Study on the Optimal Design of Automatic Data Recovery System in case of Communication Loss in Remote Management of Hydraulic Facilities)

  • 안태형;김상유;고정민;김재열
    • 한국기계가공학회지
    • /
    • 제21권4호
    • /
    • pp.46-52
    • /
    • 2022
  • In the existing wired communication network, wired communication is frequently interrupted by lightning, which accompanies rain, and remote management cannot be performed when it is actually necessary. In the case of communication interruption, field data stored in the database are lost, and data at an important point in time may go missing; this causes a decrease in the reliability of the stored data. Therefore, in this study, wireless communication using the Internet of Things (IoT) communication network of the 4th industrial technology is installed in the prototype to reduce wired communication construction costs, prevent resource waste and environmental damage due to communication facility construction, and prepare for communication loss.

Superconductivity recovery of vacuum annealed HTS GdBCO CC

  • You, Jong Su;Yang, Jeong Hun;Song, Kyu Jeong
    • 한국초전도ㆍ저온공학회논문지
    • /
    • 제24권3호
    • /
    • pp.41-46
    • /
    • 2022
  • The superconducting properties of high temperature superconducting (HTS) GdBCO coated conductor (CC) tape (Ag/GdBCO/Buffer-layers/Stainless Steel) were investigated, specifically a series of samples prepared by vacuum heat treatment (200℃ to 600℃), using a Quantum Design PPMS-14. The critical current density Jc value was obtained by applying the modified Bean model to the irreversible magnetization ∆Mirr(H) data which was estimated from the magnetization M(H) loop. The reduction rates of lnJc and Tc values according to the increase of the vacuum annealing temperature Tan were d(lnJc)/dTan = - 0.016 A/(cm2∙℃) and dTc/dTan = - 0.24, respectively. We examined the effect of recovery temperature Tre (475℃ to 700℃) and recovery duration time t (0.5 h to 24 h) on the restoration of previously completely lost superconductivity in samples that subsequently received heat treatment in an O2 gas flow space. All samples were fully restored to superconductivity by heat treatment in an O2 gas flow space. The recovery temperatures Tre (475℃ to 700℃) and recovery duration times t (0.5 h to 24 h) were both independent of the superconductivity recovery characteristics.

화질 향상을 위한 오류 은폐 기법 (Error Concealment Techniques for Visual Quality Improving)

  • 서재원
    • 한국콘텐츠학회논문지
    • /
    • 제6권2호
    • /
    • pp.65-74
    • /
    • 2006
  • MPEG-2 비디오 압축열은 복잡한 부호화 알고리즘을 이용하여 압축하기 때문에 전송 오류에 매우 민감하다. 만약 패킷을 잃어버리거나 수신된 패킷에 오류가 있으면 현재 화면에 화질저하가 발생할 뿐만 아니라 화면수가 제한적이긴 하지만 뒤이어서 재생되는 화면에도 오류가 전파된다. 따라서 이런 전송오류의 영향을 막거나 최소화 하기위해서 다양한 오류 강인 부호화/복호화를 적용한다. 대표적인 오류 강인 방법이 오류 은폐 기법이다. 오류 은폐 기법은 손상된 비디오 데이터를 은폐하기 위해서 정상적으로 수신된 데이터의 공간적, 시간적 중복성을 이용한다. 손상된 데이터를 복원하기 위해 움직임 벡터를 추정하고 움직임 보상하는 것은 좋은 방법이다. 이 논문에서는 다양한 움직임 벡터 복원 방법에 기반한 오류 은폐 기법을 제안하고 일반적인 방법들과 성능을 비교한다.

  • PDF

인터넷상의 실시간 오디오 방송 서비스 구현 (Implementation of an Audio Broadcasting Service over the Internet)

  • 박준석;고대식
    • 한국통신학회논문지
    • /
    • 제23권6호
    • /
    • pp.1496-1502
    • /
    • 1998
  • 본 논문에서는 인터넷상에서 트래픽이 심한 상황에서도 만족할만한 오디오 품질을 유지할 수 있는 실시간 오디오 방송 서비스 시스템을 개발하였다. 신뢰성 있는 실시간 데이터 전송의 구현을 위하여 TCP/IP와 UDP/IP의 전송특성을 비교분석하였고 손실패킷의 복구방법으로 잉여오디오 정보를 이용한 패킷 복구 알고리즘과 연집 에러를 분산시켜주는 인터리빙 기법을 적용하였다. 실험결과, TCP/IP를 이용한 경우는 일정한 수신률을 보였으나 패킷손실로 인한 음질저하현상이 나타났다. 잉여오디오 정보와 인터리빙을 이용한 손실패킷 복구율은 그림 9와 같으며 그에 따른 지연시간은 그림 4와 같다.

  • PDF

인터넷상의 비디오 데이타 전송에 효과적인 오류 은닉 기법 (An Effective Error-Concealment Approach for Video Data Transmission over Internet)

  • 김진옥
    • 한국정보과학회논문지:컴퓨팅의 실제 및 레터
    • /
    • 제8권6호
    • /
    • pp.736-745
    • /
    • 2002
  • 압축한 비디오 데이타를 전송할 때 인터넷과 같이 네트워크 채널이 불안정한 경우 패킷이 분실될 가능성이 높다. 패킷 분실은 연속적 비트 열에 오류가 발생하는 버스트 오류 형태로 일어난다. 본 논문에서는 버스트 오류를 은닉 처리하는데 효과적인 오류 내성 기법을 적용하는 동시에 데이타 숨김을 이용하여 디코더의 계산 복잡도를 줄인 빠른 오류 은닉 방법을 제안한다. 오류 은닉 효과를 높이기 위해, 인코더에서는 네트워크 채널의 버스트 오류에 강건하도록 비디오 데이타에 공간적, 시간적 영역에 대한 오류 내성 기법을 적용한다. 공간적 오류 내성 기법으로는 패킷 분실이 발생한 오류 블록을 분리하는데 효과적인 블록 셔플링을 적용하고 시간적 오류 내성 기법으로는 움직임 벡터의 프레임간 패리티 비트를 데이터 숨김 방법으로 내용 데이타에 삽입, 전송하여 디코더에서 분실된 패킷을 처리한다. 비디오 데이타는 전송 후 디코더에서 오류 은닉 처리하는데 디코더에서 주변 정보를 이용하여 오류 비디오 블록을 보간하는 것은 계산이 복잡하여 비용이 많이 든다. 따라서 본 연구에서는 비디오 인코딩 단계에서 비디오 블록의 에지 특징을 추출 후 이 특징 데이타를 원 데이타에 숨겨 전송하고 전송 시 비디오 데이타가 손상되면 디코더에서 숨겨 온 비디오 블록의 특징을 추출하여 쌍선형 보간법을 통해 전송 시 발생한 오류를 은닉 처리한다. 데이타 숨김을 이용하면 디코더의 계산 복잡도는 낮아진다. 본 논문의 실험 결과는 제안 방법이 비디오의 패킷 분실이 30%에 달하는 경우에도 이를 은닉 처리하여 인지 가능한 품질의 비디오 데이타를 보장한다.

확률모형을 이용한 정보보호 투자 포트폴리오 분석 (Probabilistic Modeling for Evaluation of Information Security Investment Portfolios)

  • 양원석;김태성;박현민
    • 한국경영과학회지
    • /
    • 제34권3호
    • /
    • pp.155-163
    • /
    • 2009
  • We develop a probability model to evaluate information security investment portfolios. We assume that organizations install portfolios of information security countermeasures to mitigate the damage such as loss of the transaction being processed, damage of hardware and data, etc. A queueing model and Its expected value analysis are used to derive the lost cost of transactions being processed, the replacement cost of hardwares, and the recovery cost of data. The net present value for each portfolio is derived and organizations can select the optimal information security investment portfolio by comparing portfolios.

ROBUST TRANSMISSION OF VIDEO DATA STREAM OVER WIRELESS NETWORK BASED ON HIERARCHICAL SYNCHRONIZATION

  • Jung, Han-Seung;Kim, Rin-Chul;Lee, Sang-Uk
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 1998년도 Proceedings of International Workshop on Advanced Image Technology
    • /
    • pp.5-9
    • /
    • 1998
  • In this paper, we propose an error-resilient transmission technique for the H.263 video data stream over wireless networks. The proposed algorithm employs bit rearrangement hierarchically, providing the robust and exact synchronization against the bit errors, without requiring extra redundant information. In addition, we propose the recovery algorithm for the lost or erroneous motion vectors. We implement the encoder and decoder, based on the H.263 standard, and evaluate the proposed algorithm through intensive computer simulation. The experimental results demonstrate that the proposed algorithm yields good image quality, in spite of the channel errors, and prevents the error propagation both in the spatial and the temporal domain efficiently.

  • PDF

3차원 데이터의 다중 부호화 기법 (Multiple Description Coding of 3-D Data)

  • 박성범;김창수;이상욱
    • 한국통신학회논문지
    • /
    • 제32권9C호
    • /
    • pp.840-848
    • /
    • 2007
  • 본 논문은 3차원 데이터의 다중 부호화(multiple description coding, MDC) 기법을 제안한다. 우선 다수의 평면으로 구성된 3차원 데이터를 그래프 컬러링(graph coloring)을 통해 3차원 데이터 복원 시 동일한 기여도를 제공하는 2개 평면 부분집합(subset)들로 분할한다. 다음으로 복원된 3차원 데이터의 화질을 최대화하기 위해 각 평면 부분집합의 평면 정보를 채널 오류 환경(channel error condition)에 따라 적응적으로 변형시킨다. 변형된 평면 부분집합들은 각각 압축되고 개별 채널을 통해 복호기로 전송된다. 복호기에서 전송된 2개 평면 부분집합 정보가 모두 복호되었을 경우, 복원된 3차원 부분 정보들을 결합하여 고화질 3차원 데이터를 복원한다. 만약 단일 채널만 유효하여 3차원 영상의 부분 정보만 복원될 경우, 3차원 손상부 복구 알고리듬을 적용하여 영상 표면의 손상을 복원함으로써 부드러운 3차원 표면을 재생한다. 따라서 제안하는 기법은 전송 오류 환경이 열악하여 하나의 채널이 완전히 손실된 경우에도 최소한의 3차원 영상 복원 화질을 보장한다.

라우터 기반의 신뢰적 멀티캐스트를 위한 버퍼 관리 ((Buffer Management for the Router-based Reliable Multicast))

  • 박선옥;안상현
    • 한국정보과학회논문지:정보통신
    • /
    • 제30권3호
    • /
    • pp.407-415
    • /
    • 2003
  • 다수의 수신자들이 하나의 송신자로부터 동일한 데이타를 받는 실시간 멀티미디어 서비스나 파일 전송 서비스 둥이 일반화되면서 멀티캐스트와 같은 효율적인 그룹통신 메커니즘에 대한 관심이 증대되고 있다. 유니캐스트에 비해 적은 대역폭을 쓰며 그룹관리가 용이한 멀티캐스트의 효율성이 부각되면서, 확장성 및 신뢰성을 보장하기 위한 다양한 프로토콜들이 제안되었다. 최근에는 망의 트리 구조를 알고 있는 라우터를 기반으로 물리적인 트리를 구성하여 지역그룹내의 응답자(replier)를 선정하고 손실된 패킷에 대한 재전송을 처리해 주는 방법에 대한 연구가 진행되고 있다. 이 경우, 지역그룹내의 응답자는 망의 상태에 따라 임의적으로 선택되므로 멀티캐스트 그룹내의 모든 수신자들은 응답자가 될 가능성이 있다. 따라서 그룹내의 모든 수신자들은 손실 복구를 위한 버퍼를 유지하며 이 버퍼에 수신한 패킷들을 저장한다. 이는 그룹내 모든 수신자들이 불필요한 패킷을 항상 버퍼에 유지해야 하는 오버헤드를 가짐을 뜻한다. 따라서 본 논문에서는 더 이상 손실 복구 요청을 받지 않게 될 불필요한 패킷을 미리 판단하여 수신자들의 버퍼에서 패킷들을 지울 수 있게 함으로써, 불필요한 자원손실을 막는 방법을 제안한다. 제안된 방법에서는 LSM[1] 모델을 기반으로 응답자 선정 및 패킷 손실 복구를 하며, 지역그룹을 대표하는 삭제자(eraser)로부터의 ACK를 사용하여 불필요한 패킷을 판단하고 버퍼에서 해당 패킷을 지운다.