[논문 리뷰] Randomness Testing of Compressed Data

Weiling Chang, Binxing Fang외 3명|arXiv (Cornell University)|2010. 01. 20.

Chaos-based Image/Signal Encryption인용 수 7

한 줄 요약

이 논문은 여덟 가지 다른 알고리즘을 사용해 압축된 데이터의 난수성 품질을 평가하며, 높은 압축 비율에도 불구하고 압축된 데이터가 낮은 난수성을 보임을 발견한다. 연구는 압축 비율과 난수성 사이에 정의적인 상관관계를 보이며, 압축 알고리즘이 내재된 구조적 패턴으로 인해 난수 생성기로 부적절하다고 결론내린다.

ABSTRACT

Random Number Generators play a critical role in a number of important applications. In practice, statistical testing is employed to gather evidence that a generator indeed produces numbers that appear to be random. In this paper, we reports on the studies that were conducted on the compressed data using 8 compression algorithms or compressors. The test results suggest that the output of compression algorithms or compressors has bad randomness, the compression algorithms or compressors are not suitable as random number generator. We also found that, for the same compression algorithm, there exists positive correlation relationship between compression ratio and randomness, increasing the compression ratio increases randomness of compressed data. As time permits, additional randomness testing efforts will be conducted.

연구 동기 및 목표

• 일반적으로 사용되는 압축 알고리즘에서 생성된 데이터의 난수 품질을 평가하기 위해.
• 압축된 데이터가 암호화 또는 시뮬레이션 응용 분야에서 난수의 유효한 원천이 될 수 있는지 확인하기 위해.
• 압축 비율과 출력 데이터의 난수성 인식도 사이의 관계를 조사하기 위해.
• 압축 기반 방법이 난수 생성기로서의 적합성을 평가하기 위해.

제안 방법

• 저자는 다양한 데이터 소스에 대해 여덟 가지 널리 사용되는 압축 알고리즘을 적용하여 압축 출력을 생성하였다.
• 압축된 데이터에 통계적 난수성 테스트를 적용하여 엔트로피 및 분포 특성을 평가하였다.
• 압축 비율을 측정하고, 테스트를 통해 확보한 난수성 점수와 상관관계를 분석하였다.
• 표준 통계 테스트 세트를 사용하여 압축된 데이터의 난수성을 분석하였으며, 패턴과 예측 가능성에 초점을 맞추었다.

실험 결과

연구 질문

• RQ1 표준 압축 알고리즘에서 생성된 압축된 데이터가 난수 생성에 충분한 난수성을 보여주는가?
• RQ2 압축 비율과 출력 데이터의 난수성 사이에 측정 가능한 관계가 존재하는가?
• RQ3 다양한 압축 알고리즘은 '난수처럼 보이는' 데이터를 얼마나 잘 생성하는가?
• RQ4 압축 알고리즘의 출력 특성에 기반해 신뢰할 수 있는 의사 난수 생성기로 사용할 수 있는가?

주요 결과

• 모든 여덟 가지 테스트된 알고리즘에서 생성된 압축된 데이터는 진정한 난수성에서의 심각한 이탈을 보이며 낮은 난수 품질을 나타낸다.
• 높은 압축 비율과 향상된 난수성 점수 사이에 정의적인 상관관계가 관찰되어 더 강력한 압축이 시각적 난수성 향상에 기여함을 시사한다.
• 높은 압축 비율에도 불구하고 압축 출력에는 탐지 가능한 패턴이 존재하여 암호학적 난수성에는 부적합하다.
• 연구는 압축 알고리즘의 출력에 내재된 구조적 예측 가능성으로 인해 압축 알고리즘이 난수 생성기로 부적절하다고 결론내린다.