데이터베이스 연구회지(SIGDB)
Current Result Document :
| 한글제목(Korean Title) |
데이터 병렬성을 활용한 로그 파일 재구축 부하 개선 연구 |
| 영문제목(English Title) |
A Study on Improvement of Log File Reconstruction Overhead Utilizing Data Parallelism |
| 저자(Author) |
서주연
성한승
최원기
박상현
Juyeon Seo
Hanseung Sung
Won Gi Choi
Sanghyun Park
|
| 원문수록처(Citation) |
VOL 36 NO. 03 PP. 0056 ~ 0075 (2020. 12) |
한글내용
(Korean Abstract) |
휘발성 장치인 DRAM을 주 저장소로 사용하는 인메모리 데이터베이스인 Redis는 신속한 데이터 처리의 장점을 지녔지만, 데이터 유실 위험이 크다. Redis는 데이터 유실 방지를 위해, 수행한 명령어를 로그 파일에 덧붙여 기록하는 AOF 기법을 제공한다. 하지만 계속되는 기록으로 인하여 로그 파일이 기약 없이 증가하는 현상이 발생한다. Redis는 로그 파일 재구축 기법을 제공하여 로그 파일 급증을 방지하지만, 부가적인 메모리 사용과 데이터 처리 지연이 요구되어 성능 및 자원 측면에서 부담이 가중된다. 본 연구에서는 로그 파일 재구 축 시 발생하는 부하를 개선하기 위해 데이터 병렬성을 활용한 로그 파일 재구축 기법을 제안한다. 또한, 재 구축 부하의 주요 원인이 되는 AOF Rewrite 버퍼 없이 재구축 작업을 수행하여, 메모리 사용량과 데이터 처리 성능을 향상시킨다. 제안하는 모델은 memtier-benchmark를 통해 평가되었으며, 재구축 부하가 크게 개선되었음을 확인하였다 |
영문내용
(English Abstract) |
Redis, an in-memory database that uses DRAM which is a volatile device as its main repository, has the advantage of rapid data processing but the risk of data loss is high. To prevent the data loss, Redis provides AOF method that appends log records for performed commands to the log file. However, there is a constant increase in the log file due to continuous records. Although Redis provides log file reconstruction methods to prevent sudden increase in the log file, additional memory usage and latency in data processing are required, adding to the burden in terms of performance and resources. In this research, we propose the log file reconstruction method using data parallelism to improve the overhead occurred in the log file reconstruction. Also, we perform reconstruction without AOF Rewrite buffer that is the major cause of reconstruction overhead through our method, so the memory usage and data processing performance are improved. The proposed model is evaluated via memtier-benchmark and we confirmed the reconstruction overhead has been considerably improved. |
| 키워드(Keyword) |
Log File Reconstruction
Data Parallelism
In-memory Database
Redis
로그 파일 재구축
데이터 병렬성
인메모리 데이터베이스
레디스
|
| 파일첨부 |
PDF 다운로드
|
