计算机研究与发展

作者：魏钧宇,张广艳,陈军超,

关键词：日志存储, 静态模式, 动态模式, 高压缩率, 低检索延迟,

公共云的日志服务能够全面提升研发、运维、运营和安全保障的能力，而云日志具有数据规模庞大、留存时间长、写入速度快、有用信息密度低、访问延迟要求高等特点.为了节省存储成本，需要满足3个要求：1）以较高压缩密度保存此类数据（压得狠）；2）以较高的压缩速度实现数据写入（压得快）；3）以低延迟对压缩数据进行快速检索（查得快）.同时实现这三者是充满挑战的，需结合具体应用场景进行定制化设计.通过总结云日志中的典型数据模式，给出一种低成本云日志存储范式——数据模式感知的低成本云日志存储系统，从压缩率、压缩速度和检索延迟等3个方面对若干低成本云日志存储方法进行对比测试.最后，结合相关领域研究提出3点经验和思考，供未来的研究工作参考.

来源：2023年第11期

《计算机研究与发展》期刊编辑部

查看计算机研究与发展杂志2023年第11期