国内刊号:51-1307/TP
国际刊号:1001-9081
发布日期:
作者:苟子安, 张晓, 吴东南, 王艳秋
单位:1. 西北工业大学 计算机学院, 西安 710129;2. 工信部大数据存储与管理重点实验室(西北工业大学), 西安 710129
关键词:分布式文件系统,日志分析,负载特征,时序特征,性能优化
基金:国家重点研发计划项目(2018YFB1004400);北京市自然科学基金-海淀原始创新联合基金资助项目(L192027)。
对运行在文件系统上的工作负载进行分析有助于优化分布式文件系统的性能,且对构建新型存储系统至关重要。由于工作负载的复杂性和规模多样性的增加,使用基于直觉的分析来显式地捕获工作负载踪迹的特征是不完备的。针对这一问题,提出了一个分布式日志分析与负载特征提取模型。首先,从分布式文件系统日志中根据关键字抽取出与读写相关的信息;其次,从统计与时序两方面对负载特征进行描述;最后,分析基于负载特征进行系统优化的可能。实验结果表明,提出的模型具有一定的可行性与准确性,且可以较为详细地给出负载统计与时序特征,具有低开销、高时效、易于分析等优点,可以用来指导具有相同特征的工作负载的合成、热点数据监测、系统的缓存预取优化。
来源:2020年第9期
《计算机应用》期刊编辑部