计算机应用

作者：廖佳, 陈扬, 包秋兰, 廖雪花, 朱洲森

单位：1. 四川师范大学 物理与电子工程学院, 成都 610101;2. 四川师范大学 计算机科学学院, 成都 610101

关键词：数据分流,接力计算,计算节点,数据同步,内存型数据存储

基金：国家社会科学基金资助项目（20BMZ092）；教育部产学合作协同育人项目（201802002036， 201901075008）。

针对当前大流量数据计算速度慢、服务器端计算压力大等问题，提出一套计算密集型大流量数据的接力计算与动态分流处理模型。首先，在分布式环境下，使用内存型数据存储技术确定计算任务的运算量与复杂等级，同时利用节点资源能力对节点进行排序；然后，动态分配任务到不同节点进行并行计算，并采用一种接力处理模式完成计算任务的分解，以有效保证高流量复杂运算任务的性能和精度要求。通过分析对比，可知在万级以上数据量的情况下，多个节点比单个节点的运行时间更短、计算速度更快；而且，将该模型应用于实际时，发现它不仅能在高并发场景下减少运行时间，而且也能节省更多计算资源。

来源：2021年第9期

《计算机应用》期刊编辑部

查看计算机应用杂志2021年第9期