HI,欢迎来到好期刊网,发表咨询:400-888-9411 订阅咨询:400-888-1571证券代码(211862)

基于混合处理模型的乱序数据流分布式聚合查询处理技术

摘要:为了解决现有的乱序数据流聚合查询处理技术不能在降低查询处理延迟,同时保障聚合查询结果的最终正确性的局限性问题,本研究设计了混合嵌入分布式流处理模块和分布式批处理模块的乱序数据流分布式聚合查询处理技术。该技术一方面基于用户给定的结果质量,限制自适应地优化流处理模块所用的缓冲区大小,从而尽可能降低流处理的查询处理延迟;另一方面基于备份于分布式数据存储系统的历史流数据,并以批处理的方式实现对极其晚到流元组的查询处理,从而保障聚合查询结果的最终正确性。基于真实的乱序数据流数据集对该技术进行测试分析表明:该技术在平均查询处理时延、查询结果精度和系统可扩展性方面,比目前最好的基于缓存的乱序数据流处理技术均具有显著优势。

关键词:
  • 乱序数据流  
  • 混合处理模型  
  • 聚合查询  
  • 分布式查询处理  
作者:
杨宁; 许嘉; 吕品; 李陶深
单位:
广西大学计算机与电子信息学院; 广西南宁530004; 广西高校并行与分布式计算技术重点实验室; 广西南宁530004; 南宁学院; 广西南宁530200
刊名:
广西科学

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

期刊名称:广西科学

广西科学杂志紧跟学术前沿,紧贴读者,国内刊号为:45-1206/G3。坚持指导性与实用性相结合的原则,创办于1994年,杂志在全国同类期刊中发行数量名列前茅。