登录    注册    忘记密码

期刊文章详细信息

一种自适应的分布式数据流处理调整技术    

An Adaptive Adjustment Technology of Distributed Data Stream Processing

  

文献类型:期刊文章

作  者:马元文[1] 王鹏[1] 周之敏[1] 汪卫[1]

机构地区:[1]复旦大学计算机科学技术学院上海市数据科学重点实验室,上海201203

出  处:《计算机工程》

基  金:国家自然科学基金资助项目(61103009);上海市科委大数据专项基金资助项目(13511504800)

年  份:2015

卷  号:41

期  号:12

起止页码:15-20

语  种:中文

收录情况:AJ、BDHX、BDHX2014、CAS、CSA、CSA-PROQEUST、CSCD、CSCD_E2015_2016、IC、INSPEC、JST、RCCSE、SCOPUS、UPD、ZGKJHX、核心刊

摘  要:由于数据流速率的不稳定特性,将数据流查询部署在固定数量的结点上会导致分布式数据流管理系统(DDSMS)难以高效地利用计算资源。为此,针对目前支持一个结点运行多个实例模式的DDSMS,提出一种基于操作符组的自适应动态调整技术,包含桶机制的路由管理、生成调整策略和调整执行计划等方法。通过监控当前执行计划的运行状态,DDSMS生成代价较小的调整策略,并对当前执行计划进行调整。在数据流处理的基准测试数据上进行实验,结果表明,该调整技术可以更加细粒度地制定调整策略,灵活应对数据流速率的变化。

关 键 词:数据流查询 分布式 动态调整  状态管理 调整策略  

分 类 号:TP391]

参考文献:

正在载入数据...

二级参考文献:

正在载入数据...

耦合文献:

正在载入数据...

引证文献:

正在载入数据...

二级引证文献:

正在载入数据...

同被引文献:

正在载入数据...

版权所有©重庆科技学院 重庆维普资讯有限公司 渝B2-20050021-7
 渝公网安备 50019002500408号 违法和不良信息举报中心