大数据流式计算与批量处理的关键技术分析
大数据流式计算与批量处理的关键技术分析
作者:胡拓宇[1];
作者机构:[1]煤炭工业合肥设计研究院有限责任公司,安徽合肥230000;
来源:科学与信息化
ISSN:2096-2908
年:2018
卷:000
期:020
页码:P.24-24
页数:1
中图分类:TP311.56
正文语种:CHI
关键词:大数据;流式计算;批量处理;关键技术
摘要:数据规模的快速增长给大数据的分析处理带来了巨大的难度和挑战,其愈发呈现出无限性、无序性等鲜明的流式特征,传统的批量处理模式难以满足数据处理对于计算实时性的要求,单纯的流式计算费用成本昂贵,因此,研究同一大数据系统中流式计算与批量处理混合的数据处理方式具有重要意义。
相关主题