大数据技术研究综述

被引:490
作者
刘智慧
张泉灵
机构
[1] 浙江大学智能系统与控制研究所
关键词
大数据; 数据处理技术; 数据分析; 云计算;
D O I
暂无
中图分类号
TP311.13 [];
学科分类号
1201 ;
摘要
大数据的产生给海量信息处理技术带来新的挑战.为了更全面深入地了解大数据的内涵,从大数据的概念特征、一般处理流程、关键技术三个方面进行详细阐述.分析了大数据的产生背景,简述了大数据的基本概念、典型的4"V"特征以及重点应用领域;归纳总结了大数据处理的一般流程,针对其中的关键技术,如MapReduce、GFS、BigTable、Hadoop以及数据可视化等,介绍了基本的处理过程和组织结构;具体分析指出了大数据时代所面临的问题与挑战.
引用
收藏
页码:957 / 972
页数:16
相关论文
共 38 条
[1]   大数据研究 [J].
严霄凤 ;
张德馨 .
计算机技术与发展, 2013, 23 (04) :168-172
[2]   大数据 [J].
于艳华 ;
宋美娜 .
中兴通讯技术, 2013, 19 (01) :57-60
[3]   大数据管理:概念、技术与挑战 [J].
孟小峰 ;
慈祥 .
计算机研究与发展, 2013, (01) :146-169
[4]   大数据研究:未来科技及经济社会发展的重大战略领域——大数据的研究现状与科学思考 [J].
李国杰 ;
程学旗 .
中国科学院院刊, 2012, 27 (06) :647-657
[5]   面向大数据的海云数据系统关键技术研究 [J].
黄哲学 ;
曹付元 ;
李俊杰 ;
陈小军 .
网络新媒体技术, 2012, 1 (06) :20-26
[6]   大数据时代的挑战、价值与应对策略 [J].
陈如明 .
移动通信, 2012, 36 (17) :14-15
[7]   美国发布“大数据的研究和发展计划” [J].
郎杨琴 ;
孔丽华 .
科研信息化技术与应用, 2012, 3 (02) :89-93
[8]   大数据分析——RDBMS与MapReduce的竞争与共生 [J].
覃雄派 ;
王会举 ;
杜小勇 ;
王珊 .
软件学报, 2012, 23 (01) :32-45
[9]   Hadoop平台在云计算中的应用 [J].
王宏宇 .
软件, 2011, 32 (04) :36-38+50
[10]   云计算:体系架构与关键技术 [J].
罗军舟 ;
金嘉晖 ;
宋爱波 ;
东方 .
通信学报 , 2011, (07) :3-21