共 14 条
基于SPARK大数据处理平台的图书馆智慧服务探索与实践
被引:20
作者:
宋维维
夏绍模
李赞
机构:
[1] 陆军勤务学院图书馆
来源:
基金:
中国博士后科学基金;
关键词:
Spark;
大数据处理;
图书馆智慧服务;
D O I:
10.13833/j.issn.1007-7634.2018.06.009
中图分类号:
G250.7 [图书馆自动化、网络化];
G252 [读者工作];
学科分类号:
1205 ;
120501 ;
摘要:
【目的/意义】针对互联网时代图书馆的海量业务、文献和用户数据,利用Spark技术框架有效解决图书馆大数据挖掘处理下读者更复杂的多重处理需求和低延迟的交互式查询需求问题。【方法/过程】阐述并分析了智慧图书馆建设发展的相关理念及功能性需求,建立了基于Spark大数据处理技术的图书馆智慧服务框架,对比Hadoop Map Reduce框架法,提出和介绍了基于Spark大数据处理技术的图书馆智慧服务流程和应用实践情况。【结果/结论】理论分析和实践表明,相较传统Hadoop Map Reduce框架法,Spark在运行速度、易用性、通用性及容错性上都有更好的表现;基于Spark技术的大数据处理平台,可优化和改进图书馆大数据处理模型,能更好地满足图书馆智慧服务的知识共享、使用便利、服务高效功能需求。
引用
收藏
页码:45 / 49+56
+56
页数:6
相关论文