开放期刊系统

基于 Flume+Kafka 分析球员数据研究

青 山科, 张 铷钫

摘要

随着社会信息量的爆炸,在这海量的数据当中,人们如何准确地获取所需要的信息以及将这些信息进行各种各样 的处理,如何精确高效直接地获取对自己有帮助的数据显得尤为重要。为了满足以上的需求,本文着重以 flume 和 kafka 之间 的数据流通为重点,以爬取和模拟生成的球员信息为样例,快速获取球员资料

关键词

数据处理;hive;kafka

全文:

PDF

参考

[1] 董楠楠,单晓欢,牟有静.基于 Hadoop 和 MapReduce 的大数据处理系统设计与实现[J].信息通信,2020(06):29-31. [2] 张趁香.基于 Hadoop 平台的海量数据分析和处理[J].电脑编程技巧与维护,2019(01):95-97. [3] 许丹亚,王晶,王利,张伟功.基于 Spark 的大数据访存行为跨层分析工具[J].计算机研究与发展,2020,57(06):1179-1190. [4] 陈军.基于 Flume 的分布式日志聚合系统的研究[J].科技视界,2017(11):77+114. [5] 王伟.大数据技术与“互联网+健康”产业发展[J].现代商业,2020(23):39-40.


(91 摘要 Views, 64 PDF Downloads)

Refbacks

  • 当前没有refback。