悟空非空也的博客

原创 11 综合项目-网站日志数据分析系统

系统背景介绍 近年来，随着社会的不断发展，人们对于海量数据的挖掘和运用越来越重视，大数据的统计分析可以为企业决策者提供充实的依据。例如，通过对某网站日志数据统计分析，可以得出网站的日访问量，从而得出网站的欢迎程度；通过对移动APP的下载数据量进行统计分析，可得出应用程序的受欢迎程度，可通过不同维度进行更深层次的数据分析，为运营分析与推广决策提供可靠的数据依据。 系统架构设计及效果预览 将Nginx服务器所产生的日志文件通过Flume采集到HDFS中. 根据原始日志文件及规定数据格式开发MapReduce