“大数据原理及应用”课程，淘宝数据分析

q：630155515

大作业内容要求：

1、至少完成4项课程实验

2、完成1篇课程论文

3、完成一个使用大数据技术对某个数据集分析、统计、显示。具体如下要求。

内容3具体要求

1. 课题基本要求

1. 本次大作业没有指定需要完成大作业或实验题目，大家可以自行确定大作业题目或系统。
2. 建议可以使用Spark、Hadoop、MapReduce完成一个小的系统，如网站日志分析系统、电影推荐系统等

(友情提示：如果没有好的项目案例或数据就完成下面的淘宝交易大数据分析)

注1：网站日志是记录web服务器接收处理请求以及运行时错误等各种原始信息的以·log结尾的文件，确切的讲，应该是服务器日志。网站日志最大的意义是记录网站运营中比如空间的运营情况，被访问请求的记录。通过网站日志可以清楚的得知用户在什么IP、什么时间、用什么操作系统、什么浏览器、什么分辨率显示器的情况下访问了你网站的哪个页面，是否访问成功等信息。结果可以图示化显示时间集中度（24小时,网站访问高峰）、操作系统分布、浏览器分布等信息。