Spark + Hadoop,基于WIFI探针的大数据分析系统

向AI转型的程序员都关注了这个号????????????

人工智能大数据与深度学习  公众号:datayx

WIFI探针是一种可以记录附近mac地址的嗅探器,可以根据收集到的mac地址进行数据分析,获得附近的人流量、入店量、驻留时长等信息。

本系统以Spark + Hadoop为核心,搭建了基于WIFI探针的大数据分析系统

获取项目:

关注微信公众号 datayx  然后回复  wifi  即可获取。

AI项目体验地址 https://loveai.tech

项目演示地址

http://v.youku.com/v_show/id_XMjg1OTYxNzg1Ng==.html?spm=a2hzp.8244740.0.0

Spark + Hadoop,基于WIFI探针的大数据分析系统

Spark + Hadoop,基于WIFI探针的大数据分析系统

Spark + Hadoop,基于WIFI探针的大数据分析系统

Spark + Hadoop,基于WIFI探针的大数据分析系统

Spark + Hadoop,基于WIFI探针的大数据分析系统

Spark + Hadoop,基于WIFI探针的大数据分析系统

Spark + Hadoop,基于WIFI探针的大数据分析系统

py-script

模拟发送探针数据的python脚本,使用多线程来模拟大量探针的发包

Databases in System

  • MySQL

关系型数据库,负责存储一些不会经常读取的数据,比如分析程序的参数配置、商场信息等

  • HBase

分布式非关系型数据库,用于永久性存储原始数据,供离线分析程序使用

  • Redis

非关系型数据库,适用于存储快速读写的数据,用于存储分析结果,存储格式为json


阅读过本文的人还看了以下文章:

不断更新资源

深度学习、机器学习、数据分析、python

 搜索公众号添加: datayx  

Spark + Hadoop,基于WIFI探针的大数据分析系统

长按图片,识别二维码,点关注

AI项目体验

https://loveai.tech

Spark + Hadoop,基于WIFI探针的大数据分析系统

相关文章: