大学里大数据学些什么呢?
是否有同学对自己的专业感到困惑呢?
今日让博主来为你解忧,加油 !
| 一、大数据基础原理 | |
|---|---|
| 1.1大数据概念 | |
| 1.2大数据前世今生(大数据历史) | |
| 1.3大数据特性 | |
| 1.4大数据与nosql | |
| 1.5大数据与云计算 | |
| 1.6大数据与人工智能 | |
| 1.7大数据与机器学习 | |
| 1.8大数据与数据仓库 | |
| 1.9Hadoop由来 | |
| 1.10 HDFS基本原理 | |
| 1.11 MapReduce核心思想 | |
| 1.12 YARN在Hadoop中的角色定位 | |
| 1.13 YARN基本框架 | |
| 1.14 HBase基本概念 | |
| 1.15 Hadoop生态成员与角色定位 | |
| 1.16 发行版Hadoop主要供应商 |
基础可要打牢哦,都是些偏理论的
微友们是否和我一样,对理论是超级拒绝的,这可是不行的哦要加以改正。
| 二、大数据运维 | |
|---|---|
| 2.1Linux基础命令 | |
| 2.2Linux shell 原理 | |
| 2.3Linux 进程管理 | |
| 2.4Linux 无密登录 | |
| 2.5Linux 程序安装与运行 | |
| 2.6Linux 文件操作(增删改查) | |
| 2.7Linux shell 编程 | |
| 2.8Hadoop 安装 | |
| 2.9HDFS 分布式部署 | |
| 2.10 HDFS高可用环境搭建 | |
| 2.11 HDFS 配置文件 | |
| 2.12 MapReduce 配置文件 | |
| 2.13 MySql 安装与配置 | |
| 2.14 Hive 环境搭建 | |
| 2.15 YARN 分布式部署与管理 | |
| 2.16 HBase 分布式部署与管理 | |
| 2.17 Spark 环境搭建 | |
| 2.18 Kafka 安装配置 | |
| 2.19 Flume安装配置 | |
| 2.20 sqoop 安装配置 | |
| 2.21 python 安装配置 |
linux基础命令可要掌握好
如果你是新手,关注博主不迷路 !
Linux常用命令博主会更的哦
| 三、数据清洗(ETL) | |
|---|---|
| 3.1数据清洗概念 | |
| 3.2Flume 基本概念 | |
| 3.3Flume事件概念与原理 | |
| 3.4Flume 配置文件 | |
| 3.5Kafka 基本概念 | |
| 3.6Kafka 内部逻辑组成 | |
| 3.7Kafka 配置文件 | |
| 3.8HDFS 优缺点 | |
| 3.9HDFS 文件读写流程 | |
| 3.10 HDFS 文件副本机制 | |
| 3.11 HDFS NN 运行原理 | |
| 3.12 HDFS NN 高可用解决方案 | |
| 3.13 HDFS 高可用机制 | |
| 3.14 Sqoop 基本概念 | |
| 3.15 Sqoop import/export | |
| 3.16 HBase数据模型 | |
| 3.17 HBase运行架构 | |
| 3.18 HBase Region原理 | |
| 3.19 HBase RegionServer原理及分类 | |
| 3.20 HBase HMaster负责事项 | |
| 3.21 HBase数据写入流程 | |
| 3.22 HBase数据读取流程 | |
| 3.23 MapReduce基础编程 | |
| 3.24 Scala基础语法 | |
| 3.25 Spark基础编程 |
这个和以下内容博主未来会慢慢和微友们探讨哦
| 四、大数据分析与挖掘 | |
|---|---|
| 4.1MapReduce 运行原理 | |
| 4.2MapReduce 优缺点 | |
| 4.3MapReduce 任务异常处理 | |
| 4.4Hive 原理与本质 | |
| 4.5Hive 数据库概念 | |
| 4.6Hive sql语法与特性 | |
| 4.7Hive 表管理 | |
| 4.8Hive 数据操作 | |
| 4.9Hive sql 试图 | |
| 4.10 YARN ResourceManager 管理机制 | |
| 4.11 YARN NodeManager 决策机制 | |
| 4.12 YARN 中 application 运行过程 | |
| 4.13 YARN Container 概念 | |
| 4.14 Spark RDD 定义与特性 | |
| 4.15 Spark DataSet 定义及内部机制 | |
| 4.16 Spark Streaming 概念及特性 | |
| 4.17 Spark 作业执行过程 | |
| 4.18 Spark 运行模式 |
**
| 五、大数据可视化 | |
|---|---|
| 5.1HTML 语法与标签 | |
| 5.2CSS 语法规则 | |
| 5.3网页布局方式 | |
| 5.4JavaScript 基础语法 | |
| 5.5ECharts 基本 api | |
| 5.6Ajax 基本原理 | |
| 5.7Ajax 实现与后台服务通信 |
给大家分享一个微信学习公众号:“ 大数据花院 ”
喜欢就转发收藏,开始你的学习之旅吧!