学里大数据学些什么呢?
是否有同学对自己的专业感到困惑呢?
今日让博主来为你解忧,加油 !
一、大数据基础原理 | |
---|---|
1.1大数据概念 | |
1.2大数据前世今生(大数据历史) | |
1.3大数据特性 | |
1.4大数据与nosql | |
1.5大数据与云计算 | |
1.6大数据与人工智能 | |
1.7大数据与机器学习 | |
1.8大数据与数据仓库 | |
1.9Hadoop由来 | |
1.10 HDFS基本原理 | |
1.11 MapReduce核心思想 | |
1.12 YARN在Hadoop中的角色定位 | |
1.13 YARN基本框架 | |
1.14 HBase基本概念 | |
1.15 Hadoop生态成员与角色定位 | |
1.16 发行版Hadoop主要供应商 |
基础可要打牢哦,都是些偏理论的
微友们是否和我一样,对理论是超级拒绝的,这可是不行的哦要加以改正。
二、大数据运维 | |
---|---|
2.1Linux基础命令 | |
2.2Linux shell 原理 | |
2.3Linux 进程管理 | |
2.4Linux 无密登录 | |
2.5Linux 程序安装与运行 | |
2.6Linux 文件操作(增删改查) | |
2.7Linux shell 编程 | |
2.8Hadoop 安装 | |
2.9HDFS 分布式部署 | |
2.10 HDFS高可用环境搭建 | |
2.11 HDFS 配置文件 | |
2.12 MapReduce 配置文件 | |
2.13 MySql 安装与配置 | |
2.14 Hive 环境搭建 | |
2.15 YARN 分布式部署与管理 | |
2.16 HBase 分布式部署与管理 | |
2.17 Spark 环境搭建 | |
2.18 Kafka 安装配置 | |
2.19 Flume安装配置 | |
2.20 sqoop 安装配置 | |
2.21 python 安装配置 |
linux基础命令可要掌握好
如果你是新手,关注博主不迷路 !
Linux常用命令博主会更的哦
三、数据清洗(ETL) | |
---|---|
3.1数据清洗概念 | |
3.2Flume 基本概念 | |
3.3Flume事件概念与原理 | |
3.4Flume 配置文件 | |
3.5Kafka 基本概念 | |
3.6Kafka 内部逻辑组成 | |
3.7Kafka 配置文件 | |
3.8HDFS 优缺点 | |
3.9HDFS 文件读写流程 | |
3.10 HDFS 文件副本机制 | |
3.11 HDFS NN 运行原理 | |
3.12 HDFS NN 高可用解决方案 | |
3.13 HDFS 高可用机制 | |
3.14 Sqoop 基本概念 | |
3.15 Sqoop import/export | |
3.16 HBase数据模型 | |
3.17 HBase运行架构 | |
3.18 HBase Region原理 | |
3.19 HBase RegionServer原理及分类 | |
3.20 HBase HMaster负责事项 | |
3.21 HBase数据写入流程 | |
3.22 HBase数据读取流程 | |
3.23 MapReduce基础编程 | |
3.24 Scala基础语法 | |
3.25 Spark基础编程 |
这个和以下内容博主未来会慢慢和微友们探讨哦
四、大数据分析与挖掘 | |
---|---|
4.1MapReduce 运行原理 | |
4.2MapReduce 优缺点 | |
4.3MapReduce 任务异常处理 | |
4.4Hive 原理与本质 | |
4.5Hive 数据库概念 | |
4.6Hive sql语法与特性 | |
4.7Hive 表管理 | |
4.8Hive 数据操作 | |
4.9Hive sql 试图 | |
4.10 YARN ResourceManager 管理机制 | |
4.11 YARN NodeManager 决策机制 | |
4.12 YARN 中 application 运行过程 | |
4.13 YARN Container 概念 | |
4.14 Spark RDD 定义与特性 | |
4.15 Spark DataSet 定义及内部机制 | |
4.16 Spark Streaming 概念及特性 | |
4.17 Spark 作业执行过程 | |
4.18 Spark 运行模式 |
**
五、大数据可视化 | |
---|---|
5.1HTML 语法与标签 | |
5.2CSS 语法规则 | |
5.3网页布局方式 | |
5.4JavaScript 基础语法 | |
5.5ECharts 基本 api | |
5.6Ajax 基本原理 | |
5.7Ajax 实现与后台服务通信 |