大数据

数据存储

磁盘（共享）

• ANS.NAS.DAS(专门将数据存储于磁盘阵列）
• 分布式存储架构（HDFS–大量数据存储）–集群（应用）

系统

• Linux

算法

• map-erduce的数据处理集群：它是将海量数据按照一定的方式修改为键值关系（key-value）
  HDFS+map-reduces=Hadoop集群（运行于Linux上的一个高性能集群）

• 通过数学(最典型统计学)+python=算法

• 数据可视化

运维
|
Linux操作系统（Windows–桌面工程师）
| | |
Linux运维 虚拟化KVM\XEN Hadoop+JAVA=大数据存储方向
(web架构） | |
（搭建自己的网站）openstack -----------------------------------
| | | | | | | |
docker(k8s) HDFS mr hive zookeeper spark(scala)

开发–计算机语言

BASIC 早期的机械语言
CC++：系统开发、驱动开发 、嵌入式开发（写板子）
（驱动程序：需要转换各个厂家设备之间的指令集，让厂家设备之间互通）
前端：JS php css html
JAVA
工具：脚本语言–shell\perl\python\
数据库：MYSQL、nosql

操作系统简介

1、操作系统干什么的？
平台----承上启下
上：应用
下：硬件设备(resoure)
硬件设备平台的三大部分：CPU 内存 I/O设备
（运算器 控制器 存储器 input设备 output设备）
CPU：所有的运算
内存：向CPU提供数据（cpu只能向内存读取数据），重启系统，内存中的数据将会丢失；
CPU读取内存中指定（需要的数据），这个过程，我们叫做寻址；（物理地址、逻辑）
IO设备：网卡（适配器）
磁盘（IDE、SAS、SSD）机械盘、固态盘

知识拓展

• osi七层模型----TCP/IP的四层模型
• 应用层–QQ |应用层
• 表示层–指令转换 |
• 会话层–session建立会话 |
• 传输层–通过端口区分应用 |传输层
• 网络层–IP |网络层
• 数据
• 链路层–MAC地址 |主机到主机层
  【下层为上层提供服务】
  操作系统，本身就是一个软件程序，但是，它并不直接对客户提供应用，而是为其他应用提供硬件资源；
  操作系统分为：用户空间和内核空间