2019年04--学习
流年小青年
一只小菜鸟
展开
-
190404_随手笔记(hadoop学习--1)
Hadoop:是分布式系统的基础架构(分布式,集群,大数据平台) hadoop包括:hdfs,mapreduce,yarn,common hdfs :为海量数据提供分布式存储; mapreduce:为海量数据提供分布式计算 yarn:为海量的数据提供分布式资源调度框架 common:用于完成底层通讯 主要工具介绍 hadoop:分布式系统的基础架构,可用于处理离线数据 pig:ha...原创 2019-04-04 00:05:58 · 122 阅读 · 0 评论 -
day_3hadoop学习小记(2)-hdfs
Hadoop工作原理: Google文件系统gfs是一个可拓展的分布式文件系统,用于大型的,分布式的,对大数据进行访问的应用.只是对数据进行读操作 hdfs是google gfs的开源版本,一个高度容错的分布式系统,它能够提供高吞吐量的数据访问,适合存储海量(PB)级的数据,hdfs在进行数据切割的时候会出现切割错误的情况, 所以不适用于有事务属性的生产情况.Hadoop只擅长做数据分析...原创 2019-04-04 21:03:55 · 146 阅读 · 0 评论 -
190403_Linux初学--时间片轮转调度算法
Linux操作系统: Linux是一套免费使用和自由传播的类Unix操作系统,是一个基于POSIX和UNIX的多用户、多任务、支持多线程和多CPU的操作系统。它能运行主要的UNIX工具软件、应用程序和网络协议。它支持32位和64位硬件。Linux继承了Unix以网络为核心的设计思想,是一个性能稳定的多用户网络操作系统。 UNIX操作系统: UNIX操作系统(尤尼斯),是一个强大的多用户、多任...转载 2019-04-02 23:33:16 · 1210 阅读 · 0 评论