- 博客(6)
- 资源 (3)
- 收藏
- 关注
原创 【Hadoop2.6】Yarn中任务调度器
概述Yarn中有三种任务调度器:FIFO调度器(FIFO Scheduler)、容量调度器(Capacity Scheduler)、公平调度器(Fair Scheduler)。任务调度器介绍1.FIFO调度器FIFO调度器将应用放在一个队列里,按照“先进先出”的原则为应用分配资源。优点:简单易用,不需要任何配置;缺点:不适合共享集群。大应用占用集群所有资源,所以每个应用只能...
2020-01-17 11:43:34 360
原创 【HDFS】hdfs与fsck结合使用
1.获取全部参数[hadoop@node01 ~]$ hdfs fsckUsage: DFSck <path> [-list-corruptfileblocks | [-move | -delete | -openforwrite] [-files [-blocks [-locations | -racks]]]] [-maintenance] <path...
2020-01-07 21:15:53 388
原创 【HDFS】HDFS与dfsadmin结合使用
1.获取所有参数[hadoop@node01 ~]$ hdfs dfsadminUsage: hdfs dfsadminNote: Administrative commands can only be run as the HDFS superuser. [-report [-live] [-dead] [-decommissioning]] [-saf...
2020-01-07 20:59:06 522
原创 【HDFS】HDFS与getconf结合使用,获取配置信息
1.获取所有参数[hadoop@node01 ~]$ hdfs getconfhdfs getconf is utility for getting configuration information from the config file.hadoop getconf [-namenodes] gets list of nam...
2020-01-07 20:55:27 1518
原创 【HDFS】HDFS操作命令
1.上传文件#用法:hdfsdfs-put/本地路径/hdfs路径hdfsdfs-put/linux本地磁盘文件/hdfs路径文件hdfsdfs-copyFromLocal/linux本地磁盘文件/hdfs路径文件#跟put作用一样hdfsdfs-moveFromLocal/linux本地磁盘文件/hdfs路径文件#跟put作用一样,只不过,源文...
2020-01-07 20:46:46 324
原创 【Linux】Centos7重启网卡失败
报错如下:解决办法:systemctl stop NetworkManagersystemctl disable NetworkManager然后重启网卡:service network restart
2020-01-07 19:47:28 939
Python Indent插件
2017-09-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人