- 博客(6)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 【Hadoop2.6】Yarn中任务调度器
概述Yarn中有三种任务调度器：FIFO调度器（FIFO Scheduler）、容量调度器（Capacity Scheduler）、公平调度器（Fair Scheduler）。任务调度器介绍1.FIFO调度器FIFO调度器将应用放在一个队列里，按照“先进先出”的原则为应用分配资源。优点：简单易用，不需要任何配置；缺点：不适合共享集群。大应用占用集群所有资源，所以每个应用只能...
2020-01-17 11:43:34
360
原创 【HDFS】hdfs与fsck结合使用
1.获取全部参数[hadoop@node01 ~]$ hdfs fsckUsage: DFSck <path> [-list-corruptfileblocks | [-move | -delete | -openforwrite] [-files [-blocks [-locations | -racks]]]] [-maintenance] <path...
2020-01-07 21:15:53
388
原创 【HDFS】HDFS与dfsadmin结合使用
1.获取所有参数[hadoop@node01 ~]$ hdfs dfsadminUsage: hdfs dfsadminNote: Administrative commands can only be run as the HDFS superuser. [-report [-live] [-dead] [-decommissioning]] [-saf...
2020-01-07 20:59:06
521
原创 【HDFS】HDFS与getconf结合使用，获取配置信息
1.获取所有参数[hadoop@node01 ~]$ hdfs getconfhdfs getconf is utility for getting configuration information from the config file.hadoop getconf [-namenodes] gets list of nam...
2020-01-07 20:55:27
1518
原创 【HDFS】HDFS操作命令
1.上传文件#用法：hdfsdfs-put/本地路径/hdfs路径hdfsdfs-put/linux本地磁盘文件/hdfs路径文件hdfsdfs-copyFromLocal/linux本地磁盘文件/hdfs路径文件#跟put作用一样hdfsdfs-moveFromLocal/linux本地磁盘文件/hdfs路径文件#跟put作用一样，只不过，源文...
2020-01-07 20:46:46
324
原创 【Linux】Centos7重启网卡失败
报错如下：解决办法：systemctl stop NetworkManagersystemctl disable NetworkManager然后重启网卡：service network restart
2020-01-07 19:47:28
937
Python Indent插件
2017-09-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人