linux与hadoop常用命令梳理

本文归纳了在没有可视化平台时,如何在Linux环境中使用常用命令进行数据分析操作,包括查看磁盘使用、文件权限管理、文件操作等。同时介绍了Hadoop分布式文件系统的常用命令,如文件列表查看、文件上传下载、Hive分区表创建等,帮助用户高效地管理和操作HDFS上的数据。
摘要由CSDN通过智能技术生成

我们使用数据库进行分析和建模,最直接的是使用本地保存好的文件直接读取进行统计等操作,实际工作中一般使用存储数据的数据平台进行操作,比较方便的是用可视化平台比如大数据交互平台hue,没当没有可视化平台的时候就需要直接在linux环境中进行操作。这里就归纳一下平时比较实用的命令语句。

linux常用命令

  1. 查看目前 Linux 系统上的磁盘使用情况统计
df -h   #-h 显示大小单位
  1. 查看当前目录下各个文件及目录占用空间大小
du -sh *
  1. 修改文件或路径权限
chmod 777 file  #777为其他用户可读可写可执行, 600为其他用户不可读写执行
  1. 查看路径下所有文件包含隐含文件
ll -a
  1. 创建多级路径
mkdir -p /home/user/data
  1. 创建空白文件
touch temp.txt
  1. 为执行命令创建别名

编辑.bashrc文件添加alias命令

alias hive="/usr/bch/1.5.0/hive/bin/beeline -u 'jdbc:hive2://*********'
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值