shell
大数据面壁者
大数据相关知识分享,框架底层原理机制,生产学习中遇到的相关问题分享,共同学习,共同进步。
展开
-
Sqoop数据导入导出常用参数
Sqoop数据导入导出常用参数bin/sqoop import \-----------------公有---------------------- --connect 指定mysql jdbc url --password 指定mysql密码 --username 指定mysql账号 -------------------------导入HDFS使用--------------------------------- --append 追加数据 --as-textfile 数据保存到HD原创 2020-12-11 19:48:51 · 649 阅读 · 0 评论 -
集群管理相关脚本汇总
脚本汇总01 分发脚本xsync#1、判断是否传入需要同步的目录/文件if [ $# -lt 1 ]then echo "必须传入一个同步的文件或者目录!!" exitfi#2、遍历需要同步的多个目录/文件#$*: 将输入的所有当做一个整体# xsync java hadoop#$@: 将输入参数当做单独的个体for f in $@do #3、判断输入的目录/文件是否存在 #-f: 判断是否为文件 #-e: 判断文件/目录是否存在 #-d: 判断是否为目录 if [ -e原创 2020-12-10 11:22:54 · 197 阅读 · 0 评论 -
shell参数
shell参数$* 将所有输入的参数作为一个整体$@ 将输入参数当做单独的个体$# 输入参数的个数$n 第n个参数-f 判断是否为文件-e 判断文件/目录是否存在-d 判断是否为目录-lt 小于-le 小于等于-eq 等于-gt 大于-ge 大于等于-ne 不等于-p 指定读取值时的提示符-t 指定读取值得等待时间(秒)basename 获取文件名dirname原创 2020-12-08 20:29:10 · 290 阅读 · 0 评论 -
后台运行之nohup与&
后台运行之nohup与&话不多说直接上脚本#! /bin/bashfor host in hadoop102 hadoop103do echo "====================start $host data====================" #标准输入: 0< # position.sh < a.txt #标准输出: 1 # position.sh > /xx.txt #错误输出: 2 # position.sh >/xx.txt原创 2020-12-08 18:39:56 · 195 阅读 · 0 评论