Linux
文章平均质量分 85
有你就好@1222
这个作者很懒,什么都没留下…
展开
-
Spark启动任务脚本示例
#!/bin/bash#指定工作路径workPath=/data/bigdata/job/callLog-export#获取系统时间dataDate=date +"%Y-%m-%d" -d "-1 days"#获取一个参数if [ -n “$1” ] ;thendataDate=KaTeX parse error: Expected 'EOF', got '#' at position 6: 1fi#̲读取文件地址readFile…{dataDate}*#计算结果地址resultDa原创 2021-12-16 10:51:09 · 1004 阅读 · 0 评论 -
HADOOP安装与集群简要配置
前提你已经安装了虚拟机!虚拟机有openjdk,需要完全卸载!!!检查下自带的jdk命令:rpm -qa |grep javarpm -qa |grep jdkrpm -qa |grep gcj如果没有输出信息表示没有安装。如果安装了可以使用rpm -qa | grep java | xargs rpm -e --nodeps 批量卸载所有带有Java的文件 这句命令的关键字是java更多请访问:https://blog.csdn.net/jimuka_liu/article/detai原创 2021-08-31 15:36:56 · 220 阅读 · 0 评论 -
VM虚拟机3种网络连接方式,及网卡设置与免密登陆
三种连接的特点1、NAT:Network Address Translation 网络地址转换虚拟机与主机的关系:只能单向访问,虚拟机可以通过网络访问到主机,主机无法通过网络访问到虚拟机。虚拟机与网络中其他主机的关系:只能单向访问,虚拟机可以访问到网络中其他主机,其他主机不能通过网络访问到虚拟机。虚拟机与虚拟机的关系:相互不能访问,虚拟机与虚拟机各自完全独立,相互间无法通过网络访问彼此。理解:Guest访问网络的所有数据都是由主机提供的,Guest并不真实存在于网络中,主机与网络中的任何机器都不能原创 2021-08-31 14:40:23 · 3410 阅读 · 0 评论