大数据
英雄为谁老
这个作者很懒,什么都没留下…
展开
-
spark和Linux中一些重要的有关python的命令和执行流程
创建socket命令: nc -lk 9999 接收socket命令: nc hadoop1 9999 看到第一天11 提交python的命令 /root/apps/spark-yarn/bin/spark-submit /root/apps/code/hello.py bin/pyspark --master local /root/apps/spark-yarn/bin/spark-submit /root/apps/code/HyperLPR/demo1.py /root/apps/spark-...原创 2020-12-15 16:12:43 · 123 阅读 · 0 评论 -
hadoop 配置和一些重要的linux命令
1.配置nodes无密钥连接 配置环境变量 vi /etc/profile 指定ip vi /etc/hosts vim /etc/sysconfig/network-script/ifcfg-eth0 指定mac地址 vim /etc/udev/rules.d/70-persistent-net.rules 单机免密登陆 ssh-keygen -t dsa -P ‘’ -f ~/.ssh/id_dsa cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_key原创 2020-12-02 20:09:09 · 80 阅读 · 0 评论