![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据平台篇
文章平均质量分 90
gao_vip
这个作者很懒,什么都没留下…
展开
-
Windows系统下通过Git上传项目到GitHub上的方法
在windows系统将项目代码文件上传到GitHub上去,如在Pycharm上写机器学习项目,需要将整个文件夹的代码和测试数据上传,具体可用git工具实现。1.在GitHub上创建仓库在GitHub注册账号,建立名为test的仓库2.安装git客户端在官网:https://git-scm.com/ 下载安装,完成后进入Git Bash窗口3.在windows上用Git Bash上传文件3.1建立本地仓库查看文件夹位置pwd文件夹变成Git可以管理的仓库:git init原创 2020-10-14 19:21:29 · 587 阅读 · 0 评论 -
linux常用命令-查看及杀死进程-后台执行程序
查看及杀死进程1.退出编辑状态 shift+;退出用wq 或q!2. ps 命令用于查看当前正在运行的进程。 grep 是搜索,例如: ps -ef | grep java,表示查看所有进程里CMD是java的进程信息 ps -aux | grep java , -aux 显示所有状态3. kill 命令用于终止进程 例如: kill -9 [PID] -9表示强迫进程立即...原创 2020-01-12 16:23:08 · 3703 阅读 · 0 评论 -
scala 和 spark的安装与使用
一、安装JDK(建议JDK7以上)略二、安装Hadoop 2.x略三、安装Scala(2.10.4)在root用户下分别执行下列操作1.获取并解压安装包tar –zvxf scala-2.10-2.10.4.tgzmv scala-2.10.4 scala2.配置环境变量gedit sudo /etc/profile加入如下代码export SCALA_HOME=/ho...原创 2019-12-13 19:22:50 · 507 阅读 · 0 评论 -
hadoop集群的安装与配置
1.安装和配置虚拟机1.1安装VMwareWorkstation12pro虚拟机1.2安装vmwaretools工具2.Hadoop集群配置过程2.1 集群中的机器,都要有的配置:安装jdk 7+,并配置好环境变量Hadoop-2.x.x安装包,配置好Hadoop参数(重点1)都要安装SSH服务,如果没有安装ssh服务,则启动每台机器,分别安装ssh服务:$ sudo apt-...原创 2019-12-13 13:45:32 · 365 阅读 · 0 评论 -
centos7的安装与配置
一、centOS7-配置网络地址/etc/sysconfig/network-scriptsvi ifcfg-ens33ONBOOT=yesservice network restart转自链接:http://www.cnblogs.com/c-xiaohai/p/6509581.html二、安装图形界面Gnome先检查yum 是否安装了,以及网络是否有网络。如果这两者都没有,先...原创 2019-12-11 13:58:23 · 226 阅读 · 0 评论