Linux
数据圈
踏踏实实搞学习
展开
-
linux之VI编辑器使用
vi是所有UNIX系统都会提供的屏幕编辑器,它提供了一个视窗设备,通过它可以编辑文件。当然,对UNIX系统略有所知的人,或多或少都觉得vi超级难用,但vi是最基本的编辑器,学好了vi,以后在UNIX世界里必将畅行无阻、游刃有余,因为其他几种文本处理器并非UNIX标准配备在UNIX下,vi是标准的文本编辑器之一。几乎任何一部UNIX系统都把vi编辑器作为最最基本的“软原创 2016-05-27 16:20:19 · 10595 阅读 · 0 评论 -
hadoop安装配置中的权限管理
1.添加一个hadoop组sudo addgroup hadoop2.将当前用户hadoop加入到Hadoop组sudo usermod -a -G hadoop hadoop3.将hadoop组加入到sudoersudo gedit etc/sudoers在root ALL=(ALL) ALL后 hadoop ALL=(ALL) ALL4.修改hadoop目原创 2016-10-14 17:55:49 · 1570 阅读 · 0 评论 -
linux常用的几个命令
删除1、删除文件夹以及文件夹中的所有文件命令:rm -rf 目录名字其中:-r:向下递归删除-f:直接强行删除,且没有任何提示 2、删除文件命令rm -f 文件名将会强行删除文件,且无提示 注意:使用rm -rf要格外注意,linux中没有回收站,慎重删除解压tar zxvf **.tar -C 目标路径复制原创 2016-09-21 22:58:52 · 332 阅读 · 0 评论 -
ubuntu Hadoop启动报Error: JAVA_HOME is not set and could not be found解决办法
Hadoop安装完后,启动时报Error: JAVA_HOME is not set and could not be found.解决办法: 修改/etc/hadoop/hadoop-env.sh中设JAVA_HOME。 应当使用绝对路径。 export JAVA_HOME=$JAVA_HOME原创 2016-09-22 21:49:17 · 11616 阅读 · 0 评论 -
Spark编译与部署
一. 编译Spark Spark可以通过SBT和Maven两种方式进行编译,再通过make-distribution.sh脚本生成部署包。SBT编译需要安装git工具,而Maven安装则需要maven工具,两种方式均需要在联网下进行。maven主要是编译java程序的,sbt主要是编译scala程序的。1. 编译Spark(SBT)1.1 安装git并编译安装若为ubun原创 2016-09-01 15:08:28 · 665 阅读 · 0 评论 -
Ubuntu下安装和配置Scala教程
1.下载Scala安装包点我下载2.解压安装包3.将解压文件移到/app目录下3.配置环境变量4.验证是否成功原创 2016-08-31 20:48:43 · 8604 阅读 · 0 评论 -
ubuntu下安装JDK及环境变量配置
一.下载JDKLinux版JDK下载【点我下载】二.解压安装包创建解压目录/usr/lib/java将安装包从桌面转移到/usr/lib/java目录下开始解压 修改文件夹名字原创 2016-08-30 23:38:07 · 453 阅读 · 0 评论 -
windows通过ssh连接虚拟机中的ubuntu步骤
linux端开启ssh服务1.安装openssh-server包sudo apt-get install openssh-server 2.启动ssh serversudo /etc/init.d/ssh start3.确认ssh服务启动ps -e | grep ssh 4.设定服务端口,设置完后重启服务sudo vi /etc/ssh/s原创 2016-08-30 11:53:36 · 14752 阅读 · 3 评论 -
ubuntu15.1安装openssh-server失败问题
失败提示在虚拟机上安装 在终端输入 sudo apt-get install opensshserver正在读取软件包列表...完成正在分析软件包的依赖关系树正在读取状态信息...完成现在没有可用的软件包 openssh-server,但是他被其他的软件包引用了这可能意味着这个缺失的软件包可能已被废弃,或者只能在其他发布源中找到E:软件包 o原创 2016-08-30 11:04:55 · 1506 阅读 · 0 评论 -
Ubuntu15.1无法从普通用户切换到超级用户root解决办法
问题描述:无法从普通用户切换到超级用户root下面,导致su认证失败!问题原因Ubuntu安装后,root用户默认是被锁定了的,不允许登录,也不允许 su 到 root ,对于桌面用户来说这个可能是为了增强安全性,但是服务器版上的没这个还真不行,赶紧设置下吧。解决办法Ubuntu安装后,root用户默认是被锁定了的,不允许登录,也不允许 su 到原创 2016-08-29 22:47:20 · 2595 阅读 · 0 评论 -
VI编辑器之删除操作
删除操作 :%s/r//g 删除DOS方式的回车^M :%s= *==删除行尾空白:== 删除行尾空白 :%s/^(.*)n1/1/ 删除重复行 :%s/^.pdf/new.pdf/ 只是删除第一个pdf :%s/// 又是删除多行注释(咦?为什么要说「又」呢?) :g/^s*/d删除所有空行:g/s∗/d 删除所有空行 :g/^s*/d 删除所有空行 :g!/^dd/d 删除不含字原创 2016-05-15 16:52:16 · 1023 阅读 · 0 评论 -
【Hadoop入门学习系列之一】Ubuntu下安装Hadoop(完全分布模式)
一.前言hadoop的安装模式主要有三种:单机模式,伪分布模式和集群模式。单机模式和伪分布模式的安装配置请参考上文【Hadoop入门学习系列之一】Ubuntu下安装Hadoop(单机模式+伪分布模式),真正使用时使用的是hadoop的集群模式。 本文主要讲解在Linux环境下hadoop集群模式的安装和配置。二.安装步骤1.在虚拟机中安装三个Linux虚拟机 主机名分别为Master,Slav原创 2016-10-15 20:49:50 · 1604 阅读 · 0 评论