![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Linux
草莓味的风
keep clam and code on
展开
-
【SCP命令】Linux和Windows下的文件互传
从Windows上传文件到Linuxscp -P SSH端口 Windows下的文件路径 username@Linux机器IP:有权限的路径可选参数: -r 传输文件夹 例如:scp -r C:\Users\Administrator\Desktop\Codes\3D-point-cloud-generation-master hanrui@192.168.1.203:/home/hanrui然后可以再根据自己的需要将文件夹移动到需要的位置cp 需要拷贝的文件 目标原创 2020-10-27 10:26:28 · 1314 阅读 · 0 评论 -
【Hadoop】MapReduce打成jar包上传到Linux运行
之前写过MapReduce代码,但并没有真正在HDFS上运行。今天就把之前写过的代码打成jar包,上传到HDFS上运行。首先,翻出之前写好的mapreduce代码修改代码:①添加下面一行,指定具体的任务类job.setJarByClass(ForWorldCount.class);②修改之前指定的输入输出路径,应变为参数输入:FileInputFormat.addI...原创 2019-01-04 18:03:01 · 3109 阅读 · 1 评论 -
【Linux】CentOS下安装Mysql
1 查看CentOS自带的Mysqlrpm -qa|grep mysql2 将自带的mysql卸载rpm -e --nodeps mysql-libs-5.1.71-1.el6.x86_643 yum在线安装(会自动解决依赖)(1)确定机器可以联网(2)yum install mysql-server(3)启动mysql:service mysqld start...原创 2019-04-27 08:58:52 · 163 阅读 · 0 评论 -
【Linux】CentOS下安装Hive并远程连接mysql
一、安装Hive1.上传hive压缩包(apache-hive-1.2.2-bin.tar.gz)至虚拟机2.解压缩tar -zxvf apache-hive-1.2.2-bin.tar.gz3.修改名称便于使用mv apache-hive-1.2.2-bin hive4.修改配置文件hive-site.xml,文件应在hive安装目录下的conf中,原本并没有这个文件...原创 2019-04-27 10:08:37 · 999 阅读 · 0 评论 -
【Linux】CentOS下安装Spark(standalone模式)
一、JDK的安装参考:https://blog.csdn.net/hr786250678/article/details/84998895二、HADOOP的安装参考:https://blog.csdn.net/hr786250678/article/details/89574478三、Scala的安装1 上传压缩包到虚拟机(master,slave1),解压tar -zx...原创 2019-04-30 08:26:59 · 652 阅读 · 0 评论 -
【Linux】CentOS下安装zookeeper(Distributed集群模式)
在集群模式下,建议至少部署3个zk进程(但我电脑空间不多了,我只建了两个虚拟机布了两个),或者部署奇数个zk进程。如果只部署2个zk进程,当其中一个zk进程挂掉后,剩下的一个进程并不能构成一个quorum的大多数。因此,部署2个进程甚至比单机模式更不可靠,因为2个进程其中一个不可用的可能性比一个进程不可用的可能性还大。1 上传压缩包至虚拟街,解压tar -zxvf zookeeper-3...原创 2019-04-28 14:30:51 · 175 阅读 · 0 评论 -
【Linux】CentOS下安装kafka(分布式模式)
前提:集群已安装好zookeeper1 上传压缩包到虚拟机,解压tar -zxvf kafka_2.11-0.11.0.3.tgz2 修改名字便于使用mv kafka_2.11-0.11.0.3 kafka3 修改配置文件,进入kafka安装目录下的config目录vim server.properties加入以下内容:broker.id=1 //相当于...原创 2019-04-28 20:01:15 · 542 阅读 · 0 评论 -
【Linux】CentOS下安装flume
一、Flume的安装前提:已搭建好Hadoop1 上传压缩包到虚拟机,解压tar -zxvf apache-flume-1.7.0-bin.tar.gz2 修改名字便于使用mv apache-flume-1.7.0-bin flume3 修改flume-env.sh文件:进入flume安装目录下的conf目录,cp flume-env.sh.template ...原创 2019-04-28 21:19:57 · 901 阅读 · 0 评论 -
【Linux】CentOS下安装nginx
1 安装gccyum install gcc-c++2 安装PCREyum install -y pcre pcre-devel3 安装zlibyum install -y zlib zlib-devel4 安装opensslyum install -y openssl openssl-devel5 上传nginx压缩包至虚拟街,解压tar -zxvf...原创 2019-04-29 10:16:57 · 137 阅读 · 0 评论 -
【Linux】VMware虚拟机的安装
VMware软件的安装和破解可以参考:https://blog.csdn.net/qq_31362105/article/details/80706096打开Vmware,左上角--文件--新建虚拟机选择自定义选项,下一步先不选择映像文件,稍后再添加操作系统上面操作系统选择Linux,下面的版本根据你的映像文件选择,我这里是CentOS 6指定虚拟机的保存...原创 2019-04-25 21:48:28 · 149 阅读 · 0 评论 -
解决Linux最小化安装不能联网的问题
如图,启动失败(比正常启动好像缺了点什么...)最小化安装就很容易出问题。解决办法:1 编辑/etc/sysconfig/network-scripts/ifcfg-eth0文件 将eth0改成eth1,我们不用0号网卡; 将onboot改成yes 而且最好在第一行开头随便加上点什么东西!不然可能也不行2 将修改 /etc/udev/rules.d/7...原创 2018-12-18 11:03:31 · 2942 阅读 · 1 评论 -
【Linux】Shell编程
一、什么是Shell 在linux系统中shell介于Linux内核与终端用户之间,让用户通过可以shell来操作内核,提供了用户与内核进行交互操作的一种接口,它接收用户输入的命令并把它送入内核去执行。 一个系统可以存在多个shell,不同的shell可能支持的命令语法是不相同的。 可以通过cat /etc/shells命令查看系统中安装的shell,...原创 2018-12-18 09:42:14 · 849 阅读 · 0 评论 -
【Ubuntu】Linux下Sqoop的安装配置
1、找到压缩包位置,解压 2、创建软连接:ln -s sqoop-1.4.6.bin_hadoop-2.0.4-alpha sqoop3、配置环境变量:vi /etc/profile4、用模板sqoop-env-template.sh复制出一个sqoop-env.sh5、vi sqoop-env.sh,设置如下变量:6、把mysql的jar包...原创 2018-07-18 09:38:52 · 1276 阅读 · 0 评论 -
Ubuntu16.04 使用root用户登录
在文件最后添加:greeter-show-manual-login=true,保存并退出注销后重新登录,选择“login”,输入用户名:root,密码就是刚才在sudo passwd root中设置的密码,进入终端,就会看到显示的是root用户了。...原创 2018-07-12 10:33:48 · 10110 阅读 · 0 评论 -
【Linux】SSH免密登录
什么是免密码登录呢?看一下原理。我们有AB两台机器。A想免密码登录B。那么我们在A上生成一对公钥和私钥。然后A会将一段文本和公钥发送到B上。B用文本对公钥加密,再发回给A,A如果用私钥对文本解密后发给B如果和B最早收到的数据一样说明公钥私钥是一对,说明可以登录。因为只有一对才能解密成功。所以就是想免密登录谁就把公钥给谁。1 输入命令生成密钥:ssh-keygen-t rsa -P '...原创 2018-07-12 11:00:06 · 3574 阅读 · 0 评论 -
【Linux虚拟机】Ubuntu16.04 配置JDK
JDK的安装及配置 1.找到JDK的tar包的位置 2.解压tar包:tar -zxvf 包名 -C 指定解压路径 3.创建一个软连接:ln -s 文件名 链接名 4.配置环境变量:vi /etc/profile 5.添加JAVA_HOME: JAVA_HOME=/simple/jdk(jdk的安装目录) export PATH=$J...原创 2018-07-12 13:30:54 · 186 阅读 · 0 评论 -
【Ubuntu】Linux下Hadoop伪分布式的配置
hadoop伪分布式的配置: 1.找到tar包所在位置,解压hadoop文件: cd /simple/soft tar -zxvf hadoop-2.4.1.tar.gz -C /simple 创建超链接:ln -s hadoop-2.4.1/ hadoop(建立指向hadoop-2.4.1的超链接hadoop,创建之后可以使用ll查看)...原创 2018-07-12 14:42:39 · 773 阅读 · 0 评论 -
【Ubuntu】Linux下Flume的配置
1、找到安装包位置并解压2、创建软连接2、修改配置文件进入flume安装目录下的conf文件夹内,可以看到有个配置文件模板flume-env.sh.template,复制一份cp flume-env.sh.template flume-env.sh vi flume-env.sh修改export JAVA_HOME=jdk安装目录3、添加环境变量:vi /etc/profile 使配置文...原创 2018-07-12 15:26:11 · 782 阅读 · 0 评论 -
【Ubuntu】Linux下Hive连接MYSQL数据库的安装配置
1、找到安装包位置,解压2、创建软连接:ln -sapache-hive-1.2.2-bin hive3、环境变量的配置:vi /etc/profile HIVE_HOME=/simple/hive(Hive的安装目录) Export PATH=$HIVE_HOME/bin:$PATH4、重新加载配置文件:source /etc/profile5、启动hadoop集群(数...原创 2018-07-16 09:00:26 · 1935 阅读 · 0 评论 -
【Linux】配置JDK(Ⅱ)
之前写过一个通过profile配置JDK的这次通过bashrc配置,其实方法差不多。1.JDK的tar包上传到虚拟机2.解压:tar -zxvf jdk-8u172-linux-x64.tar.gz解压后的名字太长,便于以后使用可以改一下:mv jdk1.8.0_172 jdk3.编辑bashsrc文件:是家目录下的隐藏文件vim .bashrc4.加入...原创 2018-12-14 10:58:03 · 194 阅读 · 0 评论 -
【Linux】常用基本命令
一、文件夹操作 家目录:/home,是存放root以外的其他所有用户的用户文件目录,不同的用户在home文件夹下拥有不同的目录 根目录:/ 1.切换文件夹 cd ~ 进入当前用户的家目录 cd / 进入根目录 cd .. 返回上一层目录 cd - 返回上一...原创 2018-12-15 20:09:37 · 155 阅读 · 0 评论 -
VMware软件虚拟机不能全屏的问题
VMware装上Ubuntu系统后,发现虚拟机不是全屏的,如下:解决办法:①先关闭虚拟件,右键,选择“设置”原创 2018-07-11 10:29:23 · 51442 阅读 · 6 评论