自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(16)
  • 收藏
  • 关注

原创 linux下安装指定版本的git

如果在linux版本的git安装是使用:yum install git,那么是自带的版本是1.7.1,这版本相对旧了。可以卸载(yum remove git)安装新版本的。步骤如下:安装编译所依赖的软件 1:yum install curl-devel expat-devel gettext-devel openssl-devel zlib-devel as...

2020-02-03 20:43:59 4319

原创 数据源之Excel和它的坑

数据源的种类有很多种,比如:1:用户的行为日志文件.2:业务业务数据库数据(关系型数据 和 非关系型数据库: 文档, KV(键值)等).3:excel文档(财务 和 行政的一些报表).我目前所负责的就是excel文档的一个入库,在入库的过程中发现了一些比较坑人的地方,如下:1:科学计数法Excel中如果数据超过12位,则会自动进行数据转换成科学计数法数据;由于Excel的精...

2019-09-01 23:05:25 2001

原创 hive问题: java.net.ConnectException: Connection refused (Connection refused) (state=08S01,code=0)

beeline连接hiveserver2的时候报错如下:错误提示链接拒绝,拒绝的原因大致如下:1:hiveserver2的服务没有启动后台启动命令如下并通过jps检查进程2:MySQL的远程链接没有授权(在MySQL书库的user表中)授权命令如下:grant all privileges on *.* to '用户名'@'%' identified b...

2019-05-05 21:40:31 11610

原创 java.io.FileNotFoundException: E:\niubi.java (系统找不到指定的文件。) 的新坑

在做hadoop文件上传时遇到java.io.FileNotFoundException: E:\niubi.java (系统找不到指定的文件。)代码如下 错误可能性:1.文件的路径不存在或文件的命名不规范(本人存在)                       2:文件的编码格式不正确(百度一致的结果修改为UTF-8)                       3:文件的权限问...

2019-01-14 20:52:22 2029

原创 ping: unknown host www.baidu.com 和 connect: Network is unreachable 的解决

安装新的虚拟机,IP等一切设置好之后,用远程工具也是能链接的 ,但是ping 百度的时候却提示ping: unknown host www.baidu.com,然后再次尝试了ping 一个具体的IP却提示: connect: Network is unreachable。(稍微懂网络的人都是知道的,网址最终是要通过域名解析服务器(配置的DNS)解析成对应的ip).1:ping 百度网址 ...

2019-01-09 21:56:36 5770

原创 hadoop集群的搭建,ubuntu系统

1.先安装对应的ubuntu系统2.根据你个人电脑的实际情况克隆若干台机器3.修改克隆机的主机名    修改 /etc/hostname4.将所有虚拟机的的IP改为静态IP    步骤:1.先用ifconfig查看一下当前虚拟机使用的虚拟网卡(eth0,enp0s25,ens33等)         2.修改  /etc/network/interfaces(内容如下)          ...

2018-12-25 19:08:09 1371

原创 ubuntu软件源的修改

ubuntu是一个基于linux内核分支出来的一个比较流行的系统.ubuntu自带的软件源是国外的,因为网络的问题,不修改自带的软件源,安装软件所花费的时间成本就非常的高,所有可以将软件源改成国内的软件源.国内的软件源:阿里,网易等一线互联网公司,清华大学,浙江大学等一流的学府都有的.阿里源deb http://mirrors.aliyun.com/ubuntu/ bionic main ...

2018-12-24 18:48:38 1810

原创 在Linux下运行scp提示:-bash: scp: command not found

在Linux下通过scp来拷贝文件是经常的事情,如果你安装的版本没有安装scp的话.那么就需要自己安装一下.通过命令:yum -y install openssh-clients .需要注意的是如果你的目标主机没有也没有安装scp的话也是报这个错误的.所以用which scp在本地主机和目标主机查看一下,缺少的哪边缺少就哪边安装....

2018-12-15 21:15:29 2622

原创 redis的下载和安装

1:Redis的下载路径https://redis.io/download2:先将下载好的Redis上传到你的虚虚拟机3:解压Redis(tar -zxvf  下载的.tar.gz安装包 -C 解压到的路径)4:解压完之后进入到解压路径用make命令编译Redis    编译过程中可能遇见的错误:    1: cc: command not found 说明缺少gcc,通过yu...

2018-12-13 19:57:00 1347

原创 zookeeper集群搭建及shell一键启动一键关闭

zookeeper是一个高度可靠的分布式协调服务,其他的一些集群的高可用(HA)都是通过zookeeper集群来实现的。搭建zookeeper集群的前提是先安装jdk(zookeeper集群内每一台机器都要安装),因为zookeeper是用java编写的。jdk是否安装成功验证如下:将下载好的zookeeper解压到安装目录: 修改zookeeper的配置文件:1:修改...

2018-11-13 11:27:22 2489

原创 window下执行Hadoop或spark报错:Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

1:错误原因       机器本地没有配置Hadoop的环境2:处理思路      在本地配置Hadoop环境(和java的环境配置是一样的)      注意:所有的环境变量都配置成系统变量,以免切换用户而带来不必要的文图3:处理过程     自己去下载源码编译(Hadoop没有提供window版本。初学者不建议,耗时,脑壳痛)      网上找一个编译好的      ...

2018-11-07 18:02:42 1795 1

原创 dubbo报错:com.alibaba.dubbo.remoting.TimeoutException

最近在自学dubbo,经常遇见com.alibaba.dubbo.remoting.TimeoutException这样一个错误。出现这杨错误有一下几种可能。1:dubbo的配置错误。(ip地址,端口号)2:zookeeper服务没有开启。3:数据困没有开启。4:实体类没有序列化。...

2018-05-29 14:13:24 2587

原创 Linux下安装安装redis

1:安装redis编译环境    yum install gcc-c++2:解压redis    tar -xvf  redis-3.0.0 -C /usr/local/redis3:编译redis    切换到解压的路径下执行编译    [root@yarui redis-3.0.0]# make 4:安装redis并指定路径    [root@yarui redis-3.0.0]# make ...

2018-04-10 14:25:01 1263

原创 Linux下安装tomcat

1:解压源文件的tomcattar -zxvf  apache-tomcat-7.0.572:将tomcat移动你要安装的路径下[root@yarui soft]# mv apache-tomcat-7.0.57 /usr/local/src/java/tomcat3:切换到tomcat安装的bin目录下,启动tomcat[root@yarui bin]# sh  startup.shUsing ...

2018-04-10 01:12:35 1286

原创 Linux配置JDK以及错误处理

1:在/etc/profile下配置环境变量## java_home  export JAVA_HOME=/usr/local/src/java/jdk1.7.0_71export PATH=$JAVA_HOME/bin:$PATH"/etc/profile" 86L, 1932C 已写入[root@yarui ~]# source /etc/profile2:初次测试安装是否成功[root@ya...

2018-04-10 00:38:05 2059

原创 oracle的安装

数据库后缀的解释i: internet 网络技术。(8i 和 9i)g: grid网格技术。(10g 和 11g)c: cloud云计算。(目前的12c)数据的下载地址http://www.oracle.com/technetwork/database/enterprise-edition/downloads/index.html安装步骤一将下载的两个文件解

2017-07-21 11:59:31 1352

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除