- 博客(10)
- 收藏
- 关注
原创 Caused by: java.lang.ClassNotFoundException: org.apache.spark.sql.SparkSession$
如下配置显示报错://少个- <!- https://mvnrepository.com/artifact/org.apache.spark/spark-sql -->org.apache.sparkspark-sql_2.122.4.5provided换成: org.apache.spark spark-sql_2.11 2.4.5
2021-10-13 19:49:29 1948
原创 win下spark运行savaAsTestFile出现java.io.IOException: (null) entry in command string: null chmod 0644
解决方法:下载hadoop.dll文件,拷贝到c:\windows\system32目录中即可hadoop.dll可以在github上下载:https://github.com/4ttty/winutils各个版本的hadoop.dll基本上通用的。
2021-10-08 19:25:42 174
原创 万字夜里爆肝,熬夜倾情奉献 Hive最最基础应用
Hive流程文章目录Hive流程Hive与传统数据库对比Hadoop简介1.为什么使用Hive2.Hive是什么3.Hive具体内容4.Hive的存储格式5.Hive的重要特性6.Hive操作客户端7.Hive的Metastorejob执行流程8.Hive基础建表语法和加载数据Hive建表建表1:全部使用默认建表方式建表2:指定location (这种方式也比较常用)建表3:指定存储格式建表4:create table xxxx as select_statement(SQL语句) (这种方式比较常用)建
2021-09-12 21:15:34 1714
原创 Hive搭建显示Automatic failover is enabled for NameNode at node1/192.168. Refusing to manually
Automatic failover is enabled for NameNode at node1/192.168.88.98:8020Refusing to manually manage HA state, since it may causea split-brain scenario or other incorrect state.If you are very sure you know what you are doing, please specify the --forcema
2021-09-03 20:13:53 1255
原创 linux篇之---克隆后仍获取旧ip连接
第一步:删除 下列目录下的本地连接中的HWADDR和UUIDcd /etc/sysconfig/network-scripts/ 示例:第二步:删除 linux物理地址的绑定文件该文件会在操作系统重启并生成物理地址以后将物理地址绑定到IP上rm -rf /etc/udev/rules.d/70-persistent-ipoib.rules 第三步:重启虚拟机shutdown -r now...
2021-08-31 20:32:30 143
原创 MySQL (2)建表约束
1.-主键约束 它是唯一确定一张表中的一条记录,也就是我们通过给某个字段添加约束,就可以使得改字段不重复且不为空 每个字段后方添加 create table user( id int primary key, name varchar(20) )engine=innodb default charset=utf8; 当我们两次插入 primarykey的id时: insert into u...
2021-08-11 21:18:55 173 1
原创 MySQL(1)使用基础
MySQL学习笔记-- 关系型数据库一、如何使用终端操作数据库?1. 如何登录数据库服务器你mysql -uroot -p1234562. 如何查询数据库服务器中所有数据库?show databases;3. 如何选中某一个数据库进行操作mysql> select * from admin;ERROR 1046 (3D000): No database selecteduse hello; 切换数据库4. SQL 语句中的查询sele..
2021-08-09 20:42:12 164 1
原创 Linux---之CentOS7安装及成功连接xshell
linux入门篇之安装CentOS 7我们在学习大数据之类的技术时,会用到linux,而一款linux系统的安装过程则,我接着为您介绍,如下。前戏在更多时候,选择linux系统是很大的问题,但又不是问题。因为问题出现在您看到我这篇文章之前,可能,也就解决了安装大戏1.准备镜像首先,准备您的centos 7镜像,例如,下图所示的后缀iso镜像文件2.准备装载虚拟机系统的VMware我这里是VMware版本16.1,注意,会提供简易安装,下文会说3.开始了,镜像导入一般来说,新
2021-07-31 20:35:48 985 2
转载 Xshell链接速度慢,且遇上systemctl命令无效时
首先,我是遇到了xshell连接到虚拟机虚度慢到了无法忍受的地步。接下来,使用了https://blog.csdn.net/qq_41847721/article/details/93482505大佬的方法进行了如下操作vi /etc/ssh/sshd_config然后找到#UseDNS no改成如下UseDNS yes如图 所示然后再执行systemctl restart sshd出现了如图最后我找到了另一位的解决了问题,下列命令service sshd restart转载自htt
2021-07-11 14:58:33 429
原创 入门系列-String中常用的方法 buffer、builder区别
* 字符串比较当我们想要比较两个字符串是否相同时,要特别注意,我们实际上是想比较字符串的内容是否相同。必须使用equals()方法而不能用==。public class Main { public static void main(String[] args) { String s1 = “hello”; String s2 = “hello”; System.out.println(s1 == s2); System.out.println
2021-06-28 19:23:54 1642
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人