- 博客(7)
- 资源 (1)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 spark在IDEA的本地无法使用saveAsTextFile存储文件
项目场景：结果中没有正确的值,却报错问题描述：而且还会报Java空指针等错误 原因分析：缺少winutils.exe文件,参考了:Scala项目中winutils.exe的作用解决方案：参考了:Hadoop或Spark运行缺少winutils.exe文件...
2020-10-20 23:57:28
1297
原创 kettle的简单清洗
记一次kettle的简单清洗目目的和Hive教程_(2019版)_一样的,文章目录前言一、pandas是什么？二、使用步骤1.转换的步骤2.文件输入3.过滤记录4.将多列合并成一行(concat)5.使用Java脚本总结前言表结构:目的:1.里面有没有空值,有空值需要去除2.将视频类别列需要将" & “变成”&"3.将相关视频ID用&连接放在一个列中提示：以下是本篇文章正文内容，下面案例可供参考一、pandas是什么？示例：pandas 是基于Nu
2020-10-18 20:19:36
2687
原创 Mysql事务以
第四节-Mysql事务以及锁原理讲解主参考2020年最新阿里数据库MYSQL面试题全集|周瑜（面试看这个就够了！）副参考MySQL技术内幕 InnoDB存储引擎 (第2版)提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录第四节-Mysql事务以及锁原理讲解主参考副参考前言一、事务是什么？定义二、四种特性(ACID)1.原子性(A):2.一致性('C):3.隔离性(I):4.持久性(D):三、事务的使用开启,提交事务中止事务,使用rollback查看自动提交()隐式提
2020-10-16 10:33:47
639
原创 dbeaver的Connection reset by peer: socket write error报错
项目场景：hive2dbeaver问题描述：使用dbeaver,长时间没有操作,或者电脑关盖后,dbeaver与虚拟机断开连接,后再连接虚拟机的hive仓库报错org.jkiss.dbeaver.model.sql.DBSQLException: SQL 错误 [08S01]: org.apache.thrift.transport.TTransportException: java.net.SocketException: Connection reset by peer: socket w
2020-10-12 10:26:54
5449
原创 dbeaver的连接超时(Connection timed out: connect)
项目场景：hiveserver2启动了,虚拟机 里能启动beeline,并且能连接hive2,但是就是连接不了win上的dbeaver问题描述：Could not open client transport with JDBC Uri: jdbc:hive2://192.168.2.104:10001/gmall;auth=noSasl: java.net.ConnectException: Connection timed out: connectjava.net.ConnectExcep
2020-10-11 22:18:16
18116
2
原创 kettle入门系列文章(七-查询)
kettle入门系列文章(七)自己学习kettle的笔记过程及注意过程文章目录kettle入门系列文章(七)一、查询是什么？二、使用控件1.[HTTP client](https://www.bilibili.com/video/BV1jE411B7J8?p=43)2.数据库查询3.数据库查询4.流查询总结一、查询是什么？查询是用来查询数据源里的数据并合并到主数据流中。二、使用控件1.HTTP clientHTTP client是使用GET的方式提交请求，获取返回的页面内容。在自定
2020-10-06 18:30:42
405
原创 kettle错误“Couldn‘t get field info from [select * from t2]“
Couldn't get field info from [select * from t2]You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'OPTION SQL_SELECT_LIMIT=DEFAULT' at line 1今天在输出表中,获取字段出现上面的错误,查原因,才
2020-10-03 05:20:39
4804
虚拟机同步到百度网盘
2022-02-12
TA创建的收藏夹 TA关注的收藏夹
TA关注的人