自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

留歌__36的博客

技术改变生活

原创 DataFrame 对其列的各种转化处理

前置 Oracle中INSTR的用法: INSTR(源字符串, 要查找的字符串, 从第几个字符开始, 要找到第几个匹配的序号) 例如:INSTR('CORPORATE FLOOR','OR', 3, 2)中, 源字符串为'CORPORATE F...

2019-03-21 11:01:42

阅读数 220

评论数 0

原创 CICD

写在前面 参照文章:https://blog.csdn.net/liuge36/article/details/83055512 之前写了比较完整的相关,但是发现,工作中只是需要用到以下简单的点就可以了 总结简单的自动化部署的项目的方法: 前置: gitlab:做代码托管 服务器A 公司服...

2019-03-21 10:47:12

阅读数 1096

评论数 0

原创 Git通

写在前面 本文主要讲git的日常操作,是我自己的学习笔记,我觉得在日常的工作中,熟练使用这些,基本就能够满足了,如有任何问题,请留言指教呢 GitHub VS SVN SVN版本集中管理,所有代码都在中央服务器上 Git去中心化,所有本地主机均有一个独立的版本库 01 安装Git客户端 ...

2019-03-12 15:36:19

阅读数 106

评论数 5

原创 Hue问题记录

gotten and still exists when having issued: sudo service hive-server2 restart sudo -u hdfs hadoop dfsadmin -safemode leave service hive-metastore ...

2019-03-12 13:17:45

阅读数 219

评论数 0

原创 多文件的wc程序【java版】

package sanjin; import org.apache.spark.api.java.JavaPairRDD; import org.apache.spark.api.java.JavaSparkContext; import org.apache.spark.sql.SparkSe...

2019-03-08 09:40:48

阅读数 124

评论数 0

原创 Caused by: java.lang.RuntimeException: java.lang.Integer is not a valid external type for schema of

Caused by: java.lang.RuntimeException: java.lang.Integer is not a valid external type for schema of string

2019-03-07 19:32:49

阅读数 713

评论数 0

原创 csv数据文件清洗【DataFrame】

package march.sql import org.apache.spark.sql.SparkSession /** * Description: TODO * * @Author: 留歌36 * @Date: 2019/3/6 8:57 */...

2019-03-07 08:58:44

阅读数 360

评论数 0

原创 HiveJdbcClient的操作 【Hive】

import java.sql.*; /** * Description: HiveJdbcClient的操作 * 修改默认的hiveserver2的启动端口: * $HIVE_HOME/bin/hiveserver2 --hiveconf hive.server2.thri...

2019-03-05 19:25:49

阅读数 111

评论数 0

原创 External DataSource 之parquet【Spark SQL】

package february.sql import org.apache.spark.sql.SparkSession /** * * ====== Spark SQL默认处理的format是parquet ==== * Desc...

2019-03-04 18:44:44

阅读数 102

评论数 0

原创 hostnamectl set-hostname liuge

hostnamectl set-hostname liuge

2019-03-01 23:03:00

阅读数 438

评论数 0

提示
确定要删除当前文章?
取消 删除