自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

一杯派蒙的博客

持续集成交付和大数据开发干货

  • 博客(12)
  • 收藏
  • 关注

原创 mysql5.7 centos 7.*:libaio.so.1()(64bit) is needed by mysql-community-server-5.7.24-1.el7.x86_64

mysql5.7 centos 7.* 安装报错,解决:yum install libaio[root@izbp111tnz2hnwzij0olswz mysql]# rpm -ivh mysql-community-server-mysql-community-server-5.7.24-1.el7.x86_64.rpm mysql-community-server-m...

2018-11-30 16:32:07 2992 1

原创 mysql 安装 内容冲突:rpm -e mariadb-libs-1:5.5.60-1.el7_5.x86_64 --nodeps

centos 7.* 安装mysql 报错解决:rpm -e mariadb-libs-1:5.5.60-1.el7_5.x86_64 --nodepsfile /usr/share/mysql/dutch/errmsg.sys from install of mysql-community-common-5.7.24-1.el7.x86_64 conflicts with file fr...

2018-11-30 16:29:08 6044 1

原创 mysql 8.*** windows 安装

mysql 8.*** windows 安装windows 环境下 MySQL 8.0.13 免安装版配置目录下载压缩包解压zip文件,创建 my.ini 文件配置环境变量以管理员权限运行 命令提示符设置密码重启服务,测试参考目录下载压缩包地址 https://dev.mysql.com/downloads/mysql/解压zip文件,创建 my.ini 文件解压后目...

2018-11-30 15:33:44 115

原创 Caused by: java.lang.RuntimeException: java.lang.String is not a valid external type for schema of b

数据类型不匹配报错GETCaused by: java.lang.RuntimeException: java.lang.String is not a valid external type for schema of bigint at com.sydney.dream.dianshang.create_data.MockData.main(MockData.scala)Caused b...

2018-11-29 16:07:55 3359 3

原创 shell 脚本更新azkaban job

shell 脚本更新azkaban job#!/bin/bashset -ezip_name=clear_nginx_logs.zipproject_name=clear_nginx_logscd `dirname $0`cpath=`pwd`cd $cpathrm -rf ${zip_name}zip ./${zip_name} ./poi/gd/*.job ./aoi/gd...

2018-11-28 17:39:24 438

原创 Cause: Could not load a dependent class com/jcraft/jsch/Logger

Cause: Could not load a dependent class com/jcraft/jsch/Logger原因ant scp 依赖jsch-xxx.jar解决: 到maven 中央库中,找一个jar 放到ant 的安装包lib 目录下。http://repo.maven.apache.org/maven2/com/jcraft/jsch/找一个比较新的jar 即可。[d...

2018-11-28 15:44:00 1138

原创 azkaban 参数传值坑.

如图,azkaban 中 “” 的内容会被过滤掉。

2018-11-23 15:44:24 2100 1

原创 打卡,只是打卡,又是打卡,还是打卡,发卡卡

GET zebra_geo_poi/poi_data/_search{ "query": { "bool": { "must": [ { "match": { "source": "dzdp" } }, { "bool":

2018-11-21 18:51:01 245

原创 Spark 从RDD 到DataFrme 的两种方法, Get 打卡

方法1, 利用case class ,然后利用spark.implicits._ 调用toDF 构造 DataFrame,详见下面。package com.sydney.dream.dianshang.create_dataimport java.util.Randomimport org.apache.spark.sql.SparkSessionimport scala.colle...

2018-11-20 20:17:29 204

原创 scala break 和continue 的实现

scala break 和continue 的实现package com.sydney.dream.learnclassimport scala.util.control.Breaks._object Main { def main(args: Array[String]): Unit = { // break 的实现 breakable { ...

2018-11-19 17:07:50 174

原创 ## scala breakable 的用法

scala breakable 的用法package com.sydney.dream.learnclassimport scala.util.control.Breaks._object Main { def main(args: Array[String]): Unit = { breakable { for(i <- 0 unt...

2018-11-19 17:01:05 438

原创 elasticsearch 烦人的搜索打卡

总的来说,query 里面套着query 就Ok 了。GET zebra_geo_poi/poi_data/_search{ "query": { "bool": { "must": [ { "match": { "source": "dzdp" } }, {

2018-11-19 16:44:40 158

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除