weixin_49180684的博客

（2）找到之前安装MySQL的路径，删除MySQL文件夹。比如：我的安装路径在C盘 ，C盘–> Program Files–> MySQL --> 删掉MySQL文件夹（因为文件夹中还有残留文件）（3）打开C盘 --> 找到programDate（这个是隐藏文件）–> MySQL --> 删掉MySQL文件夹（因为这个文件夹中还有数据残留）在进行安装之前，把之前MySQL的残留文件删的干干净净的，在安装MySQL的时候才能顺利。小提示： 经过这四个步骤，可以把你的MySQL卸载的干干净净。

hive中用not in查询，返回结果为空

安装 vc2013_x64_12.0.30501.exe 文件（自行百度下载）再次运行oracle客户端，就不会报错了。12版数据库在安装完之后，会报错如下图。

hive解决空值无法判断问题，空值为nul

解决方法

高级sql用法

利用函数嵌套，可以实现这个要求让regexp_replace 函数 和 substr 函数嵌套一下，就可以了select regexp_replace('3123091490A011',substr('3123091490A011',-4,4),'');

我一开始运行jar包，出现一下问题，仔细一看是节点没有启动，就去启动hbase看看但是，进入hbase后，输入命令会有如下报错，到网上搜了一下，说是hadoop进入了安全模式，所导致的，把关了就行，一般都是数据块损坏导致进入了安全模式，这时候，1、可以选择强制退出安全模式，2、或者修改配置文件hdfs-site.xml，降低进入安全模式的阈值默认值是0.999，将值该小就行<name>dfs.namenode.safemode.threshold-pct</name>

按照下面代码运行即可 sc.textFile("hdfs://192.168.119.180:9820/app/data/exam2/china_provincedata.csv") .zipWithIndex().filter(_._2>=1) //删除表头第一行

1、报错如下面的，是因为python下面有一个test模块，出现了包名冲突，，改个名字就行了.....ModuleNotFoundError: No module named 'test.Test'2、解决办法将test包名改掉，就能正常运行

1、第一种easy_install pip# 如果上面命令无效 ,可以使用下面的命令easy_install -i https://mirrors.aliyun.com/pypi/simple pip2、第二种环境变量，以下变量，有的全部添加D:\developtools\python\Anaconda3;D:\developtools\python\Anaconda3\Library\mingw-w64\bin;D:\developtools\python\Anaconda3\Libra

1、2、3、选择对应的jdk位置，然后全部确认就可以了

文章目录Flink Source不同的来源1、Source几个不同的来源2、kafka作为数据源，flink读取3、myslq数据库作为数据源，且自定义SourceFlink Source不同的来源1、Source几个不同的来源//创建环境val env = StreamExecutionEnvironment.getExecutionEnvironment//基本的数据源//1、端口数据源env.socketTextStream(“master”，6666) //连接虚拟机等端口，mas

Flink窗口0、准备数据train_1,1547718199,35.8train_2,1547718200,35.9train_2,1547718202,36.1train_3,1547718203,36.2train_6,1547718205,36.5train_7,1547718206,35.8train_1,1547718207,35.9train_2,1547718208,36.7train_1,1547718210,38.1train_2,1547718213,35.9

报错信息利用sqoop将数据从myslq导入hive时候，可能会报如下错误解决办法上诉错误是因为在 sqoop的 lib 目录下，缺少一个 hive的 lib 的目录下的一个 jar 包需要将hive-common-2.3.3.jar 包，复制到sqoop的lib目录下 cp /opt/software/hive/hive/lib/hive-common-3.1.2.jar /opt/software/sqoop/sqoop/lib/...

提取元素val v:T = arr.head 提取第一个元素val v:Option[T] = arr.headOption 提取第一个元素，返回值是一个Option类型，与上面相比，这个即使是空元素也不会报错，返回一个Noneval v:T = arr.last 提取最后一个元素val v:Option[T] = arr.lastOptin 提取最后一个元素，返回值类型是Option类型，空元素也不会报错val v:T = arr(index:Int) 根据下标

1、包声明1、包声明 面对不同场景，我们对包的需求也不同 首先 package sc.kg.scalaoop.test 像上面的这种是一般这一个文件就只有一个类，一个模块，作用域就是这个整个文件 package sc.kg.scalaoop.test01{ 作用域 } package sc.kg.scalaoop.test02{ 作用域 } 像上面这种就是一个文件，有多个模块，不止两个，每个包的作用域就在{}里面 package object packobj{ 作用域 }

目录具体流程1、pom.xml配置文件2、实体类要求3、mapper接口中的方法增删改查4、与mapper接口对应的xml文件配置5、连接mysql配置文件6、mybatis配置文件7、测试类具体流程通过mybatis对mysql数据库进行操作创建的时候，包要一层一层1、创建一个mevan工程，在pom.xml文件中导入两个依赖的jar包2、在main下创建一个resource类型文件，且和java下面 的每一层目录都要相对应，，注意层次感3、首先要创建一个实体类，这实体类的属性要和表格中的字

用sqoop把数据从mysql导入进hive中首先你得在mysql中有个表，自己找一个有数据的表格sqoop代码sqoop impot \--connect jdbc:mysql://wangtengfei:3306/test \--username root \--password 12345678 \--table studentinfo \-m 1 \--hive-import \--hive-table test.user_infor \--create-hive-table

在shell中操作job命令#查看jobsqoop job --list#删除jobsqoop job --delete jobname#查看job的定义sqoop job --show jobname#启动jobsqoop job --exec jobname其中的jobname是你自己创建的job的名称，也可以通过查看job命令知道当前有哪些job，然后开启创建jobsqoop job \--create job_m2hv_par \-- import \--co