- 博客(6)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 hive 和spark sql 中日期相关使用技巧(一)
hive 和spark sql 中日期相关使用技巧 常用日期／时间相关字段、类型、及示例：类型包括：BIGINT，TIMESTAMP和STRING 下面是这几种类型之间相互转换的方法：BIGINT转TIMESTAMP：from_unixtime(time/1000) TIMESTAMP转BIGINT：unix_timestamp(time)*1000 BIGINT转STRING(y...
2018-07-30 13:11:17
3040
转载 net.sf.json的jar包：JSONArray问题解决
今天在使用经纬度通过al的接口获取详细地址时使用到了 net.sf.json的jar包：JSONArray 用maven添加net.sf.json的jar包的时候，代码如下： <dependency> <groupId>net.sf.json-lib</groupId> <artifactId>jso
2018-07-30 12:37:00
8148
转载 java设计模式之单例模式
常见的几种单例模式 单例模式：是一种常用的软件设计模式，在它的核心结构中值包含一个被称为单例的特殊类。一个类只有一个实例，即一个类只有一个对象实例。 单例模式可以分为懒汉式和饿汉式： 懒汉式单例模式：在类加载时不初始化。 饿汉式单例模式：在类加载时就完成了初始化，所以类加载比较慢，但获取对象的速度快。 第一种（懒汉，线程不安全）:public...
2018-07-27 13:59:33
152
原创 Hive动态分区需要注意的参数
使用Hive动态分区需要注意设定以下参数：1.是否开启动态分区功能，默认false关闭。 默认值：falsehive.exec.dynamic.partition =false使用动态分区时候，该参数必须设置成true;hive.exec.dynamic.partition =true2.动态分区的模式: 默认值：stricthive.exec.dynamic.part...
2018-07-05 16:56:17
1796
原创 hive表的建表语句批量获取
有时hive中的一个数据库中有大量的表，对表的建表语句备份就显得重要和麻烦了，但是是使用hive的命令和shell脚本会很容易实现1.导出所有表的名称(可以指定数据库名称)hive -e "use dbName;show tables;" > tablesName.txt2.使用hive内置语法导出hive表的建表语句，这里使用的是一个shell#!/bin/bash ...
2018-07-05 15:44:47
4347
原创 Hive计算引擎的切换方法
1、配置mapreduce计算引擎set hive.execution.engine=mr;2、配置spark计算引擎set hive.execution.engine=spark;3、配置tez 计算引擎set hive.execution.engine=tez;
2018-07-05 15:28:16
15579
x-pack-sql-jdbc.rar
2020-09-01
scala-2.12.11.tgz
2020-06-08
docker-compose-Linux-x86_64
2018-11-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人