- 博客(12)
- 收藏
- 关注
RSS订阅原创 【dataphin】关于时间转换的一些操作
一、当得到一条表示日期用的字符串，需要转换为指定格式的字符串时：to_char(to_date(chargetime, 'yyyy-mm-dd hh:mi:ss'),'yyyymmdd')1、chargetime：待转换的字符串；使用to_date(day，format)函数，先将其转换为日期格式，第一个参数day为待转换字符串，第二个参数format为该字符串的格式。转换完成的输出默认...
2020-03-09 10:21:01
1374
1
原创 【HBase】基础入门
HBase修改配置hbase-env.shexport JAVA_HOME=/opt/modules/jdk1.7.0_79export HBASE_MANAGES_ZK=false这里我关闭HBase自带的zk，使用自己配置好的zookeeperhbase-site.xml <property> <name>hbase.rootdir<...
2018-08-27 19:56:20
261
原创 【JAVA】JDBC连接数据库
Java数据库连接技术(Java DataBase Connectivity),能实现Java程序对各种数据库的访问JDBC访问数据库步骤Class.forName()加载驱动. DriverManager获取Connection连接. 创建Statement执行SQL语句. 返回ResultSet查询结果. 释放资源.JDBC编写（myeclipse）将连接mysql的...
2018-08-15 23:24:08
192
原创 【Hive】用Sqoop实现数据HDFS到mysql到Hive
大数据协作框架“大数据协作框架”其实是一个统称，主要是以下四个框架数据转换工具 Sqoop 文件收集库框架 Flume 任务调度框架 Oozie 大数据WEB工具Hue Sqoop作用将关系数据库中的某张表数据抽取到Hadoop的HDFS文件系统中，底层运行的还是MapReduce。利用MapReduce加快数据传输速度。批处理方式进行数据传输。...
2018-08-14 00:42:33
413
原创 【Maven】Eclipse项目红色感叹号，JAR包无报错
疑惑了很久，我那个上说什么jar包导错，配置文件错，看了一下都是对的，但是就是红色感叹号，代码无法导入包 解决方案：查看problems（ window--》show view--》problems），找到报错显示目录（我的是/home/hadoop/.m2/repository/）进入maven配置时设置的.m2目录，找到你导入失败的那个目录，发现是之前配置时多导入了几个版本，简...
2018-08-10 14:51:20
941
1
原创 【JAVA】知识点总结
基础JDK和JRE的区别？ JDK包含JRE，jdk是java开发人员进行开发时使用的，包括java开发环境和java运行环境JRE是java运行环境，如果只是使用java程序而不进行开发，只需要JRE就够。 goto？ goto是java的保留字但不是关键字 覆盖overriding和重载overloading的区别？ 覆盖（overriding）...
2018-08-05 22:16:06
105
原创 【JAVA】static关键字、父类子类构造方法的执行顺序解析
很多初学者可能搞不清static方法的用法，这里我说下自己的理解：静态代码块——>父类构造方法——>子类构造方法构造方法与new对象同时存在时，先执行new对象的构造方法。（此时注意不要产生循环嵌套，造成内存溢出）
2018-08-05 16:24:33
388
原创 【Hadoop】伪分布式配置
基本配置参考这一篇本文中所用到的 主机名：daisuke 用户名：hadoophadoop-env.shjava环境export JAVA_HOME=/opt/modules/jdk1.7.0_79core-site.xml <!--HDFS集群访问入口地址--> <property> <name...
2018-08-04 17:23:50
483
原创 【Hadoop】hadoop2.x入门与基本环境配置
Hadoop版本：2.5.0-cdh5.3.6JDK版本：7u80-linux-i586 可以从下面获取JDK和Hadoop压缩包链接：https://pan.baidu.com/s/1KQwF3aZL9ZletysyZHLMzA 密码：okmj理论知识介绍大数据的4v特征Volume 数据体量巨大 Varity 数据类型多样 Veracityv 密度低价值高 V...
2018-07-24 23:52:05
366
原创 【Linux】常用基本指令（二）
shell脚本学习文件类型为.sh，可以用vi编辑器打开，在开头加入注释#!/bin/bash告诉系统该shell脚本使用bash解释变量 变量名定义时要注意：变量名和等号之间不可以有空格，这可能和你熟悉的所有编程语言都不一样。 变量命名只能使用英文字母、数字和下划线，首个字符不能以数字开头 中间不能有空格，可以使用下划线_代替 不能使用标点符号 不能使用bash中的关键字...
2018-07-20 21:36:04
2873
原创 【Linux】常用基本指令（一）
Linux系统目录结构以下摘自菜鸟教程以下是对这些目录的解释： /bin： bin是Binary的缩写, 这个目录存放着最经常使用的命令。 /boot： 这里存放的是启动Linux时使用的一些核心文件，包括一些连接文件以及镜像文件。 /dev ： dev是Device(设备)的缩写, 该目录下存放的是Linux的外部设备，在Linux中访问设备的方式...
2018-07-17 19:51:43
175
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人