- 博客(5)
- 资源 (1)
- 收藏
- 关注
原创 hive_通过yyyymm格式的变量,获取前12个月以及每月最后一天的日期变量
通过yyyymm格式的变量,获取前12个月以及每月最后一天的日期变量--获得12个月的维表(每月+每月最后一天)drop table temp_dual1;create table temp_dual1 (id string);insert into temp_dual1 values(${month_id}||'01');drop table temp_purchase_RESERVE_${month_id};create table temp_purchase_RESERVE_${month
2020-05-20 18:12:23
3583
原创 sehll删除只读变量
sehll删除只读变量使用>cat << EOF| gdb>attach $$>call unbind_variable("只读变量名")>detach>EOF如果gdb无法使用,请先安装sudo yum install gdb实例操作如下:[bian@hadoop01 ~]$ readonly bian=1[bian@hadoop01 ~]$ echo $bian1[bian@hadoop01 ~]$ bian=2-bash: bi
2020-05-19 21:30:15
299
原创 hadoop日记2.2:hdfs编程实践
Hdfs shell接口 一、 Hdfs编程实践 1. Hadoop提供了关于HDFS在Linux操作系统上进行文件操作的常用Shell命令以及Java API。同时还可以利用Web界面查看和管理Hadoop文件系统 2. Hadoop安装成功后,已经包含HDFS和MapReduce,不需要额外安装。而HBase等其他组件,则需要另外下载安装。 3. 在学习HDFS编程实践前,我们...
2018-09-10 18:40:51
527
原创 hadoop日记2.1:hdfs设计思想和基础概念
Hdfs HDFS设计思想与基础概念 一、 概念: HDFS是分布式文件系统,HDFS有高容错性的特点,并且设计用来部署在低廉的硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集的应用程序。 应用场景是海量数据(视频、网页)的可靠性存储、数据归档(视频监控领域)。 二、 Hdfs设计目标: 1. 将硬件故障当作常态而不是异常 ...
2018-09-07 14:35:33
695
原创 hadoop日记1:hadoop伪分布式安装
Hadoop伪分布式安装 实验环境: 操作系统:ubantu18 Jdk版本:1.8 Hadoop版本:2.7.2 Vmware workstation:14.1.3 新建一个用户 安装hadoop环境 前提:已经安装好jdk,注意修改环境变量路径userdel hadoop //删除原来的用户 groupadd hadoop //新建一个hadoop组usera...
2018-09-07 10:16:55
165
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人