wget: unable to resolve host address的解决方法

wget:无法解析主机地址。这就能看出是DNS解析的问题。 解决办法: (1)登入root (2)进入/etc/resolv.conf (3)修改内容为下 nameserver 8.8.8.8 #google域名服务器 nameserver 8.8.4.4 #google域名服务器 ...

2019-06-18 09:44:04

阅读数 101

评论数 0

ORACLE学习汇总

1.查看所有用户 select * from all_users; select * from dba_users; select * from user_users; 2.查看用户或角色系统权限 select * from user_sys_privs;(当前用户的权限) selec...

2019-06-12 10:26:57

阅读数 8

评论数 0

HIVE优化

一,join优化 join查找操作的基本原则:应该将条目少的表/子查询放在join操作符的左边。原因是在join操作的reduce阶段,位于jion操作符左边表的内容会被加载进内存,将条目少的表放在左边,可以有效减少发生内存溢出错误的几率。 join查找操作中如果存在多个join,...

2019-06-12 10:26:29

阅读数 12

评论数 0

正则表达式的学习分享

一、 正则表达式 正则表达式(Regular Expression)是一种文本模式,包括普通字符(例如,a 到 z 之间的字母)和特殊字符(称为"元字符")。 正则表达式使用单个字符串来描述、匹配一系列匹配某个句法规则的字符串。 正则表达式是烦琐的,但它是强大的,学会之后的应...

2019-06-12 10:23:32

阅读数 42

评论数 0

排序比较row_number(顺序排序),rank(跳跃排序),dense_rank(连续排序)

(1).row_number的用途非常广泛,排序最好用它,它会为查询出来的每一行记录生成一个序号,依次排序且不会重复,注意使用row_number函数时必须要用over子句选择对某一列进行排序才能生成序号。 (2).rank函数用于返回结果集的分区内每行的排名,行的排名是相关行之前的排名数加一。...

2019-05-07 13:51:17

阅读数 41

评论数 0

mysql怎么查看表占用空间大小

1、进去指定schema 数据库(存放了其他的数据库的信息) use information_schema 2、查询所有数据的大小 select concat(round(sum(DATA_LENGTH/1024/1024),2),'MB') as data from TABLES 3、查看指定数...

2019-04-22 08:43:50

阅读数 22

评论数 0

LINUX学习笔记

1.命令连接符和命令替换符 (1)命令1:  ";"   使用方式:命令1 ;命令2 , 用;的各命令按顺序依次执行,命令之间没有逻辑联系 (2)命令2:  "&&"  ...

2019-02-26 14:15:12

阅读数 26

评论数 0

HDFS 常用命令

第一部分:hdfs文件系统命令 第一类:文件路径增删改查系列: hdfs dfs -mkdir dir  创建文件夹 hdfs dfs -rmr dir  删除文件夹dir hdfs dfs -ls  查看目录文件信息 hdfs dfs -lsr  递归查看文件目录信息 hdfs dfs -st...

2019-02-25 19:32:00

阅读数 101

评论数 0

LINUX Shell常用命令

Linux Shell常用shell命令 一、文件、目录操作命令 1、ls命令 功能:显示文件和目录的信息 ls 以默认方式显示当前目录文件列表 ls -a 显示所有文件包括隐藏文件 ls -l 显示文件属性,包括大小,日期,符号连接,是否可读写及是否可执行 ls -lh 显示文件的...

2019-02-24 00:40:48

阅读数 322

评论数 0

HIVE优化的四种方法

1、Hive整体架构优化 2、在MR阶段进行优化 3、Hive在SQL中优化 4、Hive框架平台优化 1.hive整体架构优化: 现在hive的整体框架如下,计算引擎不仅仅支持Map/Reduce,并且还支持Tez、Spark等。根据不同的计算引擎又可以使用不同的资源调度和存储系统。 ...

2018-10-19 15:31:46

阅读数 261

评论数 0

oracle运维相关语句

--空间不足解决办法: --(1) select t.table_name,max(num_rows * avg_row_len/1024/1024) from user_tables  t   group by t.table_name  order by max(num_rows * avg_...

2018-10-15 16:26:52

阅读数 82

评论数 0

Oracle日期函数

to char 是把日期或数字转换为字符串  to date 是把字符串转换为数据库中得日期类型   转换函数   TO_CHAR  使用TO_CHAR函数处理数字  TO_CHAR(number, '格式')  TO_CHAR(salary,’$99,999.99’);  使用TO_CHAR...

2018-10-12 11:01:21

阅读数 34

评论数 0

ETL相关语句

1.删除分区: (1)不带子分区的表: alter table 表名 drop partition  PART${v_month} (2)带子分区的表: 注意数据源,SQL类型的选择 alter table DWA_V_D_CUS_AL_USER_INFO  drop subpartit...

2018-10-09 17:28:35

阅读数 151

评论数 0

HIVE日期格式转换大全

1.日期函数UNIX时间戳转日期函数: from_unixtime语法:from_unixtime(bigint unixtime[, stringformat])  返回值: string 说明: 转化UNIX时间戳(从1970-01-0100:00:00 UTC到指定时间的秒数)到当前时区的时...

2018-09-29 15:13:02

阅读数 439

评论数 0

使用映射从Oracle往hive导数,数据条数增加问题--字段包含换行和换行分隔符导致条数增加

首先使用REPLACE函数替换掉Oracle字段里面的换行和回车分隔符: replace用法:replace('将要更改的字符串','被替换掉的字符串','替换字符串') oracle 中chr()函数 CHR() --将ASCII码转换为字符 语法 CHR(number_code) 示例 s...

2018-09-25 09:46:12

阅读数 161

评论数 0

Hadoop基础 ----------hadoop fs 命令

1,hadoop fs –fs [local | <file system URI>]:声明hadoop使用的文件系统,如果不声明的话,使用当前配置文件配置的,按如下顺序查找:hadoop jar里的hadoop-default.xml-&amp...

2018-08-28 22:15:18

阅读数 58

评论数 0

hive分层级取数(将多行记录合并为一条):concat_ws ,collect_set

分层级取数:投诉工单>通信质量>无法正常使用数据业务>无法上网/掉线>固网>宽带故障sselect  a.row_id,concat_ws('>', collect_...

2018-07-13 00:05:48

阅读数 5879

评论数 1

ORACLE如何清理数据可以使表空间立即释放?

1、查询表所占空间 Select Segment_Name,Sum(bytes)/1024/1024 From User_Extents   Group By Segment_Name2、删除指定分区数据(truncate 删除直接释放空间,数据不会进入回收站) alter table table...

2018-07-12 23:42:00

阅读数 8153

评论数 1

hive中多个字段拼接注意躲避空值坑

select concat(leix01,leix02,leix03) from dim_ivr_dictionary where ivr_table like 'zj%' and bm='40102';select concat(nvl(leix01,''),nvl(leix02,''),nvl...

2018-05-23 22:50:04

阅读数 3234

评论数 0

如何解决使用hive将多字符作为分隔符的数据入库的问题

hive不支持多字符作为分隔符,但是有些数据必须使用多字符作为分隔符。因此当使用hive将多字符作为分隔符的数据入库时比较麻烦,以下办法仅供参考:将需要入库的数据先下载到本地目录下,然后通过替换分隔符的方法将源数据的分隔符替换掉再进行入库即可如字符集不一致记得转码哦!!!转码语句: iconv -...

2018-04-26 23:21:41

阅读数 320

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭