Linux
fanlying
这个作者很懒,什么都没留下…
展开
-
centos7安装MySQL
1、安装执行命令sudo yum install mysql-server(Ubuntu用apt-get替换yum来安装)但是无效,显示No package mysql-server available.查了下,说是CentOS7带有MariaDB而不是MySQL,可以执行以下命令sudo rpm -Uvh http://dev.mysql.com/get/mysql-comm原创 2017-12-28 14:10:46 · 5014 阅读 · 1 评论 -
查看hdfs文件夹大小
例如查看ods库大小:hadoop fs -du -s -h /user/hive/warehouse/ods.db如果要查看其他文件夹则改成该文件夹路径。去掉-h选项则按Byte单位显示。原创 2018-06-19 16:26:11 · 35799 阅读 · 0 评论 -
增量抽取到hive过程中的监控
前提:分区字段统一为ds,适用于常规增量抽取,通过创建和更新时间抽取。#!/bin/bash# 适用于常规增量抽取,通过创建和更新时间抽取# 手工填写以下参数:# 分区表达式,hive语法:pt_expr# 主键字段,联合主键写id1,id2,id3:pk# 非分区表增量数据量阈值,分区表不用管:inc_cntset -e timer_start=`date "+%Y-...原创 2019-07-08 17:53:41 · 857 阅读 · 0 评论