自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(6)
  • 资源 (2)
  • 收藏
  • 关注

原创 Zabbix邮件告警功能

Zabbix 的监控功能固然强大,但是在服务器出现问题后不能及时通知管理员,那么监控功能就没有起到作用。Zabbix 提供了多种通知告警方式,常用的有邮件和短信,除此之外还可以使用脚本来实现微信推送。以下介绍邮件和微信两种告警方式。其实相比实现功能,更重要的是功能背后的方法、原则和思考方式。 实际配置告警之前首先要理解 Zabbix 告警的原理以及内部的流程,这里涉及到很多部分,第一次配置时不容易理解,而且功能无法实现时也不便于排除问题。首先我们假设被监控的对象已经正确配置...

2020-05-15 09:27:13 783

原创 Cloudera Professional Services

Cloudera Professional Services Revision History Version Author Description Date 0.1 Cloudera 初始版本 11/09/201...

2020-04-26 10:15:12 165

原创 sqoop定时增量抽取数据到hive

1、 第一次全量抽取,并创建hive表#keberos认证kinit -kt hdfs.keytab hdfs#从oracle导数据到hivesqoop import --connectjdbc:oracle:thin:@xx.xx.xx.xx:1521:xx\--username xxx--password xxx\ ...

2020-04-26 09:43:39 438

原创 sqoop抽取数据理论及常见问题

sqoop抽取数据问题:倒入ODS原系统表结构修改问题:抽取数据指定字段无影响:无需修改hive表结构 (1).原系统表结构字段顺序调整无影响 (2).原系统增加字段但HDFS不需要,无影响 (3).原系统删减字段,sqoop相应字段放空,无影响有影响:原系统增加字段:需修改hive表结构 1).不刷历史数据:备份表数据,drop目标表然后create,insert回...

2020-04-26 09:41:31 975

原创 crontab创建定时任务步骤

首先用crontab -l查看目前所有定时任务再用crontab -e编辑,就想编辑文本一样例添加:* * * * * /root/time.sh > /root/log.log 2>&1 执行sh脚本,输出日志到log.log文件中如果log文件显示Permission denied,说明定时任务没执行权限,此时运行chmod 755 脚本名,修改执行权限后即可执行...

2020-04-26 09:39:04 442

原创 kudu添加master高可用

业务需求: 目前大数据生产环境kudu组件只有一个master实例,如出现问题会出现单点故障,需要配置多个master实例,保证kudu服务能够实现高可用。实现步骤:添加两台master组件,不要启动,并停止所有组件。创建master所需要的文件夹fs_wal_dir、fs_data_dirs并赋予权限(与上面cm界面配置的路径要相同)。mkdir -p /ku...

2020-04-26 09:10:01 1254

orabbix4安装包

orabbix4安装包实测有用,zabbix4使用orabbix4,orabbix1.2.3已经不在更新了。

2022-07-04

大数据平台多租户方案.docx

大数据平台使用者为多个,需要为每个用户划分不同的模块和资源,cloudera 通过sentry 等安全组件进行用户管理,表管理 ,库管理。

2020-04-26

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除