- 博客(6)
- 资源 (2)
- 收藏
- 关注
原创 Zabbix邮件告警功能
Zabbix 的监控功能固然强大,但是在服务器出现问题后不能及时通知管理员,那么监控功能就没有起到作用。Zabbix 提供了多种通知告警方式,常用的有邮件和短信,除此之外还可以使用脚本来实现微信推送。以下介绍邮件和微信两种告警方式。其实相比实现功能,更重要的是功能背后的方法、原则和思考方式。 实际配置告警之前首先要理解 Zabbix 告警的原理以及内部的流程,这里涉及到很多部分,第一次配置时不容易理解,而且功能无法实现时也不便于排除问题。首先我们假设被监控的对象已经正确配置...
2020-05-15 09:27:13 783
原创 Cloudera Professional Services
Cloudera Professional Services Revision History Version Author Description Date 0.1 Cloudera 初始版本 11/09/201...
2020-04-26 10:15:12 165
原创 sqoop定时增量抽取数据到hive
1、 第一次全量抽取,并创建hive表#keberos认证kinit -kt hdfs.keytab hdfs#从oracle导数据到hivesqoop import --connectjdbc:oracle:thin:@xx.xx.xx.xx:1521:xx\--username xxx--password xxx\ ...
2020-04-26 09:43:39 438
原创 sqoop抽取数据理论及常见问题
sqoop抽取数据问题:倒入ODS原系统表结构修改问题:抽取数据指定字段无影响:无需修改hive表结构 (1).原系统表结构字段顺序调整无影响 (2).原系统增加字段但HDFS不需要,无影响 (3).原系统删减字段,sqoop相应字段放空,无影响有影响:原系统增加字段:需修改hive表结构 1).不刷历史数据:备份表数据,drop目标表然后create,insert回...
2020-04-26 09:41:31 975
原创 crontab创建定时任务步骤
首先用crontab -l查看目前所有定时任务再用crontab -e编辑,就想编辑文本一样例添加:* * * * * /root/time.sh > /root/log.log 2>&1 执行sh脚本,输出日志到log.log文件中如果log文件显示Permission denied,说明定时任务没执行权限,此时运行chmod 755 脚本名,修改执行权限后即可执行...
2020-04-26 09:39:04 442
原创 kudu添加master高可用
业务需求: 目前大数据生产环境kudu组件只有一个master实例,如出现问题会出现单点故障,需要配置多个master实例,保证kudu服务能够实现高可用。实现步骤:添加两台master组件,不要启动,并停止所有组件。创建master所需要的文件夹fs_wal_dir、fs_data_dirs并赋予权限(与上面cm界面配置的路径要相同)。mkdir -p /ku...
2020-04-26 09:10:01 1254
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人