shell
文章平均质量分 82
Younge__
Talk is cheap, show me the code。。生命不息,学习不止。。Stay foolish, stay hungry!
展开
-
linux系统服务添加删除等
linux系统服务添加删除等原创 2016-11-03 11:11:59 · 1045 阅读 · 0 评论 -
Shell-Bash 根据日期时间统计消息行数
需求:统计某个文件或者特定目录下Kafka消息一段时间范围内每个小时消息条数或者每天消息条数。一行数据行实例:2018-03-28T03:00:02 ...分析: 参数:1.指定文件的文件绝对路径 2.指定日期或者开始日期和结束日期 3.指定小时或者开始小时和结束小时 4.指定统计维度(小时或者天)逻辑:1.输出逻辑 -- 文件 + 屏幕...原创 2018-03-26 23:52:44 · 1553 阅读 · 0 评论 -
SPARK APP压测--清理检查相关SHELL(1)
压力测试前需要对大数据环境、日志和存储数据库进行清理、检查环境是否可用、保存测试前的环境状态。压力测试过程中需要定期检查PARQUET文件生成情况、报表生成情况、HBASE数据生成情况、是否有SPARK APP FAILED、收集错误日志等。压力测试后需要检查PARQUET文件生成情况、报表生成情况、HBASE数据生成情况、是否有SPARK APP FAILED、收集错误日志、查看APP执行时间间...原创 2018-04-27 02:23:16 · 460 阅读 · 0 评论