- 博客(10)
- 收藏
- 关注
RSS订阅原创 return code 3 from org.apache.hadoop.hive.ql.exec.spark.SparkTask.
在hive on spark下跑任务报错
2023-01-29 11:14:40
1747
原创 redis集群性能优化
1、redis集群环境是3主3从，物理机配置64G内存，2T RAID5硬盘，落地配置都是默认配置，AOF关闭。导入了大概几亿的数据，导入一天之后性能出现异常，分析日志出现磁盘忙，IO压力很大，可能是落地台频繁，导致无法落地，丢失一部分数据。2、问题出现在硬盘，想办法优化操作系统的参数。redis集群还是不错的，16384个槽位，repl-timeout 1000repl-ba
2017-08-08 08:38:46
1302
原创 mongodb释放内存
1、use admindb.shutdownServer();这种适合在副本集的模式下分批重启集群，这样也不会影响业务，重启一台后在切换主从，保证业务正常。
2017-08-07 18:51:37
2187
1
原创 将linux文件清空的几种方法
1、使用重定向的方法[root@centos7 ~]# du -h test.txt 4.0K test.txt[root@centos7 ~]# > test.txt [root@centos7 ~]# du -h test.txt 0 test.txt2、使用true命令重定向清空文件[root@centos7 ~]# du -h test.t
2017-08-07 18:35:51
1410
1
原创 linux卸载Nfs文件系统
以只读的方式挂载mount -t nfs -o ro,bg,soft,nolock 192.168.1.100:/tmp /nfs/tmp以写的方式挂载mount -t nfs -o rw,bg,soft,nolock 192.168.1.100:/tmp /nfs/tmp卸载umount /nfs/tmp
2017-08-07 18:33:50
12422
1
原创 日常运维工作的知识体系
一、基础服务类。1、安装windows、linux操作系统，系统ip配置，系统初始化（包括参数优化），各个平台基础软件的安装，包括各个软件的配置优化，搭建集群环境。2、日常系统服务器的维护、服务状态的监控。3、负载均衡系统的维护，如lvs、nginx、F5、HAproxy等。4、web服务器维护。5、zabbix监控系统的维护。6、软件的发布及升级。二、数据库类。1
2017-07-31 16:40:06
7390
1
原创 对NOSQL学习的理解
之前的5年职业生涯中没有接触过NOSQL的东西，到了现在的单位接触了几大主流的NOSQL平台，如redis、MONGODB、HBASE等，自己的能力得到一定的提升，可能自己度这些方面的知识的深度还是不够，如果在往深入一点的话就不行了，所以，虽然上班快8年了，自己的知识体系还是要系统一下的。 在很多面试中，虽然你会，但是你讲不出所以然来，哎，这个面试句泡汤了，这就是这么现实。不说了，为
2017-07-31 16:02:51
497
1
原创 养成写技术博客的习惯
本人有点懒，很多时候没有养成写博客的习惯，也没有养成写技术文档的习惯，好记性不如乱笔头。懒惰的结果是自己的知识组织能力很差，很多东西都很零散，无法有效的组织起来。 养成写博客的习惯也是对自己思维能力的一种锻炼，坚持吧，怪不得自己的语文从小学就一直很差。
2017-07-28 18:39:15
441
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人