自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(231)
  • 收藏
  • 关注

转载 matplotlib 画图直接写入excel

最近瞎写一点东西玩玩.用 matpyplot.lib 生成的图片, 想直接写到 excel 里面.结果 没有摸上门道去, 浪费了一点时间.就...

2019-07-30 17:55:35 3797

转载 Centos7 数据库启动用户的建立方法

使用共享内存的 数据库系统 .比如 oracle , postgresql在linux 上 默认使用的是 system V IPC .但是...

2019-07-24 17:02:56 765

转载 pandas 的几个查询方法

import os, sysimport numpyt as npimport pandas as pd读取excel 表格.res=pd.DataFrame(pd...

2019-07-16 14:34:10 659

转载 Hbase master gone 系统崩溃. 遭遇 hbase bug 以及对应的解决方案.

hbase 双master 架构, 挂掉了.master 无法转为active了 . 整个系统重启多次 爆同样的错误.2019-05-2114:...

2019-05-23 15:20:43 904

转载 5.6 GTID 启用情况下, 从库跳过一个事物的方法 sql_slave_skip_counter 失效.

5.6 数据库报错了. 从库 报错了,之前 现在从库上删除了一条垃圾表,然后在主库上 删除了 垃圾表, 然后从库报错....

2019-03-04 16:25:08 469

转载 cloudera 5 的安装测试步骤

Clouder Hadoop 集群安装步骤。 提示: 本来是写到 文档里的。 然后 就粘贴到这里,结果好像是 屏幕截图,...

2019-02-21 11:50:26 130

转载 MySQL 5.6 遭遇 OS bug INNODB MONITOR OUTPUT 事件

数据库主机从库 报错了。持续的报出 INNODBSTAUTS OUTPUT写到err log文件里面去。END OF INNODB MONITOR OUTPUT...

2019-02-19 10:06:53 879

转载 2018年总结

18年 过去半个月了。今天提起笔写下总结。技术方面:pg-ha 的整个技术架构,更加合理,可操作性,检测水平。 时效性都有大幅...

2019-01-17 09:52:30 85

转载 让 排序 按照 in 列表的的显示顺序排序输出。

业务上的稀奇古怪的要求。 必须满足。如何 让 sql 查询出来的 数据的排序 是按照 id 在 in () 列表中的顺序来排序显示呢 ?比如 : select * from...

2018-12-05 15:58:12 237

转载 RUST 在linux 系统的安装

服务器, 如何安装rust 系统呢?从网站上下载的rust-init.sh 如果配置代理的话会需要对curl 配置代理。 而且不见得有用。修改 rust-init.sh...

2018-11-16 14:55:04 969

转载 因为init_command 导致的 mysql 5.6 主从连接失败的案例一则。

mysql5.6 从库主机安排了计划性重启,重启主机后, 问题来了。实例 无法连接master 了。报错如下:[code]2018-09-...

2018-09-17 16:03:54 441

转载 PG 数据库只读用户的建立。

我们在oracle数据库下面建立只读用户是很方便的,建用户,授权,建立同义词搞定pg下面是不能建立同义词的,用视图代替?其实不用,有更简单的方法:1...

2018-08-16 15:22:53 457

转载 pgbench 压力测试脚本作为参考.

创建测试表,并填充数据5000W笔记录.pgbench-i-F100-s500-h127.0.0.1-U user压力测试3...

2018-03-27 09:18:33 789

转载 linux 主机mail 系统配置.

linux主机的mailnail,mailx等邮件工具需要调用/etc/mail.rc文件的配置.如果需要个性化的配置,...

2018-03-26 15:12:11 142

转载 2017 不一样的一年.

2017年 , 这里指的农历年哈.今年过的确实跟以前不太一样.1. 写了几十篇博文, 还好对某些网友是有帮助的. 但愿我写的, 没有误导你们. 也感谢你们的光临. 申请到了itpub...

2018-01-25 15:20:26 91

转载 PG 数据库文件损坏的另一个不完全恢复方案.

pg 的datafile 如果损坏了.那么没有损坏的页面的行记录如何取出来.方案有很多了,比如用基于PTTR 的恢复正个数据库.之前也写过一个 根据ctid 的方法.下面说另一个方法...

2018-01-25 14:21:17 411

转载 关于我的博文被删的一个温馨提示.

小编, 你要是不懂呢 ,你可以向我咨询关于禅修.这说不上广告,也说不上迷信, 这是一种生活态度.麻痹 , 只有天天 coding 才是符合这个网站的原则吗.联系你, 怎么联系 ?你连个联...

2018-01-08 11:28:27 74

转载 PG 数据库遭遇 pg_clog file missing 故障.

今天业务系统遭遇了一起数据库故障.数据库端报了一些错误.[code]2017-07-24 00:16:25.514 CST,"pcauto","pcauto",24404,"192.168.11.60:49721...

2017-07-24 15:46:05 630

转载 python 中hash 操作的 key 是否存在的判断问题.

>>>c="abcdeabccqq" >>>foriinc: ... val=1+val.setdefault(c,0)...

2017-07-20 14:02:14 1729

转载 galera mysql cluster 故障节点再次接入集群遇到的问题.

galera cluster是mysql 的多主集群.我们目前搭建了3个节点的测试集群.第一轮测试的时候, 发现一个问题,节点故障了, 下线,然后重新加入集群,无法加入.然后直接整个节点内容...

2017-06-09 17:31:54 3734

转载 Oracle RAC 11204 CHM(cluster healthy monitor) 文件无限膨胀.

CHM 存储数据的文件, 已经没有节制的膨胀了. 大bug . 解决方案: 参考: http://blog.itpub.net/28697282/viewspace-1579187/ ...

2017-05-25 09:43:08 148

转载 while read 循环中 调用ssh 远程执行代码的一个超级大坑.

前一段时间我们已经总结过一个关于whileread循环调用ssh的问题了.http://blog.itpub.net/133735/viewspace-2136798/今天说下另一个存在了几...

2017-05-22 15:53:49 349

转载 ganglia 监控hadoop 集群的配置文件问题的一个说明.

ganglia 是监控的hadoop 集群 的最佳系统. 安装步骤就不写了. 比较简单. 主要说下安装过程, hadoop 的metrics 的配置问题....

2017-05-12 14:38:37 126

转载 xargs 的示例代码.

yarnnode-list|sed-n"s/^\(hadoop[^:]*\):.*/\1/p"|xargs-I{}sshhadoop@{}uptime这只是一个示例代码.主要是演示xargs...

2017-05-05 11:23:32 103

转载 nagios 升级遇到的坑 CHECK_NRPE: Error - Could not complete SSL handshake.

CHECK_NRPE: Error - Could not complete SSL handshake.升级nagios搭建后,实验性的接入了一台主机.问题来了.CHECK_NRPE: ...

2017-04-26 10:28:12 353

转载 while read line 代码中调用 ssh 文件重定向问题.

需要队部分主机做批量ssh 上去做远程检测. 代码就很简单. while read line do xxxxxx 数据清洗....

2017-04-07 11:34:13 159

转载 乌龙问题, 关于 负数的不等于问题的乌龙.

最近出了一单乌龙问题.bad SQL grammar [select * from workflow_model_pic t0where 1=1and( ( t0.receive_user='cc01' ...

2017-03-28 10:34:36 128

转载 spark on yarn 的资源调度器设置.

最近一段时间发现了一个问题. 就是即便在整个集群 不忙的时候, 也会某几个节点, 会被spark on yarn 的任务跑满. 而不是把任务均匀的分配到到多几个节点上. 百...

2017-03-20 11:05:47 186

转载 hadoop 日志级别的调制方法.

hadoop 的日志 是log4j 负责的. 但是看文档之后发现, log4j 的配置是会被覆盖掉的. 那么就要去哪里覆盖的. 找到了几个地方....

2017-03-16 15:03:23 196

转载 PG 数据库库监听队列的长度问题

不论mysql 还是pg 数据库都通过监听某个ip/端口, 或者某个socket 来实现通讯.这里涉及到一个问题,就是这个监听队列的长度问题.mysql是自己实现的,在my.cnf 里有个配置选项...

2017-02-28 15:10:33 204

转载 查看PG数据库的权限情况

pg 的权限 存储在几个地方.1. 用户权限对 实例的登录或者对db 的ddl 权限方面 是放在 pg_role 表中的.pconline=> select * from pg_roles ;-[...

2017-02-28 13:46:41 1899

转载 关于mysql5.6 的排序问题.

mysql 5.6 的排序进行了优化.同样的sql , 在5.5 跟5.6 上可能得到不同的结果:CREATE TABLE `TestCase2` (`id` bigint(20) NOT NULL AU...

2017-02-10 13:28:48 300

转载 遭遇 bug InnoDB: Failing assertion: page_get_n_recs(page) > 1

昨晚遇到了一个mysql的bug:17011222:26:06InnoDB:Assertionfailureinthread139900811...

2017-01-13 09:56:41 508

转载 iptables 功能详解

原文地址:iptables详解http://blog.chinaunix.net/uid-22780578-id-3346350.html 一:前言 ...

2016-12-29 11:09:13 410

转载 quota 限制os 用户磁盘限额.

有些os 用户为因为误操作, 导致把大文件写到/home 等小空间的分区里,导致分区满, 故障. 有必要限制下用户的磁盘空间限额. 1. 要修改磁盘分区的参数,允许执行quota 磁盘限额. vi /etc/fsta...

2016-12-26 11:55:58 173

转载 vim Vundle 插件管理器的安装

vim支持丰富的插件,可以更加便利的完成工作.下面说明的是vundle.vim的安装方案.从以下地址下载:https://github.com/...

2016-04-14 14:20:16 81

转载 mysql innodb_autoinc_lock_mode 的与数据库行为

mysql 的auto_incremet 都知道了对应的还有一个这个行为的一个锁的类型的参数,对数据库的行为会有影响.innodb_autoinc_lock_mode 有3个取值 ...

2016-03-22 16:54:46 130

转载 lvs 负载均衡遇到的一个问题. (问题解决) 

我们在数据库前面加了lvs + keepalived 做vip 切换, 实现数据库ha .整套流程也是很成熟的了.近期遇到了一个问题. lvs 的 master 与backup 节...

2016-03-17 17:04:34 407

转载 hadoop 集群 跨 版本数据迁移

忙着做hadoop 1.x 到 2.x 的数据迁移.hadoop 系统提供 了一个 命令 distcp 可以跨版本 迁移数据. 具体的命令格式: 在新的hadoop 版本上执行 .两...

2016-03-04 10:40:24 204

转载 hadoop 2.0 hdfs HA 搭建

屋漏偏逢连夜雨.忙的不可开交的关键时刻, 机房ups **了, 而且还是很实在的烧了.满机房的烟雾.我的可怜的两套hadoop 大部分节点都掉电崩溃了.紧急忙碌一番起来了....

2016-03-02 16:54:14 172

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除