自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(88)
  • 资源 (2)
  • 收藏
  • 关注

转载 nginx大量TIME_WAIT的解决办法--转

原文地址:http://liuyieyer.iteye.com/blog/2214722?utm_source=tuicool&utm_medium=referral由于网站使用nginx做的反向代理he负载均衡。在没有默认的系统TCP参数情况下回导致大量的TIME_WAIT出现。  终端可以下敲入 netstat -n | awk '/^tcp/ {++S

2017-06-02 10:22:12 5800 1

原创 最强lvs总结

LVS的全称Linux vitual system, linux vitual server是由目前阿里巴巴的著名工程师章文嵩博士开发的一款开源软件。LVS工作在一台server上提供Directory(负载均衡器)的功能,本身并不提供服务,只是把特定的请求转发给对应的realserver(真正提供服务的主机),从而实现集群环境中的负载均衡。LVS的核心组件ipvs工作在kernel中,是

2017-05-26 18:09:42 5929 1

原创 lvs主备同步脚本

#!/bin/bash# 本脚本用于在188上互相同步主备LVS的keepalived.conf配置文件# 维护人: 方冲 2015/09/01# 更新主备网卡识别问题# 更新网卡识别问题 添加匹配参数"/"# 2015/10/21 解决bug:在过滤优先级时出现/r字符 使用tr解决function push_lvs(){    local mode=$1  

2017-05-26 18:07:59 616

原创 文件系统优化

## /etc/fstab# Created by anaconda on Thu Dec  1 18:05:43 2016## Accessible filesystems, by reference, are maintained under '/dev/disk'# See man pages fstab(5), findfs(8), mount(8) and/or bl

2017-05-26 17:59:16 410

原创 kipmi0进程导致CPU使用率过高

touch /var/lock/subsys/localecho 10 >/sys/module/ipmi_si/parameters/kipmid_max_busy_us

2017-05-26 17:58:11 2675

原创 lvs 网卡多队列

#!/bin/bash# wrote by Owen wang# 2015/07/27# 平均绑定CPU到网卡多个队列上,避免单核CPU跑满的问题# IPMI CPU高[ -f /sys/module/ipmi_si/parameters/kipmid_max_busy_us ] && echo 10 >/sys/module/ipmi_si/parameters/ki

2017-05-26 17:56:51 574

原创 linux 系统硬件优化

/etc/do_some_checks.sh#!/bin/sh## This script will be executed *after* all the other init scripts.# You can put your own initialization stuff in here if you don't# want to do the full

2017-05-26 17:56:03 348

原创 lua防盗链记录

nginx.confworker_processes  1;error_log  logs/error.log  debug;events {    worker_connections  102400;}http {    include       mime.types;    default_type  application/octet-stream;

2017-05-26 16:47:26 1017

转载 http状态码

200表示正常0k,这个是地球人都知道的了。301 Moved Permanently 表示客户请求的文档在其他地方,新的URL在Location头中给出,浏览器应该自动地访问新的URL。304 Not Modified:客户端有缓冲的文件并发出了一个条件性的请求(一般是提供If-Modified-Since头表示客户只想比指定日期更新的文档)。服务器告诉客户,原来缓冲的文档还可以

2017-05-10 12:02:54 263

原创 rtmp基础

tmp协议    是目前在国内使用最多的协议,原因呢就是简单开源,浏览器只要支持flashplayer 就可以播放,主播支持要个obs就可以推流,播放搭建个nginx用nginx-rtmp-modele模块就可以实现简单的直播,rtmp是持续直播流方式,可以推送、播放 ,基于底层的tcp传输 4次握手 c0 01 s0 s1 c2 s2 c2,延迟在3秒以内

2017-04-20 15:22:19 296

转载 saltstack hostname 问题记录

删除minion-id和pki目录cd /etc/saltrm -rf minion_id pki/修改/etc/sysconfig/Network文件vim /etc/sysconfig/networkHOSTNAME=Admin2-saltstack.littlebee.com保存退出登出系统重新进入重启salt-minion服务/etc

2017-01-03 16:57:13 1451

转载 mysql相关优化

???????MySQL????????????????????????????MySQL DBA??????????????????SQL???????????????????????????????????1??????????1.1?CPU?????????BIOS????????????????????CPU????????????NUMA?????1???Performance Per

2016-08-01 15:36:23 403

原创 linux下配置ipv6地址

[root@bgp-bj-182-048-106-007 network-scripts]# vim ifcfg-em3DEVICE=em3ONBOOT=yesBOOTPROTO=staticDNS1=223.5.5.5DNS2=8.8.8.8DNS3=114.114.114.114NETWORKING_IPV6=yesIPV6INIT=yesIPV6A

2016-05-24 17:51:25 2281

转载 windows下hosts文件不起作用的问题

今天解决了hosts文件不起作用的问题解决方案来自 http://hi.baidu.com/xiao7ng/blog/item/57bde276b506a413b051b92a.html1.首先确认hosts文件没有语法错误,这里面只有ip和域名,没有别的.如:127.0.0.1 baidu.com#test127.0.0.1前面不能有空格,ip和域名之间至少有一个空格!2.然

2015-06-08 10:12:33 3494

转载 使用Memcached实现Session共享

使用Memcached实现Session共享由于Cookie是保存的用户客户端的,安全性存在问题,为保证用户数据的安全性,我们必须使用Session机制来保存用户登录后的一些信息。 如果我们使用LVS对Apache实现负载均衡,就无法保证用户每次都能被分配到同一台Apache Server上,以取到自己的Session,虽然LVS可以加-p参数来保证客户端每次都被分配到同一台Apache

2015-03-25 13:55:15 479

转载 linux双网卡绑定配置

双网卡的绑定实现就是使用两块网卡虚拟成为一块网卡,这块聚合的网卡在逻辑上看起来是一块以太网接口设备,其本质是两块网卡具有相同的IP地址而并行链接聚合成一个逻辑链路工作,提高链路的可靠性。根据交换机可支持的功能不同,最常见的设定是贮备方式的双网卡绑定配置各配置文件设置如下(测试环境rhel5.8):一、修改网卡配置文件::::::::::::::/etc/syscon

2015-03-18 14:40:15 1177

转载 Hadoop-2.3.0-cdh5.0.1分布式环境搭建

Hadoop-2.3.0-cdh5.0.1分布式环境搭建(NameNode,ResourceManagerHA)2014/6/25 12:07:32说明       本文搭建Hadoop CDH5.0.1 分布式系统,包括NameNode ,ResourceManger HA,忽略了Web Application Proxy 和Job His

2015-03-18 14:21:47 770

转载 wind7挂载linux下共享目录

今天不经意在一博客上浏览到一句话“windows7挂载NFS文件系统”,让我震惊了,教科书上或者接触到的NFS文件系统也就只是在类 Linux平台使用的一种网络服务。更没想过要在windows平台下使用Linux中的NFS服务。后来想想,其实这也不奇怪,主要是微软的战略,向 linux兼容也是很正常的,这个就是其中之一的体现。下面就以我本机windows7旗舰版和虚拟主机RHLE6.2系统为例,做

2015-03-18 11:07:20 774

转载 MYSQL设置远程账户登陆总结

MYSQL设置远程账户登陆总结1. ERROR 2003 (HY00 12. ERROR 1045 (28000): Access denied for user 'test'@'x.x.x.x' (using password: NO) 13. 取回ROOT密码并设置远程登录 24. RROR 1062 (23000): Duplicate

2015-03-16 18:16:31 3000 1

转载 linux下重启oracle

linux下重启oracle[oracle@dbOracle9i ~]$lsnrctl stop             ----------关闭监听LSNRCTL for Linux: Version 9.2.0.4.0 - Production on 10-OCT-2011 16:19:02 Copyright (c) 1991, 2002, Oracl

2015-03-16 17:40:17 860

转载 hadoop namenode ha方案

Hadoop 2.0 NameNode HA和Federation实践Posted on 2012/12/10一、背景天云趋势在2012年下半年开始为某大型国有银行的历史交易数据备份及查询提供基于Hadoop的技术解决方案,由于行业的特殊性,客户对服务的可用性有着非常高的要求,而HDFS长久以来都被单点故障的问题所困扰,直到Apache Hadoop在2012年5月发布

2015-03-11 11:28:55 605

转载 hadoop运维汇总篇

在实际的生产环境运维一个Hadoop集群有一些必须要关注的事情。1、Namenode的高可靠性2、节点配置与管理3、Mapreduce的内存配置4、启用trash首要的是保证数据安全可靠,其次再去考虑存储效率、计算效率、运维效率的优化与提高,当你觉得Hadoop集群的性能太差太差的时候,其实是你对Hadoop的了解太少,Hadoop的效率没有

2015-03-09 13:25:39 614

转载 win8-txt文件不能默认记事本打开

Q:txt文件不能默认记事本打开,每次打开都得选择程序,跪求解决办法,操作系统为win7旗舰版A:电脑基础 中级团 合作回答者:1人 2012-03-04这个需要 在注册表 里删除 1、首先 win+r    2、打开运行程序   3、输入: regedit   4、找到: 计算机\HKEY_CURRENT_USER\SOFTWARE\MICRO

2015-03-06 15:03:54 1467

转载 自动删除oracle下的过期文件命令

linux下自动删除过期文件命令[@more@]语句写法:find 对应目录 -mtime +天数 -name "文件名" -exec rm -rf {} ;例1:find /home/oracle/app/oracle/diag/rdbms/orcl/orcl/trace -mtime +8 -name "orcl*" -exec rm -rf {} ;

2015-01-23 17:11:58 680

原创 linux下命令使用大全

linux下命令使用大全一、date命令1、显示3分钟前时间 date --date="-3 minute" +%Y%m%d%H%M 2、显示前3天时间date --date '3 days ago' +%Y%m%d

2014-12-25 16:12:05 432

转载 linux下安装python

sudo yum -y install python-devel openssl openssl-devel gcc sqlite-develwget http://www.python.org/ftp/python/2.7.6/Python-2.7.6.tgztar -xvjf Python-2.7.6.tar.bz2cd Python-2.7.6./configure --prefi

2014-11-26 16:40:17 451

原创 我的python

2014年11月26日,记下这个时刻把, 以后会怀念的, 今天开始要和python伙伴学习!

2014-11-26 16:38:43 381

转载 linux下查看系统信息

查看CPU信息(型号) # cat /proc/cpuinfo | grep name | cut -f2 -d: | uniq -c       8  Intel(R) Xeon(R) CPU            E5410   @ 2.33GHz (看到有8个逻辑CPU, 也知道了CPU型号) # cat /proc/cpuinfo | grep physical | u

2014-11-24 12:47:07 443

转载 hadoop - jobTracker自动停止问题

这个问题貌似很少看到直接的解决方法啊,是大家都没遇到还是直接忽略了?该异常确实不影响整个hadoop系统任务的执行,但是对于我这个强迫症患者,天天看着任务报错还是很不爽的。找了很久,终于找到问题的本质和解决办法。以下为原博客内容,感谢(作者):------------------------------------------------------

2014-09-16 17:41:56 664

转载 hive安装过程

一、查看需求安装java 1.6及hadoop 0.20.x二、安装hivetar -xf hive-x.y.z.tar.gz(本次安装为hive-0.8.1.tar.gz)将解压后的hive-0.8.1文件放在系统的/home/hadooptest/中。在/etc/profile中添加:export HIVE_HOME=/h

2014-09-15 13:20:28 601

转载 hbase安装配置

base配置 下载:hbase-0.96.2-hadoop2-bin.tar.gz[root@db96 ~]# wget http://apache.dataguru.cn/hbase/hbase-0.96.2/hbase-0.96.2-hadoop2-bin.tar.gz[root@db96 ~]# tar -zxvf hbase-0.96.2-hadoop2-bin.tar.gz

2014-09-15 13:18:27 459

转载 ZooKeeper安装过程

一、安装需求安装java 1.6及hadoop 0.20.x二、安装zookeeper1、下载zookeeperwget http://mirror.bit.edu.cn/apache//zookeeper/zookeeper-3.4.3/zookeeper-3.4.3.tar.gz(本次安装3.4.3版本)其他版本下载地址(最好使用stable

2014-09-15 13:14:05 472

转载 如何使用hive

#创建表人信息表  person(String name,int age) hive> create table person(name STRING,age INT)ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' ESCAPED BY '\\' STORED AS TEXTFILE; OK Time taken: 0.541 second

2014-09-15 13:11:54 651

转载 lvs LVS调整hash bucket及内核编译 优化

一、IPVS connection hash table size,该表用于记录每个进来的连接及路由去向的信息。连接的Hash表要容纳几百万个并发连接,任何一个报文到达都需要查找连接Hash表。Hash表的查找复杂度为O(n/m),其中n为Hash表中对象的个数,m为Hash表的桶个数。当对象在Hash表中均匀分布和Hash表的桶个数与对象个数一样多时,Hash表的查找复杂度可以接近O(1)。

2014-08-20 10:54:12 2089

转载 Centos 6编译内核支持LVS-SNAT模式

lvs分为DR/NAT/TUN,3种模式,相信大家都了解了,但是有些网站网络环境比较复杂,很多网段、各服务之间又有互相调用、两地机房又有VPN,那么以上提及的3中模式都难以适应此环境。因此,我介绍下centos下,iptables+LVS/NAT实现SNAT模式,以解决以上提出的问题,下面先说下原理:当访问到LVS,iptables会根据规则把访问的源IP改成指定ip,然后交给LV

2014-07-02 14:26:55 1437

转载 IP_VS最大连接数哈希表在RHEL6.5下的设定

文章 大流量并发LVS负载 中说到,直接修改内核启动参数options ip_vs conn_tab_bits的方式,达到增大ip_vs 连接哈希表的目的,在 rhel/centos 6.2下尝试失败, 最近发现, rhel 6.5, 已经可以使用这种简单方式完成设定。 是否TB对内核修改的建议被采纳,还是其他原因不得而知;如果是,那么TB在内核方面,对LVS的其他建议也有可能被采纳,那将是大

2014-07-01 10:57:33 2334

转载 一些关于 LVS 的优化

Lvs 的配置文章挺多的了,优化的也不少,从淘宝普天的文章学习了很多东西,做个记录多网卡 bonding 绑定modprobe.conf  alias bond0 bondingifcfg-bond0DEVICE="bond0"ONBOOT="yes"USERCTL="no"BOOTPROTO="static"IPADDR="192.168.1.

2014-06-30 10:45:54 1761 1

转载 mysql 性能优化方案 (转)

网 上有不少mysql 性能优化方案,不过,mysql的优化同sql server相比,更为麻烦与复杂,同样的设置,在不同的环境下 ,由于内存,访问量,读写频率,数据差异等等情况,可能会出现不同的结果,因此简单地根据某个给出方案来配置mysql是行不通的,最好能使用 status信息对mysql进行具体的优化。mysql> show global status;

2014-06-17 13:26:54 779

转载 淘宝内核对LVS的性能优化

浅淡淘宝内核对LVS的性能优化    去年试用了一下淘宝内核,发现它对LVS性能有质的提升。敬佩之心倍上心头,兴奋之余开始了解淘宝内核。    简单公布一下测试结果:在一台普通的4核服务器上,使用LVS的DR模式,后端7台RealServer。在CentOS原生内核上,每秒最高转发约6万个HTTP请求,而使用淘宝内核后可高达约14万次请求每秒(瓶颈在测试机,无法模拟更大压力

2014-06-06 16:07:43 1306

转载 mysql AB复制延迟配置工具

一、概念延时复制:在设定的时间(默认3600s)内发生故障,可以进行恢复;先下载下来,然后等3600s后再执行。架构:参照"Mysql一主多从部署"master–>slave1–>slave2\–>slave3(延迟复制,一般是3600s)二、延时复制通过延时复制可以达到容错的机制;mysql>show master status; –查看mas

2014-05-14 16:47:19 615

PLSQL Developer

10.0.的clientPLSQL

2014-12-10

hadoop-lzo所需包

hadoop-lzo包 32 位 以及64 位

2013-10-30

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除