工作
文章平均质量分 68
凌乱小风
自识荆门子才甫,梦驰铁马战城南。
展开
-
syslog-ng文档阅读
https://www.balabit.com/sites/default/files/documents/syslog-ng-ose-latest-guides/en/syslog-ng-ose-guide-admin/html/chapter-quickstart.html 5.3 内联配置对象,只能使用一次 如source s_local { system(); inter翻译 2016-03-25 10:10:23 · 3423 阅读 · 0 评论 -
ssh 慢慢积累
ssh root@10.6.109.101 scp 源 目的地 scp root@IP:/X/X/X/X.X ./ 其中./为当前目录原创 2016-04-07 09:41:18 · 205 阅读 · 0 评论 -
crontab
将web服务器上的脚本移植到db服务器上crontab时程表的格式如下: f1 f2 f3 f4 f5 program f1 -分钟 f2 -小时 f3-一个月份中第几日 f4 -月份 f5 -一个星期中的第几天。 program 表示要执行的程式。 f1 为 * 时表示每分钟都要执行 program, f2 为 * 时表示每小时都要执行程式,其余类推 f1 为 a-b 时表原创 2016-03-14 19:00:21 · 308 阅读 · 0 评论 -
redis-server python
from rediscluster import StrictRedisClusterREDIS_CLUSTER_NODES = [ {"host":"x.x.x.x","port":"10201"},]rc = StrictRedisCluster(startup_nodes=REDIS_CLUSTER_NODES)rc.set("test","aaa")print rc["te原创 2016-04-12 18:40:46 · 420 阅读 · 0 评论 -
ubuntu 网卡总结
问题描述1.网卡如何配置 2.dns服务器 3.踩过的坑 对于ubuntu,网卡配置主要是两个文件主要配置文件vi /etc/network/interfaces 这个是对于网卡的配置,例如IP地址,掩码,网关等等# The primary network interfaceauto loiface lo inet loopbackauto eth0iface eth0 inet s原创 2016-04-25 17:00:16 · 10664 阅读 · 0 评论 -
ubuntu Puppet
环境:ubuntu 安装 serverecho -e "deb http://apt.puppetlabs.com/ lucid main\ndeb-src http://apt.puppetlabs.com/ lucid main"sudo apt-key adv --keyserver keyserver.ubuntu.com --recv 4BD6EC30apt-get update原创 2016-04-25 20:11:48 · 365 阅读 · 0 评论 -
hadoop client端
目录========hadoop安装配置使用hadoop安装========ubuntu14.04 trusty 官网下载 http://hadoop.apache.org/releases.htmlwget http://mirrors.cnnic.cn/apache/hadoop/common/hadoop-2.7.2/hadoop-2.7.2.tar.gz下载后直接解压即可配置===原创 2016-05-25 18:02:08 · 926 阅读 · 0 评论 -
spider
#-*- coding:utf-8 -*- import requests import re import sysreload(sys)sys.setdefaultencoding('utf-8')#from bs4 import BeautifulSoup def login(): url = 'http://www.zhihu.com' login_url =原创 2016-05-02 12:54:16 · 373 阅读 · 0 评论 -
配置ganglia 监控 hadoop 节点
操作系统: CentOS安装最方便的yum因为版本问题用不了 所以就用源码安装咯,安装之前,有一些需要前置依赖需要安装的rpm -q gcc glibc glibc-common rrdtool rrdtool-devel apr apr-devel expat expat-devel pcre pcre-devel dejavu-lgc-sans-mono-fonts dejavu-sans原创 2016-04-18 19:10:01 · 2177 阅读 · 2 评论 -
配置spark源码阅读windows环境
spark之所以不能世界用ide阅读,是因为需要经过sbt的一次build,有一些包才会补齐 要配置windows下的阅读环境很简单1安装jdk这个上orcla官网去下,是exe的,直接安装即可,记住jdk的安装目录2安装idea直接去下安装就可以3运行idea这里有两个需要注意的地方 第一个就是设置idea中jdk路径 在Configure -> Project defaults -> Pr原创 2016-06-01 09:30:42 · 392 阅读 · 0 评论 -
censys 数据库地理信息自定义接口(python版)
公司内部的ip信息库覆盖面不是很够 导致日志处理的时候ip经常差不到 参考了这些数据库最后选了censys 因为比较权威, 但是没有文档,而且接口不太好用,所以自己写了一个查ip的接口 首先 到官网逛了逛,censys特殊之处在于注册了才能用api 注册以后有Secret,API_ID,在查询时需要用到 百度了一下发现也没什么有用的教程,又看了看官方的介绍以及源码 得到了最初的版本原创 2016-06-04 17:38:40 · 2859 阅读 · 1 评论 -
syslog-ng 安装、使用心得
1.安装ubuntu环境下sudo apt-get install syslog-ng这时安装失败,The following packages have unmet dependencies: syslog-ng : Depends: syslog-ng-core (>= 3.5.3) Depends: syslog-ng-mod-sql De原创 2016-03-11 18:12:51 · 4554 阅读 · 0 评论 -
Python MySQLdb使用,以及MySQL 与 PostgreSQL 数据互传
1.安装下载地址 https://sourceforge.net/projects/mysql-python/ 对于windows 直接下载exe安装即可 对于ubuntu 然后解压,打开README: 参考 http://www.cnblogs.com/rollenholt/archive/2012/05/07/2487137.html 里面有安装过程: $ tar xfz MyS原创 2016-03-11 10:16:41 · 1478 阅读 · 0 评论 -
ubuntu 12.04 安装 syslog-ng 3.7.2-1
使用 apt-get 直接安装,会装到3.3,检查更新也没有用处,而3.3不包含python等控件 这里给出正确的安装方式 https://syslog-ng.gitbooks.io/getting-started/content/chapters/chapter_0/section_1.html 根据文档,我们发现: Modules for 3.7 are not available cu原创 2016-03-18 15:28:52 · 898 阅读 · 0 评论 -
xshell使用以及文件夹传输
版本 x-shell 51.登录与连接没什么好说的,一个设置网络地址,包括端口号和主机IP等等 再者如果需要登录,别忘了设置用户名密码等 设置好就可以连入远程服务器端拉 2.文件拷贝首先通过ls命令找到你需要的文件位置,或者cd打开文件夹。 如果是单个文件,可以使用sz或者rz命令进行下载和上传。 需要注意的是无论是sz还是rz都是服务器发起的命令,所以我们的上传rz对服务器来说是原创 2016-03-07 11:52:23 · 40216 阅读 · 3 评论 -
cent os7 配置
1.终端快捷键在cent os 中 application->system tools->settings->keyboard ->shortcuts you can set whatever you like as name command must be set: /usr/bin/gnome-terminal (Terminal 程序的路径)2.添加超级用户用sudo时提示”xxx原创 2016-03-08 09:31:10 · 1196 阅读 · 0 评论 -
linux 基础命令
ls cat 1.显示一个文件。catfilename2.从键盘创建一个文件。 cat filename 2.从键盘创建一个文件。 cat > filename (只能创建新文件,不能编辑已有文件.) 3.将几个文件合并为一个文件: $cat file1 file2 > file vim原创 2016-03-08 09:58:56 · 421 阅读 · 0 评论 -
python自动化配置脚本分析
python 默认ascii 编码,需要添加声明文件编码注释# -*- coding: utf-8 -*-OptionParser模块用于处理命令行参数: optparse,它功能强大,而且易于使用,可以方便地生成标准的、符合Unix/Posix 规范的命令行说明。 引入from optparse import OptionParser 创建OptionParser实例usage= 'usag原创 2016-04-01 18:38:57 · 1297 阅读 · 0 评论 -
PYthon psycopg2 数据库使用学习
1.使用自增 autoincrement 注释 comment “” 建立索引,可以尽可能的避免遍历 unique索引 唯一的 添删改查 insertinsert into table(col1) values(valee2)insert into 'form3' ('title') values ('haha')deleteupdataupdata table set col1 = n原创 2016-03-09 14:53:32 · 9514 阅读 · 0 评论 -
PostgreSQL 安装、配置、入门
1.安装参考http://blog.csdn.net/kongxx/article/details/485028872.配置修改 /var/lib/pgsql/data/postgresql.conf 文件 修改 /var/lib/pgsql/data/pg_hba.conf 文件 pg_hba.conf 客户端认证配置文件 http://blog.csdn.net/liangwenjiecp原创 2016-03-08 13:51:19 · 493 阅读 · 0 评论 -
ubuntu 使用、配置postgresql以及psycopg2
1 网络配置桥接方式,很简单 配置ipsudo gedit /etc/network/interfacesauto loiface lo inet loopbackauto eth0iface eth0 inet staticaddress X.X.X.Xnetmask 255.255.0.0gateway X.X.X.X配置DSNsudo gedit /etc/resolv.conf转载 2016-03-09 13:36:00 · 1053 阅读 · 0 评论 -
LVS 基础知识总结
基础概念LVS (Linux Virtual Server)是一种集群(Cluster)技术,采用IP负载均衡技术和基于内容请求分发技术。调度器具有很好的吞吐率,将请求均衡地转移到不同的服务器上执行,且调度器自动屏蔽掉服务器的故障,从而将一组服务器构成一个高性能的、高可用的虚拟服务器。整个服务器集群的结构对客户是透明的,而且无需修改客户端和服务器端的程序。可伸缩性 可伸缩网络服务是指网络服务能随着原创 2016-03-31 17:31:13 · 515 阅读 · 0 评论 -
数据归并脚本解析
1 optparse模块用于处理命令行参数2 logging模块cls是class的缩写。 python中self,cls普通的方法,第一个参数需要是self,它表示一个具体的实例本身。 如果用了staticmethod,那么就可以无视这个self,而将这个方法当成一个普通的函数使用。 而对于classmethod,它的第一个参数不是self,是cls,它表示这个类本身。>>> class转载 2016-03-21 13:59:19 · 233 阅读 · 0 评论 -
nginx 配置整理(初级版)
1.基础配置解析 2.负载均衡 3.缓存 4.反向代理基础配置解析worker_processes 1;工作进程数目,与系统核数相符error_log logs/error.log;日志路径,可以使用不同级别 [ debug | info | notice | warn | error | crit ] 例如error_log logs/error.log notice;pid原创 2016-06-21 18:00:37 · 1314 阅读 · 0 评论