自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

lskyne的专栏

技术的价值不在于这个技术有多么高超,而在于技术本身给我们带来什么价值。

  • 博客(380)
  • 资源 (1)
  • 收藏
  • 关注

原创 python之正则匹配

日志格式如下:115.245.164.176 - - [10/Mar/2015:10:57:29 +0800] "GET /s/0/8/20150226104330a393ea_com.tapinator.city.car.stunts3d_1.0.apk?sid=2afd95be-dd78-4136-802a-5f95a87be8f2&gid=534042&fz=37443420&t=0&p

2015-03-12 17:15:47 2836

转载 import,reload,__import__在python中的区别

转自:http://blog.csdn.net/five3/article/details/7762870import作用:导入/引入一个python标准模块,其中包括.py文件、带有__init__.py文件的目录。e.g:[python] view plaincopyimport module_name[,module1,..

2014-10-07 14:30:15 2893

转载 python分割和拼接字符串

转自:http://www.jb51.net/article/42644.htmpython分割和拼接字符串的实例,使用了string的split和join 方法,并对这二个方法做说明。

2014-09-28 19:33:56 4164

转载 Python时间,日期,时间戳之间转换

1.将字符串的时间转换为时间戳    方法:        a = "2013-10-10 23:40:00"        将其转换为时间数组        importtime        timeArray = time.strptime(a, "%Y-%m-%d %H:%M:%S")    转换为时间戳:  

2014-09-28 19:32:14 10966

转载 python中如何调用shell

转自:http://blog.sina.com.cn/s/blog_5357c0af0100yzet.htmlpython调用shell命令的方法有许多1.1   os.system(command)       在一个子shell中运行command命令,并返回command命令执行完毕后的退出状态。这实际上是使用C标准库函数system()实现的。这个函数在执行co

2014-09-28 19:30:28 2444

转载 python 去除文件中多个换行

转自:http://yiyunyaya.blog.163.com/blog/static/1654496362013265749168/今天在博客园中看到一篇博文《python 去除多个换行》,试了作者的方法后,与之有很大的差别(不知道是不是由于用的python版本不同,我用的是Python 2.4.3),写出来与大家分享!输入文件:XXX手机:1XXXXXX邮

2014-09-28 19:28:28 8890

转载 Python 获得命令行参数的方法

转自:http://yiyunyaya.blog.163.com/blog/static/1654496362013266848952/

2014-09-28 19:23:46 2333

原创 jobengine使用

python /home/games_intl/jobengine/bin/jobengine.py http://10.16.139.229:8080/meta/jobengine games_intl@appserver

2014-09-16 13:45:37 2236

原创 git使用总结

设置用户,邮箱,[hutx@space1 ~]$ git config --global user.name hutx[hutx@space1 ~]$ git config --global user.email [email protected]

2014-09-14 13:44:57 5012

转载 Mongodb数据导出工具mongoexport和导入工具mongoimport介绍

转自:http://chenzhou123520.iteye.com/blog/1641319一、导出工具mongoexportMongodb中的mongoexport工具可以把一个collection导出成JSON格式或CSV格式的文件。可以通过参数指定导出的数据项,也可以根据指定的条件导出数据。mongoexport具体用法如下所示:Shell代码  

2014-09-11 21:11:29 2647

原创 Python学习笔记一

一、字典的使用

2014-09-11 11:17:55 2014

原创 MongoDB基本管理命令

目录(?)[-]MongoDB命令帮助系统基本命令及实例一基本命令二基本DDL和DML三启动与终止四安全管理五数据备份恢复与迁移管理六远程连接管理MongoDB是一个NoSQL数据库系统:一个数据库可以包含多个集合(Collection),每个集合对应于关系数据库中的表;而每个集合中可以存储一组由列标识的记录,列是可以自由定义的,非常灵活,由一组列标识的实体

2014-09-11 10:41:07 2129

转载 CentOS 查看硬件信息

转自:1、centos 下查看硬件信息内容非常全面。CentOS常用命令查看cpumore /proc/cpuinfo | grep “model name”grep “model name” /proc/cpuinfo[root@localhost /]# grep “CPU” /proc/cpuinfomodel name : Intel(R) Pentium(

2014-09-05 10:09:12 6802

转载 zookeeper编程(二)

转自:http://www.cnblogs.com/zhangchaoyang/articles/3813217.htmlZooKeeper的轮廓/---root  |  \----child1  |  \----child2  |  \----child3     |     \----grandson1

2014-09-05 10:01:22 3485

转载 ZooKeeper编程(一)

杂记ZooKeeper的用途:distributed coordination;maintaining configuration information, naming, providing distributed synchronization, and providing group services.Zookeeper的节点都是存放在内存中的,所以读写速度很快。更新日志被记录到了磁

2014-09-05 09:16:32 2315

转载 Hadoop 新 MapReduce 框架 Yarn 详解

转自:原 Hadoop MapReduce 框架的问题对于业界的大数据存储及分布式处理系统来说,Hadoop 是耳熟能详的卓越开源分布式文件存储及处理框架,对于 Hadoop 框架的介绍在此不再累述,读者可参考 Hadoop 官方简介。使用和学习过老 Hadoop 框架(0.20.0 及之前版本)的同仁应该很熟悉如下的原 MapReduce 框架图:图 1.Hado

2014-09-04 15:19:21 2346

转载 基于Zookeeper的分步式队列系统集成案例

转自:http://www.aboutyun.com/thread-9004-1-1.html

2014-09-04 15:02:44 2967

转载 ssh-keygen 的 详解

转自:http://blog.csdn.net/wh_19910525/article/details/7433164

2014-09-04 10:04:35 2050

转载 php通过 thrift访问hadoop的hive

转自:http://blog.csdn.net/gs_zhaoyang/article/details/13503527

2014-09-03 17:34:39 2844

转载 avro学习二

Avro(读音类似于[ævrə])是Hadoop的一个子项目,由Hadoop的创始人Doug Cutting(也是Lucene,Nutch等项目的创始人,膜拜)牵头开发,当前最新版本1.3.3。Avro是一个数据序列化系统,设计用于支持大批量数据交换的应用。它的主要特点有:支持二进制序列化方式,可以便捷,快速地处理大量数据;动态语言友好,Avro提供的机制使动态语言可以方便地处理Avro数据。 

2014-09-03 14:50:38 4199

转载 avro学习入门一

http://avro.apache.org/docs/1.7.7/gettingstartedjava.html#Defining+a+schema

2014-09-03 14:42:40 1296

转载 分布式消息队列kafka系列介绍 — 核心API介绍及实例

转自:http://www.inter12.org/archives/834

2014-09-02 17:52:16 9056

转载 Eclipse上GIT插件EGIT使用手册

转自:一_安装EGIT插件 http://download.eclipse.org/egit/updates/或者使用Eclipse Marketplace,搜索EGit二_使用EGIT前的配置配置个人信息,最重要的是user.name和user.email

2014-09-01 12:41:00 761

转载 linux文件的三个主要的修改时间

Linux文件有3个修改时间,很多朋友都喜欢弄混淆,也包括我在内,现在列出来供参考。   1)modification time (mtime,修改时间):这个时间指的是文件内容修改的时间,而不是文件属性的修改,当数据内容修改时,这个时间就会改变,用命令ls -l默认显示的就是这个时间:   2)status time (ctime,状态时间):当一个文件的状态改变时,这个时间就会改变,例

2014-08-29 13:27:47 774

转载 Java RandomAccessFile用法

目录(?)[-]RandomAccessFile内存映射文件RandomAccessFileRandomAccessFile是用来访问那些保存数据记录的文件的,你就可以用seek( )方法来访问记录,并进行读写了。这些记录的大小不必相同;但是其大小和位置必须是可知的。但是该类仅限于操作文件。RandomAccessFile不属于InputStream和Out

2014-08-27 19:24:38 690

转载 Java命令行运行参数说明大全

转自: Java在运行已编译完成的类时,是通过java虚拟机来装载和执行的,java虚拟机通过操作系统命令JAVA_HOME"bin"java –option 来启动,-option为虚拟机参数,JAVA_HOME为JDK安装路径,通过这些参数可对虚拟机的运行状态进行调整,掌握参数的含义可对虚拟机的运行模式有更深入理解。一、         查看参数列表:虚拟机参数分为基本

2014-08-26 10:02:10 779

转载 CENTOS在输入ifconfig命令时,提示没有命令的处理方法

转自:http://www.cnblogs.com/JemBai/archive/2011/05/13/2045813.html今天在虚机上装了个CENTOS。装好后,好多命令都提示找不到。百度后,问题解决。将处理方法记录下来,以备日后使用。------------------------------------无敌分割线----------------------------

2014-08-26 09:38:45 7315

转载 Linux关闭蜂鸣声

转自:http://blog.sina.com.cn/s/blog_6cccc1830100mvnb.html临时的方案sudo rmmod pcspkr 对于CentOS/Redhat/RHEL/Fedora系统,使用root身份执行:rmmod pcspkr一劳永逸的方案sudo echo "blacklist pcspkr" >> /etc/m

2014-08-26 09:33:25 5046 1

转载 Flume 实战(2)--Flume-ng-sdk源码分析

转自:http://www.cnblogs.com/mumuxinfei/p/3823266.html

2014-08-20 16:37:41 4575

转载 文件的时间属性

转自:http://blog.itpub.net/58054/viewspace-778770/  mtime,atime,以及ctime.       unix系统为每个文件都记录这三个不同的时间,第一个是mtime,即修改时间。无论何时,只要文件内容被改变,mtime的值就会被相应修改。第二个是atime,即访问时间。只要文件被访问(比如运行或读取),它就会被修改。第三个是ctim

2014-08-20 16:29:46 879

转载 CAP理论和BASE模型

转自:http://blog.itpub.net/58054/viewspace-660826/

2014-08-20 16:29:45 1258

转载 JWS框架学习一

新建项目,转换eclipse项目,记录:

2014-08-19 14:42:24 1992

转载 HDFS的一致性分析

转自:http://coderplay.iteye.com/blog/1067463在分析HDFS的一致性之前, 我们先得解决HDFS客户端行为的几个问题。 1. 为什么HDFS不支持多个writer同时写一个文件,即不支持并发写? 首先谈一谈HDFS产生的历史。HDFS是根据Google的GFS论文所实现的, 初期时它的主要设计目标是为了存储MapReduce所操作的大型数据集。

2014-08-18 14:28:38 1868

原创 hadoop常见问题wikiFAQ

http://wiki.apache.org/hadoop/FAQ3.10. What happens when two clients try to write into the same HDFS file?HDFS supports exclusive writes only. When the first client contacts the name-node to open

2014-08-18 14:25:31 898

原创 java时间处理

设置时区,同一个h不同时区下的转换

2014-08-17 15:41:10 813

转载 log4j与commons-logging,slf4j的关系

转自:http://blog.sina.com.cn/s/blog_9ed7f0d70101l6z1.html前面有一篇日志中简单的介绍了 log4j,同时也介绍了它与commons-logging的关系,但是突然冒出来一个slf4j,并且slf4j有取代commons-logging的趋势,所以,我们可以推知slf4j与commons-logging的作用应该相差不大的。 好,下面开始先

2014-08-12 20:43:59 965

转载 java中遍历一个Map

转自:http://blog.csdn.net/jiafugui/article/details/5182113

2014-08-08 19:54:04 1631

转载 多进程log4j日志丢失问题分析

转自:http://hellojavaer.iteye.com/blog/977599

2014-08-08 19:52:53 9435

转载 通过JDBC驱动连接Hive操作实例

转自:http://www.aboutyun.com/forum.php?mod=viewthread&tid=7083&highlight=hive本帖最后由 pig2 于 2014-3-8 01:16 编辑我们在编程过程中数据库连接比较常用的,如果连接hive可以作为参考:虽然内容较短,但是里面仍有文章:1.连接涉及到那些包?2.Class.

2014-08-07 23:45:55 6365 1

转载 hive表信息查询:查看表结构、表操作等

转自:问题导读:1.如何查看hive表结构?2.如何查看表结构信息?3.如何查看分区信息?4.哪个命令可以模糊搜索表

2014-08-07 23:45:13 143668 1

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除