自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

分布式应用与服务器架构专栏

成为分布式领域的专家

  • 博客(5)
  • 资源 (38)
  • 收藏
  • 关注
全部文章> 2013年03月
排序：
按最后发布时间
按访问量
RSS订阅
12月 11月 10月 09月 08月 05月 04月 03月 02月 01月

原创 hadoop相关参数对集群的影响

随着HBase的上线带来了一些问题，在调整原来参数的过程中，影响到了之前相关任务的执行过程其中就有个参数：mapred.reduce.parallel.copies 当初上线的时候，设置是20。由于后面在对hbase做相关批量导入数据时，将此值修改成6。然后脚本在运行时在reduce阶段，Read timeOut的超时现象。

2013-03-21 16:40:42 1377 3

原创 各种方式将数据导入到HBase体验

目前随着HBase的上线，需要将各种零散的数据源陆续导入到HBase中。根据自己的使用下来的感受，总结导入方式有以下几种：第一：命令行导入第二：编写MR程序导入第三：采用javaAPI的方式导入第四：使用Sqoop方式导入 第一种很简单。不适合从已存在的数据中导入，就是兼容性不好。第二种细分为三类：总体来说，数据都是放在HDFS上面。第一类使用Tab

2013-03-20 10:44:03 1795 2

转载 Linux lsof使用

lsof（list open files）是一个列出当前系统打开文件的工具。在linux环境下，任何事物都以文件的形式存在，通过文件不仅仅可以访问常规数据，还可以访问网络连接和硬件。在终端下输入lsof即可显示系统打开的文件，因为 lsof 需要访问核心内存和各种文件，所以必须以 root 用户的身份运行它才能够充分地发挥其功能。 [root@master ~]# lsof -p 22

2013-03-12 16:38:00 1064

原创 tune2fs使用

[root@master ~]# tune2fs tune2fs 1.39 (29-May-2006)Usage: tune2fs [-c max_mounts_count] [-e errors_behavior] [-g group]        [-i interval[d|m|w]] [-j] [-J journal_options]        [-l] [-s sp

2013-03-12 15:25:45 1359

原创 编写MR运行在Hbase上面注意事项

最近很久没写blog了，主要精力在搭建和部署Hbase上面。因为对Hbase了解不多，以下碰到的问题都是很基础问题：1、运行MR程序时出现：13/03/07 14:04:58 INFO mapred.JobClient: Task Id : attempt_201303031058_0325_m_000008_0, Status : FAILEDjava.lang.RuntimeE

2013-03-07 16:32:06 8403 20

Java Management Extensions
JMX可以用来管理网络，设备，应用程序等资源，当前规范为1.1版

2009-03-22

J2EE Connector Architecture and Enterprise Application Integration
J2EE Connector Architecture and Enterprise Application Integration

2009-03-22

企业应用架构模式中文版
企业应用架构模式中文版企业应用架构模式中文版企业应用架构模式中文版

2009-03-11

标准建模语言UML教程
UML即统一建模语言，是用来说明面向对象开发系统的产品、为系统建模、描述系统架构、描述商业架构和商业过程的标准建模语言。

2009-03-01

Pattern-Oriented+Software+Architecture_resource.management3
重新上传面向模式的软件体系结构 卷3:资源管理， 之前的下载后不能打开。

2009-01-03

SWT.The.Standard.Widget.Toolkit.Volume.1
SWT.The.Standard.Widget.Toolkit.Volume.1，SWT学习教程

2008-12-09

系统分析与设计技术（软考用书）
系统分析与设计技术（资料非常珍贵 很全面 张友生的）

2008-12-07

Pattern-Oriented+Software+Architecture_resource.management
面向模式的软件体系结构 卷3:资源管理 Pattern-Oriented Software Architecture Volume 3 Patterns

2008-11-22

深入java虚拟机深入java虚拟机
深入JVM，是完整版的，上次只传了部分，给大家带来不便。

2008-11-22

面向模式的软件体系结构 卷1
面向模式的软件体系结构 卷1：模式系统，好东西

2008-11-13

面向模式的软件体系结构 卷3
面向模式的软件体系结构 卷3: 资源管理

2008-11-13

Pattern.Oriented.Software.Architecture.Volume.2
面向模式的软件体系结构 卷2：并发和网络化对象

2008-11-13

Developing java Beans
介绍java.beans包里的内容，并介绍javabean的体系和模型。

2008-10-25

java集群_J2EEClustering
java的集群介绍与原理java的集群介绍与原理java的集群介绍与原理

2008-10-16

java performance Tuning
java性能调整，java编程更高效

2008-07-01

JNDI教程
JNDI（Java Naming and Directory Interface）教程

2008-04-19

java JVM standard
JVM的规范介绍，可能有点老

2008-04-19

java RMI
java的Remote Method Invocation

2008-04-19

spring_ldap
spring_ldap spring_ldap spring_ldap

2010-12-21

Pattern.Oriented.Software.Architecture.Volume.5
面向模式设计架构5面向模式设计架构5面向模式设计架构5

2010-06-26

Pattern.Oriented.Software.Architecture.Volume.4
面向模式架构卷4面向模式架构卷4面向模式架构卷4

2010-06-21

Java-Concurrency-in-Practice
I was fortunate indeed to have worked with a fantastic team on the design and implementation of the concurrency features added to the Java platform in Java 5.0 and Java 6.

2010-02-01

iPhone Open Application Development
Certain technologies bring out everyone's hidden geek, and the iPhone did so instantly upon its release.

2010-01-30

Database Porgramming With Jdbc And Java 2nd Edition
OReilly - Database Porgramming With Jdbc And Java 2nd Edition

2009-11-07

j2me_in_a_nutshell
j2me_in_a_nutshell,j2me_in_a_nutshell

2009-10-23

Java™ Performance and Scalability Volume 1
Java™ Performance and Scalability Volume 1: Server-Side Programming Techniques

2009-10-08

Learning.Python.3rd.Edition
o'reilly Learning.Python.3rd.Edition

2009-09-20

Pattern.Oriented.Software.Architecture.Volume.4
Pattern.Oriented.Software.Architecture.Volume.4 Pattern.Oriented.Software.Architecture.Volume.4

2009-09-05

Game.Programming.with.Python.Lua.And.Ruby
Game.Programming.with.Python.Lua.And.RubyGame.Programming.with.Python.Lua.And.Ruby

2009-08-25

Parsing Techniques - A Practical Guide
Parsing Techniques - A Practical Guide Parsing Techniques - A Practical Guide

2009-08-15

Modern Compiler Implementation in Java Second Edition
Modern Compiler Implementation in Java Second Edition Modern Compiler Implementation in Java Second Edition

2009-08-09

Thinking in C++
Thinking in C++ Thinking in C++ Thinking in C++

2009-07-25

Erlang程序设计语言
本书是讲述下一代编程语言Erlang 的权威著作

2009-07-15

Python数据结构与算法
Python数据结构与算法Python数据结构与算法

2009-07-15

Garbage Collection Algorithms For Automatic Dynamic Memory Management
Garbage Collection Algorithms For Automatic Dynamic Memory Management

2009-04-23

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除