cxin917的专栏

转载 使用Ambari快速部署Hadoop大数据环境

作者:杨鑫奇前言做大数据相关的后端开发工作一年多来,随着Hadoop社区的不断发展,也在不断尝试新的东西,本文着重来讲解下Ambari,这个新的Apache的项目,旨在让大家能够方便快速的配置和部署Hadoop生态圈相关的组件的环境,并提供维护和监控的功能.作为新手,我讲讲我自己的学习经历,刚刚开始学习的时候,当然最简单的 Google 下Hadoop ,然后下载相关的包,

转载 hadoop 2.0 详细配置教程

作者：杨鑫奇PS：文章有部分参考资料来自网上，并经过实践后写出，有什么问题欢迎大家联系我。update: 20130518 大家可以尝试下Ambari来配置Hadoop的相关环境快速的部署Hadoop,Hbase和Hive等并提供Ganglia和Nagios的监控功能,强烈推荐使用.http://www.cnblogs.com/scotoma/archive/2013/05/1

转载 VS2012及帮助(MSDN离线版)文档官网下载

MSDN离线版 发现不少人都在找这个，无意中找到VS2012旗舰版 选好语言，建议选那个ISO的下载

转载 电脑光驱不见了（错误代码39 黄色感叹号）的解决办法

系统重装以后，突然发现我的电脑里CD-ROM光驱盘符不见了；打开设备管理器找到光驱，上面显示黄色感叹号 错误提示windows无法加载驱动程序 （错误代码39）如图：DVD-ROM光驱在windows下是不需要驱动的，这我就郁闷了，以前可从来没碰到过这样的情况。难道是我的光驱坏了，应该不会，去年12份才买的新光驱，不可能坏！我想，可能是数据线的问题；于是我把光驱的数据接口换了个

转载 数据库范式——通俗易懂

数据库范式是数据库设计中必不可少的知识，没有对范式的理解，就无法设计出高效率、优雅的数据库。甚至设计出错误的数据库。而想要理解并掌握范式却并不是那么容易。教科书中一般以关系代数的方法来解释数据库范式。这样做虽然能够十分准确的表达数据库范式，但比较抽象，不太直观，不便于理解，更难以记忆。       本文用较为直白的语言介绍范式，旨在便于理解和记忆，这样做可能会出现一些不精确的表述。但对于初学者

转载 You must SET PASSWORD before executing this statement解决

参考前文利用安全模式成功登陆，然后修改密码，等于给MySql设置了密码。登陆进去后，想创建一个数据库测试下。得到的结果确实：ERROR 1820 (HY000): You must SET PASSWORD before executing this statement非常诡异啊，明明用密码登陆进去了，怎么还提示需要密码。参考官方的一个文档，见http://dev.mysql.com/

转载 解决mysql“Access denied for user 'root'@'localhost'”

# mysql -uroot -pEnter password:ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO)使用网上介绍的方法修改root用户的密码：# mysqladmin -uroot -p password 'newpassword'Enter pa

转载 LGPL、Mozilla、GPL、BSD、MIT and Apache（一张图说明白）

原创 使用maven编译YCSB0.1.4对cassandra进行性能测试

Yahoo! Cloud Serving Benchmark (YCSB) 是 Yahoo 公司的一个用来对云服务进行基础测试的工具。目标是促进新一代云数据服务系统的性能比较。目前支持对：Cassandra,、HBase、mongodb、redis和简单的分片式MySQL执行测试，制订了一套核心基准测试和结果报告。详见https://github.com/brianfrankcooper/YCSB

原创 maven编译ycsb0.1.4支持针对hbase性能测试，解决not a host:port pair问题，附下载地址

Yahoo! Cloud Serving Benchmark (YCSB) 是 Yahoo 公司的一个用来对云服务进行基础测试的工具。目标是促进新一代云数据服务系统的性能比较。目前支持对：Cassandra,、HBase、mongodb、redis和一个简单的片式MySQL执行测试，制订了一套核心基准测试和结果报告。最近在学习hbase，采用的测试环境是hadoop1.0.0、hbas

转载 8种Nosql数据库系统对比

导读：Kristóf Kovács 是一位软件架构师和咨询顾问，他最近发布了一片对比各种类型nosql数据库的文章。文章由敏捷翻译 – 唐尤华编译。如需转载，请参见文后声明。虽然SQL数据库是非常有用的工具，但经历了15年的一支独秀之后垄断即将被打破。这只是时间问题：被迫使用关系数据库，但最终发现不能适应需求的情况不胜枚举。但是NoSQL数据库之间的不同，远超过两 SQL数据库之间的差

转载 hadoop权威指南中的ncdc数据下载地址及命令

如题：给出hadoop权威指南--NCDC1929-2011数据下载地址ftp://ftp.ncdc.noaa.gov/pub/data/gsod/命令：The data are available via:1) WWW -- http://www.ncdc.noaa.gov/cgi-bin/res40.pl?page=gsod.html2)

转载 计算机管理常用命令

compmgmt.msc－－－计算机管理 diskmgmt.msc－－－磁盘管理实用程序calc－－－－－－－－－－－启动计算器 dfrg.msc－－－－－－－磁盘碎片整理程序devmgmt.msc－－－ 设备管理器 mstsc－－－－－－远程桌面连接drwtsn32－－－－－－ 系统医生 msinfo32---------系统信息dxdiag－－－－－－－－－检查DirectX信

转载 用Windows Storage Server 2008做iSCSI存储服务器

用Windows Storage Server 2008做iSCSI存储服务器Windows Storage Server 2008（以下简称WSS2008）是Windows Server 2008系列中的存储服务器版本，是企业级的文件服务器平台，支持多Administrator文件存储相关的优化特性、副本管理，以及iSCSI功能。简单来说，就是可以在普通的服务器上，安装上WSS2008,

转载 为vSphere主机和win主机添加storage server 2008创建的iscsi磁盘

为vSphere主机和win主机添加storage server 2008创建的iscsi磁盘     前言:本文所用到的iscsi均为pc架构的iscsi,按字面的意思可以理解为存储设备建立在PC服务器的基础上。即就是选择一个普通的、性能优良的、可支持多块磁盘的PC（一般为 PC服务器和工控服务器），选择一款相对成熟稳定的iSCSI target软件，将iSCSI Target软件安装在

转载 linux sudo 命令详解

“Sudo”是Unix/Linux平台上的一个非常有用的工具，它允许系统管理员分配给普通用户一些合理的“权利”，让他们执行一些只有超级用户或其他 特许用户才能完成的任务，比如：运行一些像mount，halt，su之类的命令，或者编辑一些系统配置文件，像/etc/mtab，/etc /samba/smb.conf等。这样以来，就不仅减少了root用户的登陆次数和管理时间，也提高了系统安全性。

原创 普通用户之间的ssh无密码访问设置方法

两台CentOS6.2服务器，客户端是node1，服务器是node2，先都用root用户配置，方法如下：第一步：在客户端Node1：生成密匙对，我用的是rsa的密钥。使用命令 "ssh-keygen -t rsa"生成的过程中提示输入密钥对保存位置，直接回车，接受默认值就行了。接着会提示输入一个不同于你的password的密码，直接回车，让它空着。其中公共密钥保存在 ~/.

转载 实现Windows与VMware下Linux的文件共享 VMware Tools 安装

这里以Windows XP、VMware Workstation 5.5.2、RedHat Linux9.0为例，其它环境类似。 1. 准备工作 打开VMware WorkStation，并启动RedHat Linux，startx切换到图形窗口VMware5 安装目录下有 linux.iso ，这个就是安装文件，CDROM挂载这个ISO选择菜单VM->Install VMware

转载 hadoop 1.0.1 安装详解-新手必备

准备：通过修改/etc/sysconfig/network-scripts/ifcfg-eth0 ，配置ip等信息 vi /etc/hosts172.16.16.1          hdfs1设置master到任意节点的无密码登录Enter file in which to save the key (/root/.ssh/id_rsa): Ent

转载 数学字符对照读法

大写 小写 英文注音 国际音标注音 中文注音 Α α alpha alfa 阿耳法 Β β beta beta 贝塔 Γ γ gamma gamma 伽马 Δ δ deta delta 德耳塔 Ε ε epsilon epsilon 艾普西隆 Ζ ζ zeta zeta 截塔 Η η eta eta 艾塔 Θ θ theta θita 西塔 Ι ι iota i

原创 为vc按钮添加背景颜色和字体颜色

可以通过重载WM_DRAWITEM消息来实现，具体函数如下所示：void CBtncolorDlg::OnDrawItem(int nIDCtl, LPDRAWITEMSTRUCT lpDrawItemStruct) {// TODO: Add your message handler code here and/or call defaultif(nIDCtl==IDC_BUTT

原创 最新版Visual Assist X如何支持vc6和vs2003

今天安装了最新版本的Visual Assist X1901，发现vc6和vs2003无法识别该工具，经过研究，得到方法如下，和大家分享。准备工作：安装Visual Assist X并破解（下载地方可以百度一下）一、vc6.0中Visual Assist X的安装配置方法1.单击Tool/Customize/Add-ins and Macro Files中Browse的按钮

转载 yum下载文件的存放位置

默认是： /var/cache/yum也可以在 /etc/yum.conf 指定cachedir=/var/cache/yum #存放目录keepcache=1 ＃1为保存 0为不保存metadata_expire=1800 ＃过期时间

转载 centos下安装moosefs客户端

（一）安装MFS客户端◆Mfsmount需要依赖FUSE,因此需要先安装好fuse，这里我选用 fuse-2.7.4.tar.gz。1、解包 tar zxvf fuse-2.7.4.tar.gz2、切换目录 cd fuse-2.7.4.3、配置 ./configure4、编译安装 make；make install如果系统已经安装了fuse,则跳过这个步骤。◆安装M

转载 如何使用yum给Xen Server装上GCC

在默认情况下，Xen Server不允许利用yum自动安装GCC，这让我们在服务器上安装、编译一些程序的时候很麻烦！有没什么方法能安装？By default CentOS base repositories won’t be configured on XenServer. To compile and install nagios/bacula or any other app on s

转载 cent os nfs

最近想把Web应用的网页文件，数据库和上传文件三部分分离。这样网页文件可以部署在虚拟机上，而且除非修改页面内容，是不需要多次备份的。数据库和上传文件部分可以放在实体服务器上，即便系统崩溃，只要硬盘没有坏，就能很快地恢复数据。上传文件如果和网页文件在不同的机器上，可以使用NFS来实现。1. 准备工作：用NFS-Client表示Web应用所在的机器，其IP为Client_IP；用NFS-Ser

转载 如何在Linux Mint中开启3D桌面（利用compiz）

1 Install Compiz（安装compiz）To install Compiz and all its components, open a terminal (Applications > Accessories > Terminal) and enter following:sudo apt-get install compiz compiz-pluginscompiz-p

转载 Ubuntu中wine中文乱码的解决方法

新装的wine中文全是乱码，需要修改一下几个配置文件，找到一篇比较详细的配置说明，分享一下：" wine下中文的配置方案步骤：1. 初始设置运行 winecfg，把模拟的 Windows 系统设置为 Windows XP 或者 Windows 2000。2. 准备字体为了让 Windows 应用程序看上去更美观，所以需要 Windows 下面的字体。由于我已经将 sim

转载 Avast For Linux升级后出现的问题解决方法

在Mint 12下安装了Avast 4 for Linux，发现病毒库版本是2009年的，可是在升级了杀毒数据库结束后，出现“An error occured in avast! engine: é?????????????”问题，杀毒不能使用，卸载以后重新安装升级，仍然还是这个情况。很奇怪。在网上搜索了很久，好不容易在国外一个英文网站找到了一个相似问题的解决办法，www.linuxidc.com

转载 64位Ubuntu下如何安装32位程序（也适用于Mint）

今天在Mint 64位下安装avast，强制安装成功后总是无法执行，查看了论坛后解决，总结步骤如下：1. 首先安张32位库    sudo apt-get install ia32-libs*    sudo apt-get install getlibs  （如果没有，到这个地址下http://frozenfox.freehostia.com/cappy/）2.后就可以安装32位

原创 iReport与JasperReport中如何支持文支持显示

<br />最近在使用grails开发程序，需要生成报表，我选择了用iReport与作为报表产生工具时, 在输入中文的时候总是无法正常显示，我的ireport的版本是3.7。后来经过网上查询自己测试，总结如下：<br /> <br />无法显示中文是因为ireport是使用itext来实现生成pdf的，其中又需要iTextAsian.jar 的支持。最新版本的iReport已经将iText和iTextAsian放在了安装目录的/report/modeues/ext/目录下，但是并没有关联上，需要做如下操作：

转载 在Tomcat中部署Java Web应用程序(转)

在Tomcat中部署Java Web应用程序有两种方式：静态部署和动态部署。在下文中$CATALINA_HOME指的是Tomcat根目录。 <br />一、静态部署 <br />     静态部署指的是我们在服务器启动之前部署我们的程序，只有当服务器启动之后，我们的Web应用程序才能访问。以下3中方式都可以部署： <br />    1、将PetWeb目录拷贝到$CATALINA_HOME/webapps下，然后启动服务器就可以了。这种方式比较简单，但是web应用程序必须在webapps目录下。访问地址如下

转载 grails中Quartz CronTrigger最完整配置说明（ZT）

CronTrigger配置格式:格式: [秒] [分] [小时] [日] [月] [周] [年] 序号说明  是否必填 允许填写的值允许的通配符  1 秒 是 0-59   , - * / 2 分 是 0-59   , - * / 3小时 是 0-23  , - * / 4 日 是 1-31  , - * ? / L W 5 月 是 1-12 or JAN-DEC  , - * / 6 周 是 1-7 or SUN-SAT  , - * ? / L # 7 年 否 empty 或 1970-2099 , -

原创 grails中多重查询及其显示方法

<br /> <br />grails中createCriteria功能强大，可以实现比findBy更为灵活的查询方式，但是查询后如何实现显示并分页，经过摸索，得到如下可用代码：<br /> <br />def carNum = params.carNum<br />    def carDriver = params.carDriver<br />    def carType = params.carType<br />    def carStatus = params.carStatus<br />

转载 网络访问攻防战二之代理服务器篇

在上一篇《网络访问攻防战》中说到，在很多大型企业中和有些国家中，为了限制员工或人民访问某些网站或使用某些网络应用程序，通常做了一些访问限制。限制的方法通常有路由器IP过滤和强制使用代理服务器等几种方式。那么，本篇主要讲述使用代理服务器进行网络访问时的攻防战。　　通过代理服务器进行网络访问的很多情况，和直接访问网络的情况十分相似。代理服务器能做到不使用代理服务器的所有过滤方式，这些过滤方式在上一篇中已经有了详细地说明，唯一的区别是网络访问的攻防全部在代理服务器上进行。也就是说，如果你希望应用直接访问网络的访问

转载 网络访问攻防战

<br />在很多大型企业中和有些国家中，为了限制员工或人民访问某些网站或使用某些网络应用程序，通常做了一些访问限制。限制的方法通常有路由器IP过滤和强制使用代理服务器等几种方式。<br />　　路由器IP过滤指的是通过在路由器中加入外网或国外的IP黑名单，使得内网或国内无法访问外网或国外的这些IP，达到限制访问的目的。强制使用代理服务器的过滤方式通常只在大型企业中应用，指的是内网必须通过代理服务器才能访问外网，那么在代理服务器上可以实现更为复杂的过滤机制。本文主要讲述IP过滤的攻防战，关于代理服务器的攻防

转载 Gails中的GORM的关系

5.2.1.1 One-to-one<br />A one-to-one relationship is the simplest kind, and is defined trivially using a property of the type of another domain class. Consider this example: <br /> Example A<br /> class Face { Nose nose}class Nose {}<br />In thi

转载 Win7安vc2008编译报LINK : fatal error LNK1000: Internal error during IncrBuildImage

<br />Win7安vc2008编译报LINK : fatal error LNK1000: Internal error during IncrBuildImage<br /><br />环境：<br /><br />Windows 7 Ultimate x64 version <br />Microsoft Visual Studio 2008 SP1 (VC++ 2008) <br /><br />返回错误：LINK : fatal error LNK1000: Internal error dur

转载 vc下error C2011: 'DataTypeEnum' : 'enum' type redefinition解决方法

<br />1>------ 已启动生成: 项目:sutest, 配置: Debug Win32 ------<br />1>正在编译...<br />1>sutest.cpp<br />1>f:/c++ pro/iocptser/debug/msado15.tlh(228) : error C2011: “LockTypeEnum”: “enum”类型重定义<br />1>        c:/program files/microsoft sdks/windows/v6.0a/include/dbdao

转载 IntelliJ IDEA 快捷键

<br />常用快捷键：Alt+回车 导入包,自动修正<br />Ctrl+N   查找类<br />Ctrl+Shift+N 查找文件<br />Ctrl+Alt+L  格式化代码Ctrl+Alt+O 优化导入的类和包<br />Alt+Insert 生成代码(如get,set方法,构造函数等)<br />Ctrl+E或者Alt+Shift+C  最近更改的代码<br />Ctrl+R 替换文本Ctrl+F 查找文本<br />Ctrl+Shift+Space 自动补全代码<br />Ctrl+空格 代码