- 博客(21)
- 收藏
- 关注
原创 Using sqoop to move data from mysql to hive
Sqoop only works with CDH3, so we have to install CDH3.To install CDH3 on a Red Hat system:Add the yum repository of your choi
2011-08-08 18:54:25 714
原创 php
1. == vs =====$str = “0d52”;If (0==$str){echo “真”}Else{echo “假”}这个程序运行的结果出人意料, “0d52”居然被PHP认为和0相等了。执行关系运
2011-08-08 18:53:50 472
原创 Automaticlly deploy Hadoop on cluster
尽可能做到全自动配置,但是目前还需要一些手工参与。1. background10台vm10.10.97.150namenode10.10.97.151jobtracker10.10.97.152~
2011-08-08 18:51:55 630
原创 eclipse搭建hadoop 0.20.2开发环境.
1. 两种选择1)使用eclipse-plugin for hadoop遇到的问题 error:“run on hadoop”没反应。eclipse plugin for hadoop is out of date. You have to use e
2011-08-08 18:51:05 876
原创 linux trick
1. check the version of Linux# lsb_release -a2. cp 强制覆盖Linux cp时总询问是否覆盖,怎样让它不询问直接覆盖?有两个方法可以解决此问题:1).bashrc里面注释掉 Alias cp=’cp -i’
2011-08-08 18:50:11 472
原创 .bash_profile vs .bashrc && /etc/profile vs /etc/bashrc
.bash_profile and .bashrcAccording to the bash man page, .bash_profile is executed for login shells, while .bashrc is executed for inter
2011-08-08 18:49:26 695
转载 Insert ASCII Control Characters in Text
http://www.bo.infn.it/alice/alice-doc/mll-doc/linux/vi-ex/node15.html
2011-08-08 18:43:01 459
原创 Scala Programming
1. 函数式编程函数编程的理念:方法没有副作用,计算并返回值是方法的唯一目的。如果某个函数不返回任何有用的值,即返回类型为Unit,那么这个函数唯一能产生的作用就是通过副作用。这不是函数式的风格2. Array, List, TupleArra
2011-08-08 18:41:05 582
原创 mysql远程访问授权
1. 通过phpmyadmin修改mysql数据库的user表2. 通过mysql命令行grant all privileges on *.* to 'username'@remote_host identified by 'password' with grant
2011-08-08 18:40:10 431
转载 linux 查看进程信息
linux 查看进程信息 ps –aux查看进程的命令有很多,我只是列出了我最常用的几个。netstat –tln //查看服务监听端口netstat //查看进程号ps –aux //查看进程号ps –aux | more //全部查看
2011-08-08 18:39:47 826
原创 设置Cloudera CDH3源镜像(Redhat)
1. 获取镜像,保存到/opt/mirror/cdh3/目录wget -mirror http://archive.cloudera.com/redhat/cdh/3/删除掉其中无用的网页信息。2. 获取gpg-keycloudera-cdh3-gpg
2011-08-08 18:35:55 2969
原创 xampp error: XAMPP is currently only availably as 32 bit application. Please use a 32 bit compatibil
centos 5.4 64位系统上运行,查看glibc安装好了。运行命令/opt/lampp/bin/php出错:./lampp/bin/php: error while loading shared libraries: /opt/lampp/lib/libsybd
2011-08-08 18:32:34 5438
转载 FreeBSD下MongoDB数据库的安装
MongoDB是C++开发的一款开源、无模式的文档型数据库,具有高性能、易部署、易使用、数据存储方便等特点;MongoDB采用Bson(binary json)的形式存储数据,无锁,无事务,有索引,支持集群和分片功,可动态增删结点。 实验环境: 系统:FreeBSD 8.
2011-08-08 18:24:52 2481
转载 Using IntelliJ IDEA to develop Lift applications
Using IntelliJ IDEA to develop Lift applicationsAt the moment (in absence of a proper Lift plug-in for IntelliJ), you can use IntelliJ
2011-08-08 18:24:11 1110
原创 MongoDB
1. MongoDB In MongoDB there are no server-side joins. Generally, you will want one database collection for each of your top
2011-08-08 18:23:13 492
原创 京东买书后
今天京东0.618活动,一口气买了14本书。把存在豆瓣、当当、卓越上的收藏都一扫空。买完回头跟罗总探讨了一下为什么书这么便宜的问题。 早之前看到京东CEO刘强东发的微博,痛批中国出版业的问题。现在想想问题确实很大。中国的人文类的书(其它的书没有怎么买过,不做评价)
2011-08-08 18:21:25 741
原创 项目启发
做一个项目之前首先搞清楚一下几点:1. 为什么做?2. 创新点在哪里?3. 有没有现成的开源架构能够简化我们的工作?非常重要的一点。特别是当你面对的是一个全新的项目,没有任何直接的经验的时候,尤其重要。开源的项目都是相互借鉴,考虑到了很多细
2011-08-08 18:16:21 626
转载 php thrift for HBase
1. Download thriftwget -O thrift.tgz “http://gitweb.thrift-rpc.org/?p=thrift.git;a=snapshot;h=HEAD;sf=tgz”tar -xzf thrift.tgzcd thri
2011-08-08 18:15:05 1113
原创 Hadoop Tricks
1. 常见写错误,所在的用户没有hdfs的写权限Solution: 如果你不关心写权限的话,关闭它。在hdfs-site.xml中添加如下dfs.permissionsfalse2. hadoop网络接口50030 jobtracker50
2011-08-08 18:14:08 447
原创 CDH3 Install Guide
CDH3 Install Guide1 Install Hadoop1.1 Add user hadoop[root@gd02 ~]# adduser hadoop使用vim在/etc/group中将hadoop用户添加到mapred和hdfs组;将mapred和hdfs用户添加到hadoop组。hadoop:x:105:mapred,hdfsh
2011-08-08 18:13:38 932
原创 vim
1. vim set colorscheme colorscheme elflord colorscheme darkblue colorscheme evening colorscheme murphy colorscheme torte color
2011-08-08 18:12:23 494
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人