Hadoop
文章平均质量分 65
moxpeter
这个作者很懒,什么都没留下…
展开
-
HBase与Hadoop配置
这里直接cloudera了如果从apache的服务器上下载,hbase 与hadoop的版本需要匹配,版本不匹配会出现n种问题,如master起不来,连不上zookeeper之类的yum install hbase会提示安装hadoop和zookeeper, y回车配置hadoopcore-site.xmlhdfs-site.xmlmapred-site.xml原创 2012-03-29 15:03:23 · 992 阅读 · 0 评论 -
thrift python
download thrift src file http://www.apache.org/dyn/closer.cgi?path=/thrift/0.8.0/thrift-0.8.0.tar.gz或者 svn co http://svn.apache.org/repos/asf/thrift/trunk/ thrift安装依赖程序sudo yum install auto原创 2012-03-28 15:24:14 · 2190 阅读 · 2 评论 -
python访问Hbase
通过thrift访问thrift配置见 http://blog.csdn.net/moxpeter/article/details/7403074确认hbase已经启动thrift服务,如果未启动,报错打印 thrift.transport.TTransport.TTransportException: TSocket read 0 bytescd 到$HBASE/bin执行原创 2012-03-29 17:22:39 · 2155 阅读 · 0 评论 -
cloudera hue
下载hue 1.2以前叫cloudera desktop,使用django作为web框架1. 安装 HADOOP_HOME=/hadoop/hadoop0.20.2 PREFIX=/hadoop/hue make installwaiting .. .. ..执行完会在PREFIX指定的路径下生成hue的服务程序2.配原创 2012-09-06 10:22:17 · 4551 阅读 · 0 评论 -
oozie postgresql
oozie.service.StoreService.jdbc.driver org.postgresql.Driver oozie.service.StoreService.jdbc.url jdbc:postgresql://localhost:5432/oozie oozie.servic原创 2012-09-28 11:15:02 · 749 阅读 · 0 评论 -
intel hadoop manager安装配置
1 准备工作:支持的操作系统包括:RedHat Enterprise Linux、CentOS、Oracle Linux要求系统至少为64位系统,版本6以上。软件安装包 intelhadoop-2.1.1+8483-el6.x86_64.tar.gz系统安装包 CentOS-6.3-x86_64-bin-DVD1.iso,CentOS-6.3-x8原创 2012-11-29 11:44:37 · 2564 阅读 · 1 评论 -
hive mysql config
cp hive-default.xml.template hive-site.xmlhive.metastore.local truejavax.jdo.option.ConnectionURL jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=truejavax.j原创 2012-08-15 15:03:46 · 681 阅读 · 0 评论 -
sqoop mysql Last packet sent to the server was 1 ms ago
sqoop import --connect jdbc:mysql://localhost:3306/ptx --username hadoop --password hadoop --table testsqoop -m 1 --num-mappers 5 --append** BEGIN NESTED EXCEPTION ** java.net.ConnectExc原创 2012-09-27 09:57:16 · 2639 阅读 · 0 评论 -
hadoop base config
$: ssh-keygen -t rsacat ~/.ssh/id_rsa.pub >>~/.ssh/authorized_keyschmod 775 ~/.sshchmod 600 ~/.ssh/authorized_keyscore-site.xmlfs.default.name hdfs://ip:porthadoop.tmp.dir /d原创 2012-06-07 19:42:29 · 594 阅读 · 0 评论