- 博客(15)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 未解决问题2_Unknown rpc kind RPC_WRITABLE
在CLI中使用hive 执行引起起 MapReduce 任务的查询时报错，因为还么解决，贴出完整异常：hive> select count(*) from table;Total MapReduce jobs = 1Launching Job 1 out of 1Number of reduce tasks determined at compile time: 1In order t
2013-08-30 12:04:36
2646
3
原创 hive 存储格式和压缩方式 一：Snappy + SequenceFile
1、设置三个参数：hive.exec.compress.output 声明对 hive 查询的输出结果进行压缩，并指定压缩方式为 Snappy。对SequenceFile 有 mapred.output.compression.type，在CDH4中默认就是 BLOCK。SET hive.exec.compress.output=true;SET mapred.output.com
2013-08-30 02:15:38
13865
原创 hive 中的异常：1、ClassNotFound
原来用 hive shell 时从没考虑过在哪个目录下使用，有时候在不同目录下还是有区别的，如下面异常，只要换个目录再运行就没这个问题了：[apache@indigo hive]$ pwd/home/apache/diary/0829/hdp_manual_install_rpm_helper_files-2.0.0.22/configuration_files/hive[apache@i
2013-08-29 23:33:07
5137
1
原创 hive：MoveTask
运行SQL时出了个错：SQL： INSERT OVERWRITE DIRECTORY 'result/testConsole' select count(1) from nutable; 错误信息：Failed with exception Unable to rename: hdfs://indigo:8020/tmp/hive-root/hive_2013-08-22_17-35-05
2013-08-22 21:08:51
10364
1
原创 eclipse
eclipse 竟然出这么个错误：Could not save master table to file '/home/apache/dev/workspaces/kepler/space1/.metadata/.plugins/org.eclipse.core.resources/.safetable/org.eclipse.core.resources'./home/apache/
2013-08-19 00:43:48
3770
原创 NameNode 启动错误
2013-08-18 21:21:10,877 FATAL org.apache.hadoop.hdfs.server.namenode.NameNode: Exception in namenode joinjava.net.BindException: Problem binding to [indigo:8020] java.net.BindException: Cannot assign
2013-08-18 21:26:25
3065
原创 fastjson parseArray
一个项目，主要逻辑由你写，完成差不多了，也不经测试，直接丢给别人，你有这么爽过吗。我反正没有，而且，我就是那个擦屁股的原本项目用的jackson，一同事解析json时却用了fastjson，还把JSON.parseArray 用错了，着实郁闷了我一把@Test public void testJson() throws IOException { String str = "
2013-08-13 23:25:22
15780
原创 hive 备忘1
调试前先确定 hive shell 能正常工作，今天因为这个多花了很长时间有两个 RunJar进程并不表示HiveServer 运行正常，可查看服务状态来确定/etc/init.d/hive-server2 status自己加的HOOK中访问的Web工程地址是局域网地址，总是访问不到，才发现启动JBOSS要加参数 -b 0.0.0.0
2013-08-13 18:14:40
3188
原创 hive 调用栈
at org.apache.hadoop.hive.ql.Driver.execute(Driver.java:1108) at org.apache.hadoop.hive.ql.Driver.run(Driver.java:973) at org.apache.hadoop.hive.ql.Driver.run(Driver.java:893) at org.apache.hadoop.
2013-08-13 00:49:11
919
原创 Driver.run 备忘
StartHookPreHookPostHookFinishHookFailureHook1、Driver.run 逻辑：执行hook, 编译SQL，执行SQL，执行hook。此处读的hook 的配置：hive.exec.driver.run.hookspublic CommandProcessorResponse run(String command, bo
2013-08-13 00:23:38
1224
原创 编译 hive
这里下载代码：https://github.com/cloudera/hive/tree/cdh4-0.10.0_4.3.0修改build.properties在http://www.apache.org/dyn/closer.cgi/hadoop/core/ 中为 hadoop.mirror 找个地址 eclipse 安装 ivy 插件编译 ：
2013-08-12 21:44:05
2544
原创 JBOSS
/home/yuming/dev/appserver/jboss-eap-5.1/jboss-as/server/default/deploy/jbossweb.sar/server.xml
2013-08-08 15:42:55
1965
原创 Installing the Fluendo MP3 plugin
https://fedoraproject.org/wiki/Installing_the_Fluendo_MP3_plugin?rd=Multimedia/fluendo-mp3下来后是个rpm,装完 Rhythmbox 就能播放mp3了,不过有乱码问题[root@localhost Downloads]# rpm -i fluendo-codecs-mp3-18-3.x86_6
2013-08-04 23:58:28
994
原创 安装MOC————TODO
没装成功 日后再说[yuming@localhost 0804]$ yum install ncurses-devel.x86_64[root@localhost tmp]# yum install ncurses-libs.i686[yuming@localhost tmp]$ wget http://ftp.daper.net/pub/soft/moc/st
2013-08-04 23:33:38
1033
原创 debug 错误
刚想DEBUG，而且是本地DEBUG，出来这么个错：ERROR: transport error 202: connect failed: No route to hostERROR: JDWP Transport dt_socket failed to initialize, TRANSPORT_INIT(510)JDWP exit error AGENT_ERROR_TRANSPORT
2013-08-04 15:32:59
1304
点对点消息模型示例
2013-12-09
JS HTML CSS DOM chm文档
2011-12-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人