- 博客(5)
- 收藏
- 关注
RSS订阅转载 hive数据倾斜总结
本文转载自：http://blog.csdn.NET/lovingprince/article/details/7264549几个比较特殊的点都提到了，大家可以作为参考。在做Shuffle阶段的优化过程中，遇到了数据倾斜的问题，造成了对一些情况下优化效果不明显。主要是因为在Job完成后的所得到的Counters是整个Job的总和，优化是基于这些Counters得
2017-06-28 17:08:10
554
原创 cascading helloworld 案例
Cascading是一个数据处理的API和查询处理计划，用于定义，共享数据处理工作流，还能在单一计算节点或分布式计算集群上执行数据处理工作流。在单一计算节点，Cascading的本地模式(local mode)可以在部署到集群之前，用于测试代码和处理本地文件。在一个部署了Apache Hadoop的分布式计算集群上，Cascading在hadoop API上增加了一个抽象层，大大简化了Hadoop
2017-06-27 14:24:47
449
转载 git提交代码到远程服务器
在已有的Git库中搭建新库，并且将本地的git仓库，上传到远程服务器的git库中，从而开始一个新的项目首先，在本地新建文件夹abc，进入到abc里面，然后git init。这样就在本地初始化了一个git项目abc。然后，登录到远程的git服务器上，到gitrepo目录下面，mkdir abc.git。然后进入abc.git目录。git --bare init。这样就在服务器端建立了一
2017-06-26 16:07:13
1151
转载 Teradata学习笔记
1. LIKE用法select first_name,last_name from employee where last_name like all('%E%','%S%');select first_name,last_name from employee where last_name like any/some('%E%','%S%'); Teradata缺省不区分大小写,
2017-06-23 10:37:49
2824
转载 Eclipse 使用技巧之 ---- 查看本类调用和被调用列表
转自：http://tianjun309.iteye.com/blog/854382当工程复杂的情况下，用眼睛去人工查看调用情况是很费力也没必要的。我们需要用 Eclipse 来做这点。（1） 我们查看本类调用他类情况可以直接看 import 。（2） 如果要查看本类被其它类的调用情况，使用下面方法。 （3） 可以查看到所有调用此类的地方。
2017-06-22 10:13:28
378
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人