2017年07月_蘑菇丁

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 cdh安装hadoop平台根目录空间不足如何解决

目前大部分公司安装操作系统时给根仅有50G，但是cdh的lib 和日志都放在/var下，时间长了空间会爆解决方法：1.至少给根100G的空间2.只能做软连接连到其他盘阵下具体操作步骤如下：/data是外挂的盘阵后者你自己大的路径cp -r -p /var/log /data/;mv /var/log /var/log_bak;cd /var/ ;ln -s /data

2017-07-19 16:27:54 2672

原创研究tableas可视化破解博客

http://blog.csdn.net/bdchome/article/details/54136926

2017-07-14 17:35:30 275

原创 hive里如何快速查看表中有多少记录数

方法一：在hue界面的hive下找到相应的表,即可看到表的行数和大小等信息。方法二编写脚本，[root@namenode01 hive]# cat count_tables.sh myorder=1while read line;doeval "hive --database tpc_ds -S -e 'select \"$myorder\" a

2017-07-11 11:05:56 30593

2017年已经过去一半了，在过去的一年里收货颇丰，从去年9月中旬到今天，一直在研究hadoop组件，很感谢公司给我这个机会，在刚进入这家公司时是以大数据测试工程师进入的，因为以前我的工作都是和oracle相关的维护工作，来了这家公司尽然没有oracle数据库，每天工作量也不大，正好公司要发展大数据，没有敢接这个活，我就傻傻的接下来了，经过3个月的痛苦学习，我才初步了解大数据是做什么的，才能熟练的搭

2017-07-04 12:15:58 339 1