自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(9)
  • 收藏
  • 关注

原创 ssh 那些事

想必使用linux 的童鞋都会用到ssh。今天就简单分享以下ssh的配置 centos生成 ssh-keygen -t rsa -P ""将公钥拷贝到cdh01上面,这样就可以免密码登陆到cdh01,多说一句,看过有些帖子,还是用 cp  id_rsa.pub 到authorized_keys 中,从今天起大家都可以使用下面的这个命令( ssh-copy-id   xx)了,说明以下,必须提前在h...

2018-04-26 18:14:21 181

原创 centos 普通用户配置sudo 权限

在linux系统里面,root权限太牛逼,所以都想拥有,but  too  hard今天分享一个 将普通用户配置有sudo 权限,直接进入正题。注意:root权限下操作。将sudoer添加写权限:chmod u+w /etc/sudoers追加如下内容:echo "hadoop  ALL=(root) NOPASSWD:ALL" >> /etc/sudoers收回写权限:chmod u...

2018-04-26 18:02:59 937

原创 centos 搭建cdh本地源

相信不少童鞋在使用CDH的时候,难免会遇到困难, 安装的困难,国外源更新速度满且失败那么今天分享以下在centos 中搭建本地源的一些。第一检查有没有安装httpd,如下图所示,通常centos系统会自带查看httpd的运行状态:开启启动;sudo chkconfig httpd on将文件放入以下路径:成功后应该是这个样子的:配置源 yum源。需要在 hosts文件中配置对应的映射。这样本地源就...

2018-04-26 17:51:03 425

原创 hive高级应用之不进入交互,执行 hive sql

多话不说,直接入正题:

2018-04-25 17:56:44 957 1

原创 hive高级应用之 调用 sql脚本 并将结果存入到文件中

hive -f  /xxx/xxx/xx.sql    ./result.txt多话不说,直接进入主题,示例入下:结果:

2018-04-25 17:51:52 3559

原创 impala Shell 简单使用

用过hive的童鞋应该知道,hive在做聚集函数操作的时候,后者比较复杂的查询,会触发MapReduce,而impala 则不会。Impala Shell命令参考Impala shell的命令分为一般命令,查询特定选项以及表和数据库特定选项,如下所述。通用命令helpversionhistoryshell (or) !connectexit | quit以下是一个简单的impala shell  ...

2018-04-25 17:38:23 2970

原创 hive 之hive.cli.print.header 与hive.cli.print.current.db

对于刚接触hive  的童鞋,设置这2个参数无非添加了可视性。显示当前数据库,以及查询表的行头信息设置以后的效果:

2018-04-25 17:02:13 4765

原创 Spark 的word Count

研究过一段时间的spark了,今天来分享以下Spark 的 wordcout核心代码如下文档内容

2018-04-25 16:27:01 204

原创 ubuntu下安装jupyter notebook

最近接触到notebook,简单分享下安装和简单使用。以下摘取自官网。先决条件:Python虽然Jupyter以许多编程语言运行代码,但Python是安装Jupyter Notebook本身的要求(Python 3.3或更高版本,或Python 2.7)。使用Anaconda安装Jupyter我们强烈建议使用Anaconda Distribution安装Python和Jupyter ,其中包括Py...

2018-04-25 15:48:35 35305 2

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除