2018年12月_栗子ma

原创【Flume】通过Hue提交Oozie SSH Action用命令启动Flume脚本报错Unable to find java executable.

【背景】在配置好Flume后，在控制台通过flume-ng agent --conf /* --conf-file /* --name agent Dflume.root.logger=INFO,console命令启动Flume Agent没有问题。但是将这个命令通过Oozie SSH Action运行的时候却发现，Sink的目录没有结果文件，且ps -ef | grep flume也没有Flum...

2018-12-13 15:43:01 1501

原创【Oozie】SSH Workflow报错之Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).

【问题】添加workflow，拖拽一个ssh，user and host填写USER@HOST，ssh command填写一个最简单的ll命令，保存，submit，报错：Caused by: java.io.IOException: Not able to perform operation [ssh -o PasswordAuthentication=no -o KbdInteractiveD...

2018-12-12 18:25:14 2937

原创【Oozie】解决通过Hue界面提交Oozie Workflow和Coordinator时区问题的三个步骤

【问题一】Hue界面中显示提交Coordinator和Workflow的时间和真正的时间不匹配【背景】提交Coordinator的时候是下午五点，但是界面上显示的是凌晨1点，判断是时区问题【解决】打开Cloudera Manager的页面，打开Hue服务的页面，点击配置，搜索time会出现timezone的配置，将洛杉矶时区改成Asia/Shanghai【注意】没有Asia/Beiji...

2018-12-11 17:49:23 1560

原创【CDH】Error: JAVA_HOME is not set and could not be found.

错误一：hdfs dfs -mkdir -p /flume/mysqlPermission denied: user=root, access=WRITE, inode="/":hdfs:supergroup:drwxr-xr-x这些类似的权限问题都属于同类问题，他是我说我们的执行Hadoop命令的用户没有，执行权限。刚开始我想解决问题的思路是，将当前用户授权。（这种想法是不正确的，不...

2018-12-06 16:23:13 3134

转载【Oozie】CDH是如何通过Hue提交Oozie定时任务的？

【原文链接】https://www.cnblogs.com/mr-ivan/p/6593550.html 提交oozie定时作业 1、进入hue界面，点击workflows工作流，编辑workflows。 2、点击create创建工作流。 3、本文以hive2作业sql任务为例,拖拽hive2到action区域。 4、例子是为车次表每天定时添加指定分...

2018-12-05 18:33:41 687

转载【MySQL】CentOS7安装MySQL7并更改初始化密码

1、官方安装文档http://dev.mysql.com/doc/mysql-yum-repo-quick-guide/en/2、下载 Mysql yum包http://dev.mysql.com/downloads/repo/yum/下载到本地再上传到服务器，或者使用wget 直接下载wget http://repo.mysql.com/mysql57-communit...

2018-12-05 18:26:07 486

翻译【MySQL】Error “No package mysql-server available” while Installing mysql

【原文链接】https://www.techietown.info/2017/07/error-no-package-mysql-server-available-while-installing-mysql-server/Mysql is a popular open source relational database management system (RDBMS). It is wi...

2018-12-05 18:04:23 435

sinat_40431164的博客