大数据
meihuiziaaaaaa
这个作者很懒,什么都没留下…
展开
-
Kettle使用的依赖
我使用的是kettle7.1.0版本,使用的时候出现 发送邮件乱码,需要javax.mail-1.6.2.jar这个依赖sqlserve驱动 依赖sqljdbc.jarmysql驱动依赖 mysql-connector-java-5.1.47.jar...原创 2020-04-01 12:18:54 · 1514 阅读 · 0 评论 -
CDH5.10.2离线配置hadoop-lzo压缩
ClouderaManager之CDH-LZO配置 CDH-LZO配置下载和CDH版本对应的hadoop-lzo版本如下: 下载地址:http://archive.cloudera.com/gplextras5/parcels/需要下载如下三个文件:GPLEXTRAS-5.4.0-1....转载 2019-12-10 09:58:55 · 250 阅读 · 0 评论 -
CDH5.10.2 离线配置hadoop-lzo压缩
ClouderaManager之CDH-LZO配置 CDH-LZO配置下载和CDH版本对应的hadoop-lzo版本如下: 下载地址:http://archive.cloudera.com/gplextras5/parcels/需要下载如下三个文件:GPLEXTRAS-5.4.0-1....转载 2019-12-10 09:56:32 · 249 阅读 · 0 评论 -
centos7.X hadoop集群同步时间
1 、安装ntp服务yum install ntp ntpdate -y设置192.168.31.101为主服务器 其他的为客户端,添加如下设置restrict 192.168.0.0 mask 255.255.255.0 nomodify notrapserver cn.pool.ntp.org perfer #网络时间同步server 192.168.31.101服务开启ser...原创 2019-06-30 18:07:58 · 267 阅读 · 0 评论 -
CDH目录结构
一、总结目的因为CDH集群的配置、日志、jar包以及安装文件的目录非常多,而且分散,每次绕进去就有种绕不出来的感觉。所以,下决心总结一下,防止自己后面采坑。二、关键目录1.开启应用目录:默认可以直接敲命令行/opt/cloudera/parcels/CDH/bin查询# lsavro-tools &n...转载 2019-12-09 18:15:41 · 878 阅读 · 1 评论 -
解决maven仓库默认不支持cdh JAVAJDBC连接hive
https://blog.csdn.net/weixin_40803329/article/details/80846062原创 2019-10-30 18:17:12 · 394 阅读 · 0 评论 -
Oozie基础入门
前言: 因为工作需要用到oozie,但是晚上的资料确实越看越迷茫,经过很大的努力,终于折腾清楚了,这里,做一个总结,帮助后来者更好地进行入门,当然,粗鄙之言,难免疏漏,欢迎交流指正 引入: 对于我们的工作,可能需...转载 2018-12-28 16:28:48 · 462 阅读 · 0 评论 -
大数据学习路线
原文:https://blog.csdn.net/zys_1997/article/details/78358992 转 大数据学习路线 看到一个博主写的大数据学习路线,看了比较心动,想着自己可以先在Java的道路上继续努力,打好基础。这篇文章也许以后会有用,就转载如下:当我说要做大数据工程师时他们都笑我,直到三个月后……...转载 2018-12-12 13:48:25 · 3545 阅读 · 0 评论 -
关于ssh连接不上的一些问题
报错如下:telnet: connect to address ip:22: Connection refused网上查看一大堆没有效果,在错误的路上浪费半天分析如下:显示端口无法连接,我首先查看22端口是否开启netstat -tnl |grep 22 结果不显示,后来想到22端口是sshd的服务,一国一查看ssh服务是否开启 systemctl status sshd.seri...原创 2019-09-21 12:58:16 · 1887 阅读 · 0 评论