![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
辅助组件
大数据平台中的一些辅助功能组件
BigData攻城狮
不为力所弯,不为欲所牵。
展开
-
SVN客户端 TortoiseSVN安装教程(图文步骤教程)
前言原本好好的Git用的挺好的,结果到了公司需要用SVN。。。心碎了一地SVN版本:TortoiseSVN-1.10.1.28295-x64-svn-1.10.2官网:tortoisesvn.net/downloads.html安装步骤:一:双击执行安装程序 点击Next下一步二:直接下一步三:更改存放路径(也可以选择默认)四:点击 Install 开始安装安装完成点击 完成后 在桌面右键看到如下效果即可对于我来说我还是喜欢中文(...原创 2020-07-01 18:25:52 · 1836 阅读 · 0 评论 -
ETL - Kettle基础入门(实战篇)
前言:记录一些Kettle的常用操作。原创 2020-06-28 18:56:56 · 1355 阅读 · 0 评论 -
如果你不会使用Kettle进行无中生有,那你还是好好跟着这篇文章操作一遍!!
你在。无中生有、暗度成仓,你在凭空想象、凭空捏造。。。业务场景:现在有一个需求,需要计算出我们数据中每个季度的、每个月的、每周一到周日的、节假日、休息日、工作日的数据指标。此时节假日、休息日、工作日并不能使用SQL直接计算出来,所以我们可以先搞出一张存储着这个日期是否为节假日、休息日、工作日的这样一张日期类型表。然后在在与业务数据表进行一个Join不就有结果了吗。原创 2020-06-06 13:30:10 · 567 阅读 · 0 评论 -
Hadoop:ApacheSqoop安装部署
环境:VMware15.5hadoop-2.6.0-cdh5.14.0sqoop-1.4.6.bin__hadoop-2.0.4-alphahive-1.1.0-cdh5.14.0jdk1.8安装上传sqoop到Linux解压到指定目录修改配置文件拷贝一份原始的配置文件复制成新的配置文件cp sqoop-env-template.sh sqoop-env.shVi s...原创 2019-12-08 19:30:20 · 226 阅读 · 1 评论 -
Hadoop:Flume实时日志采集组件集成搭建
环境:VMware15.5 hadoop-2.6.0-cdh5.14.0 jdk1.8 apache-flume-1.8.0Flume安装部署:Flume的安装非常简单 上传安装包到数据源所在节点上 然后解压 tar -zxvf apache-flume-1.8.0.tar.gz 然后进入flume的解压目录,修改conf下的flume-env.sh,在里...原创 2020-02-09 18:41:51 · 259 阅读 · 0 评论