hadoop大数据
文章平均质量分 79
疯狂码农8385
一条喜欢捣鼓代码热爱新技术的咸鱼。
展开
-
flume案例(一):自定义拦截器案例实现
在该案例中,我们以端口数据模拟日志,以是否包含”sxsy.com”模拟不同类型的日志,我们需要自定义 interceptor 区分数据中是否包含”sxsy.com”,将其分别发往不同的分析系统(Channel)。原创 2022-12-02 13:01:29 · 390 阅读 · 0 评论 -
flume学习笔记(一):安装flume
这是本人近期学习flume的笔记,供和我一样投身大数据技术海洋的小白有个参考。本笔记使用的flume版本:flume1.9。原创 2022-12-01 10:56:20 · 447 阅读 · 0 评论 -
hadoop环境搭建(一):环境准备
近期,学校开始了大数据课程,带着学生从零到有一步一步架设大数据集群,现将具体步骤记录,以便更多初涉大数据的小白们有个参考,欢迎评论区留言讨论。原创 2022-11-30 09:32:01 · 1373 阅读 · 1 评论 -
Hadoop集群高可用配置
最近在学习hadoop大数据技术,自己动手搭建了HA集群,为记录学习过程,特将搭建过程记录在博客。文中的各配置文件均来源于我的自己的配置,只需修改为自己的主机名和路径就可以使用,给和我一样初涉大数据的小白们提供个参考。原创 2022-11-29 22:42:03 · 1508 阅读 · 0 评论