鱼弦:CSDN内容合伙人、CSDN新星导师、51CTO(Top红人+专家博主) 、github开源爱好者(go-zero源码二次开发、游戏后端架构 https://github.com/Peakchen)
idea已经新建好了项目,也添加了依赖项,然后要如何用代码来完成这个项目,求解答 工程开发1:新建子包hdfsClient,完成hdfs客户端定时日志采集任务的开发; 任务a:新建LogsTimingCollections类,实现定时日志采集任务及其调度; 任务b:新建LogsTimingCollectionsTask类,实现日志采集线程任务; 任务c:调度定时日志采集任务并执行,观察控制台输出日志
首先需要明确一下任务的实现思路:
- 使用 Hadoop API 完成 HDFS 的读写操作;
- 使用 Timer 定时器来触发日志采集任务;
- 通过多线程实现并发日志采集。
接下来,我们逐一完成上述任务。