- 博客(1)
- 收藏
- 关注
原创 大数据作业-使用Kafka做日志收集
大数据作业使用Kafka做日志收集需要收集的信息:1、用户ID(user_id)2、时间(act_time)3、操作(action,可以是:点击:click,收藏:job_collect,投简历:cv_send,上传简历:cv_upload)4、对方企业编码(job_code)1、HTML可以理解为拉勾的职位浏览页面2、Nginx用于收集用户的点击数据流,记录日志access.log3、将Nginx收集的日志数据发送到Kafka主题:tp_individual架构:HTML+Nginx
2021-01-26 00:56:43
1000
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人