hbase
ousongsong
这个作者很懒,什么都没留下…
展开
-
Azkaban任务调度
需求现有用户点击行为数据文件,每天产生会上传到hdfs目录,按天区分目录,现在我们需要每天凌晨两点定时导入Hive表指定分区中,并统计出今日活跃用户数插入指标表中。日志文件clickloguserId click_time indexuid1 2020-06-21 12:10:10 a.htmluid2 2020-06-21 12:15:10 b.htmluid1 2020-06-21 13:10:10 c.htmluid1 2020-06-21 15:10:10 d.htmluid2原创 2020-11-12 02:11:47 · 1532 阅读 · 0 评论 -
好友关系双向
需求在社交网站,社交APP上会存储有大量的用户数据以及用户之间的关系数据,比如A用户的好友列表会展示出他所有的好友,现有一张Hbase表,存储就是当前注册用户的好友关系数据,如下需求使用Hbase相关API创建一张结构如上的表删除好友操作实现(好友关系双向,一方删除好友,另一方也会被迫删除好友)例如:uid1用户执行删除uid2这个好友,则uid2的好友列表中也必须删除uid1分析:1.创建如上结构的表2.分析,当uid1用户执行删除uid2这个好友,则uid2的好友列表中也必须删除原创 2020-11-09 03:41:35 · 528 阅读 · 0 评论