【项目】用户画像
【项目】用户画像
北京小辉
余辉,硕士毕业于中科院,从事IT行业12年。专注于大数据、云数据、用户画像、推荐算法。在数据团队担任过的角色:研发、架构师、负责人、讲师。数据知识产权:出版大数据书籍【1】本,论文【2】篇,软著【6】篇,专利【65】篇。
展开
-
通过fastjson解析json数据工具
目录一、原始数据内容二、通过fastjson解析json数据一、原始数据内容eventLogJson.txt{ "u": { "cookieid": "HsOorABPB", "account": "05289", "email": "[email protected]", "phoneNbr": "20096655112", "birthday": "2002-01-1...原创 2019-12-15 20:33:04 · 437 阅读 · 0 评论 -
Hive中row_number()函数用法详解及示例
目录一、Hive 中row_number()函数介绍二、使用示例三、总结四、附录在Oracle中,我们经常会用到row_number() over(partition by clo1 order by clo2 desc) 方法来取表中clo1 重复记录clo2最大的一条或几条记录,那在Hive上row_number()是否存在这个函数,其具体的用法是怎么样的呢?下面我们通过具体的示...原创 2019-04-26 10:51:17 · 12468 阅读 · 0 评论 -
HBase BulkLoad批量写入数据实战
目录1.概述2.内容2.1 实现原理2.2. 生成HFile文件2.3. 执行预览2.4 使用BulkLoad导入到HBase2.4.1 代码实现导入2.4.2 使用HBase命令进行导入2.5 验证3.总结1.概述在进行数据传输中,批量加载数据到HBase集群有多种方式,比如通过HBase API进行批量写入数据、使用Sqoop工具批量导数到HBase集群、使用Map...原创 2019-11-18 16:20:02 · 522 阅读 · 0 评论 -
DSP、SSP、RTB、ADX、DMP(概念通俗解释)
DSP:需求方平台比如小米想要投放一个新机发布的广告,那么他想在各大网站如网易、新浪UC等地方投放这条新机信息,但他不可能一个一个的去谈,费时费财不说,效率非常低。于是他就去了一个平台,把打广告的钱冲进去,也就是广告费,然后在这个平台里选择投放的媒体,比如UC、新浪、网易等,然后跟淘宝一样的完成结算。OK,这类似于淘宝的平台就是DSP,里面有很多的ssp提供的媒体小米把钱冲进去了,DSP平...原创 2019-11-09 19:48:25 · 3142 阅读 · 0 评论