lhhd_llz的博客

导读：面对爆炸式增长的数据，如何建设高效的数据模型和体系，对这些数据进行有序和有结构地分类组织和存储，避免重复建设和数据不一致性，保证数据的规范性， 是大数据系统建设不断追求的方向。定位建设统一的、规范化的数据接入层（ ODS ）和数据中间层（ DWD和DWS ），通过数据服务和数据产品，服务于大数据系统建设 ，即数据公共层建设。核心从业务架构设计到模型设计，从数据研发到数据服务，做到数据可管理 、可追溯、可规避重复建设。价值提供标准化的（ Standard ）、共享的（ S...

数据

一、前言数据来源于天池的2020-04-13的“UserBehavior.csv”。数据集包含了2017年11月25日至2017年12月3日之间，有行为的约一百万随机用户的所有行为（行为包括点击、购买、加购、喜欢）。数据集的每一行表示一条用户行为，由用户ID、商品ID、商品类目ID、行为类型和时间戳组成，并以逗号分隔。二、数据结构用户行为表ub结构如下：列英文名列中文名说明user_id用户ID整数类型，序列化后的用户IDitem_id商品ID整数类型，序列化后