互联网电商大数据
文章平均质量分 68
houxiaoqin
这个作者很懒,什么都没留下…
展开
-
互联网电商大数据环境 ——大数飓数据分析实践培训精华笔记(一)——简介入门
互联网电商大数据环境——数据分析实践培训精华笔记(一)工作内容项目:DW数据库建设/经分/客户精准营销/推荐系统需求/移动端数据分析数据:流量数据/交易数据B2C/会员与活动数据/物流与配送数据/内部财务数据数据产品举例:淘宝数据魔方/腾讯用户画像/京东罗盘/客户标签工作事宜平台工作:系统不好用/上线/工具开发/权限控制/开发监控程序/报错数据开发:抽取原创 2015-08-11 09:56:18 · 2471 阅读 · 0 评论 -
互联网电商大数据环境 ——大数飓数据分析实践培训精华笔记(二)——BI构建
BI构建BI应用架构BI底层:数据源——ETL——BI数据仓库 BI服务:交互式信息板、报告并发布、即席分析、预先检测和警报、离线分析、MS Office插件、Web服务BI应用:销售、服务和联系中心、市场营销、订单管理和执行、供应链、财务、人力资源BI系统架构数据采集层--ETL--数据整合层——前端展示层数据采集层:(ERP系统、CPP系统、TIME原创 2015-08-11 13:37:47 · 1129 阅读 · 0 评论 -
互联网电商大数据环境 ——大数飓数据分析实践培训精华笔记(三)——数据仓库理论
数据仓库理论DW定义数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支撑管理决策。1.聚焦决策者的数据建模与分析,排除对决策无用的数据2.集成异种数据源,数据一致性(关系数据库+一般文件+联机事务处理记录)3.相对稳定:数据仓库的数据只添加罕更新保证数据稳定。通常需要三种数据访问:数据初始化装入、数据的添加和数据查询访问。4.反映历史变化。原创 2015-08-11 15:00:41 · 986 阅读 · 0 评论 -
互联网电商大数据环境 ——大数飓数据分析实践培训精华笔记(四)——维度建模基础理论
维度建模基础理论事实表事实表保存了大量业务度量数据(即事实)的表。最有用的事实是数字类型、可加类型。事实表以粒度化分:事务粒度事实表(细)、周期快照粒度事实表、累积快照粒度事实表(粗)。事实表的粒度决定了数据仓库中数据的详细程度。事实表中一般只存放数字或标志用来做统计,如数量、收益事实表举例:维ID,维ID,收益,数量,支出,毛利维度表用户分析数据的原创 2015-08-11 15:47:27 · 1417 阅读 · 0 评论 -
互联网电商大数据环境 ——大数飓数据分析实践培训精华笔记(五)——数据仓库维度建模实例
维度建模实例库存管理业务建模案例1. 选定某一业务过程,如:库存管理业务2.根据各用户的需求(关注的主题),定义该业务处理的粒度。主题一:矿厂中每种产品库存水平的日快照主题二:每种特定产品的仓库库存事务每日情况主题三:每种特定产品每日的入库装运情况3.选定每个事实表维度库存水平 事实表维度:日期、矿厂、产品仓库库存事务 事实表维度:日期、仓库、产品、原创 2015-08-12 01:11:44 · 3447 阅读 · 0 评论 -
互联网电商大数据环境 ——大数飓数据分析实践培训精华笔记(六)——电商核心业务知识之订单商品模块
电商核心业务知识订单商品模块(9张表)--订单主要信息表drop table if exists itqsc.ods_b2c_orders;create external table itqsc.ods_b2c_orders(order_id bigint, -订单ID(主键)order_no string, -订单号order_date timestam原创 2015-08-13 14:26:12 · 1492 阅读 · 1 评论 -
互联网电商大数据环境 ——大数飓数据分析实践培训精华笔记(八)——电商核心业务知识之订单商品模块三
订单指标表计算#!/bin/bash#======#dm_b2c_orders_goods.sh 这里用shell来调用SQL#订单指标表计算#======DT=`date -d '-1 day' "+%Y-%m-%d" `注意date -d ‘-1 day’表示取前一天或者sysdate=`date "+%Y-%m-%d"`脚本传参数法原创 2015-08-14 13:37:13 · 1942 阅读 · 0 评论 -
互联网电商大数据环境 ——大数飓数据分析实践培训精华笔记(九)——电商核心业务知识之订单商品模块
商品信息汇总表select user_id, sum(casewhen pay_type not in (‘退货’,’拒收’) then goods_amountend) p_sales_cnt,-排除退拒销售数量sum(casewhen pay_type not in (‘退货’,’拒收’) then goods_price * go原创 2015-08-14 13:42:31 · 1567 阅读 · 0 评论 -
互联网电商大数据环境 ——大数飓数据分析实践培训精华笔记(七)——电商核心业务知识之订单商品模块
订单宽表#!/bin/bash#======#dm_b2c_orders.sh 这里用shell来调#订单宽表——两个表关联#======DT=`date -d '-1 day' "+%Y-%m-%d" `注意date -d ‘-1 day’表示取前一天或者sysdate=`date "+%Y-%m-%d"`脚本传参数法if [$1];原创 2015-08-14 13:26:20 · 1537 阅读 · 0 评论