yfx000的专栏

二、数据层 1、SQL GBase MonetDB 2、NoSQL HBase Cassandra MongoDB 3、缓存 Redis Memcached 三、计算层 1、内存计算 Spark Shark 2、IMDG Drill Impala 3、数据仓库

背景： 本文在大数据分析平台背景下，针对用户行为分析、用户画像、个性化推荐场景，介绍首先需要做的数据采集与传输。 采集这类数据一般通过“埋点”的方法，记录用户提交了订单、后台库存的变化，从而为后续大数据分析提供基础。 一、前端埋点方案 1、代码埋点 事件发生时，显示调用代码发送记录 国外：Google Analytics、Mixpanel 国内：百度统计、友盟、Talking

一、查询引擎的基本概念 1、查询引擎的特点 （1）可以访问结构化数据：二维表 （2）提供SQL或类SQL的查询接口 （3）返回结构化的查询结果 2、评价指标 （1）可扩展性：单机/分布式 （2）支持的数量级：GB/TB/PB （3）支持的数据格式：文本/特定格式 （4）响应时间：毫秒/秒级/分钟级 （5）查询能力：完全支持SQL/不支持JOIN/不支持SQL 3、查询