B05 - 007、大数据分析系统

版权声明:本文为博主原创文章,遵循 CC 4.0 by-sa 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_42464054/article/details/92685515
初学耗时:0.5h

注:CSDN手机端暂不支持章节内链跳转,但外链可用,更好体验还请上电脑端。

一、大数据分析系统
  1.1  概念、分类。
  1.2  网站流量日志数据分析系统。



记忆词:

  流转流程:收集、存储、计算、分析、展示

  时效性:实时、离线


B05 - 999、大数据组件学习② - Hadoop


ギ 舒适区ゾ || ♂ 累觉无爱 ♀





一、大数据分析系统

  1.1 ~ 概念、分类。

    1.1.1 .  数据分析主要功能。
  • 数据分析系统的主要功能是从众多外部系统中,采集相关的业务数据,集中存储到系统的数据库中。
  • 系统内部对所有的原始数据通过一系列处理转换之后,存储到数据仓库的基础库中;然后,通过业务需要进行一系列的数据转换到相应的数据集市,供其他上层数据应用组件进行专题分析或者展示。
    1.1.2 .  数据的流转流程。
  • 根据数据的流转流程,一般会有以下几个模块:数据收集(采集)、数据存储、数据计算、数据分析、数据展示等等。
  • 当然也会有在这基础上进行相应变化的系统模型。
    1.1.3 .  数据分析的时效性。
  • 按照数据分析的时效性,我们一般会把大数据分析系统分为实时、离线两种类型。
  • 实时数据分析系统在时效上有强烈的保证,数据是实时流动的,相应的一些分析情况也是实时的。
  • 而离线数据分析系统更多的是对已有的数据进行分析,时效性上的要求会相对低一点。时效性的标准都是以人可以接受来划分的。

离线计算(处理):处理历史数据,面向过去分析。称之为批(batch)处理。

实时计算(处理):处理当下实时产生的数据,称之为流(stream)式处理。

  1.2 ~ 网站流量日志数据分析系统初识。

alt

  • 网站流量数据统计分析,可以帮助网站管理员、运营人员、推广人员等实时获取网站流量信息,并从流量来源、网站内容、网站访客特性等多方面提供网站分析的数据依据。
  • 从而帮助提高网站流量,提升网站用户体验,让访客更多的沉淀下来变成会员或客户,通过更少的投入获取最大化的收入。
    1.1.1 .  技术上。

可以合理修改网站结构及适度分配资源,构建后台服务器群组,比如:
1、辅助改进网络的拓扑设计,提高性能。
2、在有高度相关性的节点之间安排快速有效的访问路径。
3、帮助企业更好地设计网站主页和安排网页内容。

    1.1.2 .  业务上。

1、帮助企业改善市场营销决策,如把广告放在适当的 Web 页面上。
2、优化页面及业务流程设计,提高流量转化率。
3、帮助企业更好地根据客户的兴趣来安排内容。
4、帮助企业对客户群进行细分,针对不同客户制定个性化的促销策略等。

  • 终极目标是:改善网站的运营,获取更高投资回报率(ROI)。也就是赚更多的钱。


忽如一夜春风来,千树万树梨花开。

- - - - - - - - - - - - - - - - - - - - - - - - - - - -

^ 至此,大数据分析系统完成。


- - - - - - - - - - - - - - - - - - - - - - - - - - - -


※ 世间诱惑何其多,坚定始终不动摇。

在关系模式R(U,F)中,如果X→Y,存在X的真子集X1,使X1→Y,称函数依赖X→Y为:


A、平凡函数依赖。
B、部分函数依赖。
C、完全函数依赖。
D、传递函数依赖。

B
alt



忽如一夜春风来,千树万树梨花开。

- - - - - - - - - - - - - - - - - - - - - - - - - - - -


注:CSDN手机端暂不支持章节内链跳转,但外链可用,更好体验还请上电脑端。

我知道我的不足,我也知道你的挑剔,但我就是我,不一样的烟火,谢谢你的指指点点,造就了我的点点滴滴:)!



忽如一夜春风来,千树万树梨花开。


展开阅读全文

没有更多推荐了,返回首页