#大数据框架
希望头发巨多的妹子
越来越好
展开
-
大数据框架的应用
推荐系统 基于大数据的综合健康服务平台 城市管理,安防领域 金融,高频交易,肉眼看不到,一瞬间 销售行业:关联购买行为 餐饮行业:线下门店布局。 电信行业,挽留用户 能源行业,智能电表。对用户海量数据进行分析。 体育娱乐:投拍影视剧,球队训练计划, 安全领域:防御网络攻击,犯罪率, 政府领域:选举策略 推荐系统: 长尾现象, 不需要摆货, 冷门商品销售比热门还要多。 目标群体,找到需要买冷门商品的用户。个性化推荐 推荐方法: 专家推荐 基于统计推荐,容易实现 基于内容的推荐 协同过滤推荐,最成功的原创 2020-06-10 17:50:33 · 217 阅读 · 0 评论 -
大数据框架---图计算--2020.6.3
#图计算原创 2020-06-03 18:23:15 · 192 阅读 · 1 评论 -
大数据框架--数据可视化代码--2020.5.31
index.jsp <%@ page pageEncoding="UTF-8"%> <!DOCTYPE html> <html> <head> <meta charset="utf-8" /> <meta name="viewport" content="width=device-width, initial-scale=1.0" /> <title>用户行为分析</title原创 2020-05-31 19:00:08 · 784 阅读 · 0 评论 -
大数据框架-流计算--5.27
hadoop批处理 Spark实时批处理 Storm流计算框架 ####流数据计算处理流程: 真正实时性,不断推送查询结果。 #####适用场景 电商 Super Mario,处理流程 实时交通,防止交通拥堵 ####框架 Storm是Twitter公司开发的一个框架 Yahoo S4 ###Spark Streaming、Samza以及三种流计算框架 ####Spark Streaming是基于内存的,运行速度快,比MapReduce好很多 Samza 选择 ...原创 2020-05-27 18:15:04 · 398 阅读 · 0 评论 -
大数据框架4-29HBase
列式存储,比行式存储效率高 olap原创 2020-04-29 17:43:38 · 103 阅读 · 0 评论 -
大数据框架运行的错误---(已解决)hive语句--2020.4.22
要知道group by和order by的用法 group by是按照某一类分组 order by 一般是排序 两者可以共存,几乎缺一不可 例题: 按省分类汇总(把sql语句补上) Select province,count(province) from log group by province; ...原创 2020-04-22 17:55:08 · 160 阅读 · 0 评论 -
大数据框架-----3.11----2
第三讲:分布式文件系统HDFS 3.1 分布式文件系统 3.2 HDFS简介 3.3 HDFS相关概念 3.4 HDFS体系结构 3.5 HDFS存储原理 3.6 HDFS数据读写过程 3.7 HDFS编程实践 分布式存储+分布式处理 实时性不高,海量流数据,不适合大规模小文件存储,不支持多用户写入及修改文件,不支持多用户写入及修改 3.3 HDFS相关概念 块...原创 2020-03-11 22:15:22 · 82 阅读 · 0 评论 -
大数据框架-----3.10----2
Apache下的开源软件 开源是分布式计算平台 各种原研开发hadoop应用 两大核心 HDFS MapReduce分布式并行编辑框架 可以用离线仓库hive pig原创 2020-03-11 17:10:07 · 87 阅读 · 0 评论 -
大数据框架-3.4----1
物联网推动了大数据的进程 Dremel 1s1TB的数据 大数据的影响:事务理论 全样而非抽样 效率而非精确 相关而非因果 大数据的应用: 纸牌屋的火爆 谷歌流感预测 大数据关键技术 分布式存储,分布式处理 批处理 MapReduce批处理计算模式的典型代表 Spak实时性比上一个好,可高效迭代计算 流计算 S4 Storm Flume 图计算 ...原创 2020-03-04 17:04:01 · 149 阅读 · 0 评论