niubility分享专栏
文章平均质量分 81
分享 学习
白眼黑刺猬
技术分享 ,线上线下授课
微信 17710299606
展开
-
IT大佬推荐-大数据学习指导路线,从此不迷路
零基础学习大数据指导学习路线!IT从业者转行大数据指导学习路线!您值得拥有更多学习资料WX:17710299606 免费获取学习资料原创 2021-05-28 12:37:26 · 277 阅读 · 0 评论 -
视频直播实时项目
视频链接基于“艺人直播平台”业务背景的flink实时数据分析(实时数仓)项目,基于主流的实时数据分析系统技术架构实现,内含各类直播平台实时数据分析需求场景,各种flink技能点实战(含源码级修改),是巩固flink技能,快速获取flink实战熟练度不可多得的课程!业务背景示例相关报表可视化示例相关技术点示例实时统计拼团相关的指标示例拼团的主表:tb_groupon拼团的明细表:tb_groupon_users拼团的...原创 2021-04-26 13:17:15 · 625 阅读 · 0 评论 -
艺人直播-Flink实时数仓
视频链接基于“艺人直播平台”业务背景的flink实时数据分析(实时数仓)项目,基于主流的实时数据分析系统技术架构实现,内含各类直播平台实时数据分析需求场景,各种flink技能点实战(含源码级修改),是巩固flink技能,快速获取flink实战熟练度不可多得的课程!业务背景示例相关报表可视化示例相关技术点示例实时统计拼团相关的指标示例拼团的主表:tb_groupon拼团的明细表:tb_groupon_users拼团的...原创 2021-04-26 13:16:53 · 825 阅读 · 1 评论 -
大型动态规则实时市场营销系统
视频地址简单来说,本系统,核心是一个基于事件驱动且可进行动态规则计算的实时系统;在技术上,它是通用的;本套架构及系统内核,不仅可以用于“实时运营”,也可以用于“实时风控”,“实时推荐”,“实时交通监控”等场景。运营场景举例:下单促付款,新品发布信息精准送达;动态规则发布管理本系统可以在线进行规则的灵活定制,新增,修改,发布,停用,无需停机,无需修改代码实时效果监控本系统,在核心规则引擎之外,也集成了大量metric及跟踪数据输出,能在系统中及系...原创 2021-04-26 13:13:04 · 566 阅读 · 0 评论 -
flink最新实战项目视频
视频地址简单来说,本系统,核心是一个基于事件驱动且可进行动态规则计算的实时系统;在技术上,它是通用的;本套架构及系统内核,不仅可以用于“实时运营”,也可以用于“实时风控”,“实时推荐”,“实时交通监控”等场景。运营场景举例:下单促付款,新品发布信息精准送达;动态规则发布管理本系统可以在线进行规则的灵活定制,新增,修改,发布,停用,无需停机,无需修改代码实时效果监控本系统,在核心规则引擎之外,也集成了大量metric及跟踪数据输出,能在系统中及系...原创 2021-04-26 13:11:36 · 528 阅读 · 0 评论 -
flink实时项目
视频地址简单来说,本系统,核心是一个基于事件驱动且可进行动态规则计算的实时系统;在技术上,它是通用的;本套架构及系统内核,不仅可以用于“实时运营”,也可以用于“实时风控”,“实时推荐”,“实时交通监控”等场景。运营场景举例:下单促付款,新品发布信息精准送达;动态规则发布管理本系统可以在线进行规则的灵活定制,新增,修改,发布,停用,无需停机,无需修改代码实时效果监控本系统,在核心规则引擎之外,也集成了大量metric及跟踪数据输出,能在系统中及系...原创 2021-04-26 13:11:00 · 1206 阅读 · 0 评论 -
程序员的买醉胜微醺,不喝的去和小盆友一桌
大家喝的是啤酒,这时你入座了……你给自己倒了杯可乐,这叫低配置。你给自已倒了杯啤酒,这叫标准配置。你给自己倒了杯茶水,这茶的颜色还跟啤酒一样,这叫木马。你给自己倒了杯可乐,还滴了几滴醋,不仅颜色跟啤酒一样,而且不冒热气还有泡泡,这叫超级木马。你的同事给你倒了杯白酒,这叫推荐配置。 人到齐了,酒席开始了。 你先一个人喝了一小口,这叫单元测试。 你跟旁边的人说哥们咱们随意,这叫交叉测试。 但是他说不行,这杯要干了,这叫压力测试。 于是你说那就大家一起来吧,这原创 2021-04-19 14:41:48 · 230 阅读 · 0 评论 -
zookeeper频繁异常问题分析
1.1操作系统信息1.1.1CPU信息从上述可以看出在问题点CPU使用率并不高,故排除CPU问题。1.1.2内存信息CM监控界面并无内存信息,无法提供图片。但问题期间,监控机器内存,发现还有剩余,故排除内存问题。1.2ZKFAILOVER日志信息2017-09-0109:45:57,390 INFO org.apache.zookeeper.ClientCnxn: Cli...原创 2021-01-14 13:43:44 · 3166 阅读 · 0 评论 -
大数据架构笔记
何谓五横,基本还是根据数据的流向自底向上划分五层,跟传统的数据仓库其实很类似,数据类的系统,概念上还是相通的,分别为数据采集层、数据处理层、数据分析层、数据访问层及应用层。同时,大数据平台架构跟传统数据仓库有一个不同,就是同一层次,为了满足不同的场景,会采用更多的技术组件,体现百花齐放的特点,这是一个难点。具体见下图示例,这张图是比较经典的,也是妥协的结果,跟当前网上很多的大数据架构图都可以作一定的映射。数据采集层:既包括传统的ETL离线采集、也有实时采集、互联网爬虫解析等等。数据处理层:.原创 2021-01-02 13:44:36 · 898 阅读 · 0 评论 -
最新前端技术解读
时光荏苒,非比寻常的一年即将过去。在这过去的一年中,与其说前端的平稳期即将到来,不如说前端反而进入了技术深水区。换言之,在全栈和多端的影响下,前端领域里“术业有专攻”的时代已经到来。如今的前端早已不再拘泥于满足页面展示,而是开始延展到通过全栈来闭环产品。这表明前端已经有能力透过业务深入产业,继而影响商业结果。这种表象的改变背后是本质的转变,从更为宏观的角度来说,前端正在通过持续的技术革新和技术融合不断突破自身边界,进而重新定义自身价值。在这种大变革的时代背景下,腾讯 IMWeb 前端团队也正在与时俱.原创 2021-01-02 12:39:48 · 1139 阅读 · 0 评论 -
Niubility (分享一) Flink 在快手实时多维分析场景的应用
摘要:作为短视频分享跟直播的平台,快手有诸多业务场景应用了 Flink,包括短视频、直播的质量监控、用户增长分析、实时数据处理、直播 CDN 调度等。此次主要介绍在快手使用 Flink 在实时多维分析场景的应用与优化。主要内容包括: Flink 在快手应用场景及规模 快手实时多维分析平台 SlimBase-更省 IO、嵌入式共享 state 存储 Flink 在快手应用场景及规模首先看 Flink 在快手的应用场景和规模。1. 快手应用场景...原创 2020-06-15 22:10:05 · 3096 阅读 · 3 评论